Word Recognition - das Programm

2.2 die Oberfläche

Words

Die Words Oberfläche besteht aus einer Liste, welche die aktuellen vom Nutzer definierten Wörter enthält und drei Knöpfe um diese zu verändern. Zur besseren Vorstellung kann man annehmen, dass die Liste ein Wörterbuch ist. Jedem Wöterbucheintrag werden mehrere Sprachbeispiele zugeordnet die später zur Erkennung benutzt werden.

"New Word" Button

Wenn der Nutzer diesen Knopf betätigt wird er aufgefordert ein neues Wort einzugeben. Wenn er dies getan hat wird das Wort in die Liste übernommen.

"Remove Word" Button

Um ein Word aus der Liste zulöschen, muss der Nutzer dieses selektieren und den Knopf betätigen.

"Record Sample" Button

Nachdem der Nutzer mehrere Wörter in das sogenannte Wörterbuch eingegeben hat, kann er zu jedem Wort beliebig viele Beispiele aufnehmen. Dazu muss er ein Wort auswählen und den Knopf betätigen.

Recognition Samples

Die Recognition Samples Oberfläche ermöglicht dem Nutzer schon vorhandene Beispieldateien zu laden und diese in einer Liste anzuzeigen.

"Load Sample" Button

Dieser ermöglicht dem Nutzer eine Beispieldatei zuladen. Nachdem er die Datei auf dem Datenträger ausgewählt hat muss er diese noch einem Wort zuordnen.

"Remove Sample" Button

Dieser ermöglicht dem Nutzer eine Beispieldatei aus der Liste zuentfernen. Dazu muss der eine Beispieldatei aus der Liste auswählen und den Knopf drücken.

"Recognize Word" Button

Wenn der Nutzer diesen Knopf drückt versucht das System die Beispieldatei dem vorher gewählten Wort zuzuordnen. Der Nutzer wird informiert ob dies möglich war oder nicht.

Learning

Die Learning Oberfläche steuert das Training der SOM und verwaltet die zum Profil gehörende SOM.

"Learn" Button

Der Learn Knopf startet das Lernen der SOM. Dies setzt voraus, dass das aktuelle Profil Trainingsbeispiele enthält. Der Fortschritt wird in der darüberliegenden Fortschritsanzeige präsentiert.

"Stop Learning" Button

Dieser Knopf beendet das Lernen.

"Winner Map" Button

Dieser Knopf dient während des Organisierens der Anzeige der SOM. Darauf werden die Gewinnerkoordinaten des aktuellen Wortes abgebildet jedoch ohne Wertigkeit wie oft sie aufgetreten sind.

"Map Output" Button

Dieser Button öffnet eine Darstellung der SOM, in welcher der Output angezeigt wird.

"Save Map" Button

Dieser Knopf speichert die aktuelle Karte im Profilverzeichnis ab.

"Load Map" Button

Dieser Knopf lädt eine im Profilverzeichnis verfügbare Karte.

Preprocessing

Der "Preprocessing" Button öffnet eine Oberfläche welche die Vorbreitung der Audiodaten visualisiert. Man kann über die linke Klappbox die Kategorie der Beispieldateien auswählen. Über die rechte können dann einzelne Beispieldateien selektiert werden. Dann werden die Wavesample Werte in der oberen Grafik angezeigt und der Featurevektor in der unteren Grafik. Mit dem "Next" und "Previous" Knopf kann dann jedes einzelne Zeitfenster (Phonem) angesteuert werden.

Recognition

Der "Recognition" Button öffnet eine Oberfläche die zum Testen der Worderkennung. Mit dem "Record" Knopf lässt sich eine neue Beispieldatei aufnehmen. Diese kann mit dem "Recognize" Knopf versucht zu erkannt werden. Dem Nutzer wird dann das Wort mitgeteilt welches erkannt wurde. Im Darstellungsfeld werden die Wavesample Werte der Beispieldatei angzeigt. Mit dem "Next" und "Previous" Knopf kann dann jedes einzelne Phonem angesteuert werden.

Winner Neurons

Dieses Fenster gibt dem User die Möglichkeit die Organisationsphase der SOM zu überwachen. Das Darstellungfeld repräsentiert die SOM bzw. ihre Neuronen. Die blaue gekennzeichneten Felder sind die ermittelten Winnerneuronen des entsprechenden Wortes. Der Name der Audiodatei wird der Übersichtlichkeit wegen darunter angezeigt. Hinzuweisen ist darauf, dass die Anzeige keinerlei Wertung vornimmt. Wird ein Neuron mehrmals als Winnerneuron ermittelt, ist das in dieser Darstellung nicht ersichtlich.
Durch die Anzeige dieses Fensters, wird der Organisationsprozess unterbrochen. Durch den "Next" Button kann dieser jedoch schrittweise durch den User weitergeführt werden. Demnach werden im nächsten Schritt die Winnerneuronen des nächsten Wortes angezeigt.
Der "Close" Button schliesst das Fenster und der Organisationsprozess wird wieder ununterbrochen weitergeführt.

SOM Output

Dieses Fenster bietet eine Steuerungsmöglichkeit der Lernphase der SOM bzw. des "darüber" angeordneten neuronalen Netzes - der s.g. "Goldberg Schicht".
Auch hier wird wieder die SOM selbst bzw. ihre Neuronen dargestellt. Die blau gefärbten Neuronen stellen Winnerneuronen dar. Die unterschiedliche starke Färbung gibt die Häufigkeit an, mit welcher das entsprechende Neuron als Winnerneuron ermittelt wurde. Der genaue Wert kann in der Legende abgelesen werden.
Der Name der Audiodatei des entsprechenden Wortes ist unter der SOM Darstellung angegeben.
Der unterbrochene Lernprozess kann auch hier durch den User mit Hilfe des "Next" Buttons mit dem nächsten Wort fortgeführt werden.
Wird der Dialog, z.B. per "Close" Button geschlossen, läuft der Lernprozess weiter.


	2.2 die Oberfläche

	Words Die Words Oberfläche besteht aus einer Liste, welche die aktuellen vom Nutzer definierten Wörter enthält und drei Knöpfe um diese zu verändern. Zur besseren Vorstellung kann man annehmen, dass die Liste ein Wörterbuch ist. Jedem Wöterbucheintrag werden mehrere Sprachbeispiele zugeordnet die später zur Erkennung benutzt werden. "New Word" Button Wenn der Nutzer diesen Knopf betätigt wird er aufgefordert ein neues Wort einzugeben. Wenn er dies getan hat wird das Wort in die Liste übernommen. "Remove Word" Button Um ein Word aus der Liste zulöschen, muss der Nutzer dieses selektieren und den Knopf betätigen. "Record Sample" Button Nachdem der Nutzer mehrere Wörter in das sogenannte Wörterbuch eingegeben hat, kann er zu jedem Wort beliebig viele Beispiele aufnehmen. Dazu muss er ein Wort auswählen und den Knopf betätigen. Recognition Samples Die Recognition Samples Oberfläche ermöglicht dem Nutzer schon vorhandene Beispieldateien zu laden und diese in einer Liste anzuzeigen. "Load Sample" Button Dieser ermöglicht dem Nutzer eine Beispieldatei zuladen. Nachdem er die Datei auf dem Datenträger ausgewählt hat muss er diese noch einem Wort zuordnen. "Remove Sample" Button Dieser ermöglicht dem Nutzer eine Beispieldatei aus der Liste zuentfernen. Dazu muss der eine Beispieldatei aus der Liste auswählen und den Knopf drücken. "Recognize Word" Button Wenn der Nutzer diesen Knopf drückt versucht das System die Beispieldatei dem vorher gewählten Wort zuzuordnen. Der Nutzer wird informiert ob dies möglich war oder nicht. Learning Die Learning Oberfläche steuert das Training der SOM und verwaltet die zum Profil gehörende SOM. "Learn" Button Der Learn Knopf startet das Lernen der SOM. Dies setzt voraus, dass das aktuelle Profil Trainingsbeispiele enthält. Der Fortschritt wird in der darüberliegenden Fortschritsanzeige präsentiert. "Stop Learning" Button Dieser Knopf beendet das Lernen. "Winner Map" Button Dieser Knopf dient während des Organisierens der Anzeige der SOM. Darauf werden die Gewinnerkoordinaten des aktuellen Wortes abgebildet jedoch ohne Wertigkeit wie oft sie aufgetreten sind. "Map Output" Button Dieser Button öffnet eine Darstellung der SOM, in welcher der Output angezeigt wird. "Save Map" Button Dieser Knopf speichert die aktuelle Karte im Profilverzeichnis ab. "Load Map" Button Dieser Knopf lädt eine im Profilverzeichnis verfügbare Karte. Preprocessing Der "Preprocessing" Button öffnet eine Oberfläche welche die Vorbreitung der Audiodaten visualisiert. Man kann über die linke Klappbox die Kategorie der Beispieldateien auswählen. Über die rechte können dann einzelne Beispieldateien selektiert werden. Dann werden die Wavesample Werte in der oberen Grafik angezeigt und der Featurevektor in der unteren Grafik. Mit dem "Next" und "Previous" Knopf kann dann jedes einzelne Zeitfenster (Phonem) angesteuert werden. Recognition Der "Recognition" Button öffnet eine Oberfläche die zum Testen der Worderkennung. Mit dem "Record" Knopf lässt sich eine neue Beispieldatei aufnehmen. Diese kann mit dem "Recognize" Knopf versucht zu erkannt werden. Dem Nutzer wird dann das Wort mitgeteilt welches erkannt wurde. Im Darstellungsfeld werden die Wavesample Werte der Beispieldatei angzeigt. Mit dem "Next" und "Previous" Knopf kann dann jedes einzelne Phonem angesteuert werden. Winner Neurons Dieses Fenster gibt dem User die Möglichkeit die Organisationsphase der SOM zu überwachen. Das Darstellungfeld repräsentiert die SOM bzw. ihre Neuronen. Die blaue gekennzeichneten Felder sind die ermittelten Winnerneuronen des entsprechenden Wortes. Der Name der Audiodatei wird der Übersichtlichkeit wegen darunter angezeigt. Hinzuweisen ist darauf, dass die Anzeige keinerlei Wertung vornimmt. Wird ein Neuron mehrmals als Winnerneuron ermittelt, ist das in dieser Darstellung nicht ersichtlich. Durch die Anzeige dieses Fensters, wird der Organisationsprozess unterbrochen. Durch den "Next" Button kann dieser jedoch schrittweise durch den User weitergeführt werden. Demnach werden im nächsten Schritt die Winnerneuronen des nächsten Wortes angezeigt. Der "Close" Button schliesst das Fenster und der Organisationsprozess wird wieder ununterbrochen weitergeführt. SOM Output Dieses Fenster bietet eine Steuerungsmöglichkeit der Lernphase der SOM bzw. des "darüber" angeordneten neuronalen Netzes - der s.g. "Goldberg Schicht". Auch hier wird wieder die SOM selbst bzw. ihre Neuronen dargestellt. Die blau gefärbten Neuronen stellen Winnerneuronen dar. Die unterschiedliche starke Färbung gibt die Häufigkeit an, mit welcher das entsprechende Neuron als Winnerneuron ermittelt wurde. Der genaue Wert kann in der Legende abgelesen werden. Der Name der Audiodatei des entsprechenden Wortes ist unter der SOM Darstellung angegeben. Der unterbrochene Lernprozess kann auch hier durch den User mit Hilfe des "Next" Buttons mit dem nächsten Wort fortgeführt werden. Wird der Dialog, z.B. per "Close" Button geschlossen, läuft der Lernprozess weiter.