Das Unternehmen Mozilla Testen der Erweiterung mit der Implementierung eines experimentellen Sprachnavigationssystems, das es ermöglicht, Sprachbefehle zur Ausführung typischer Aktionen im Browser zu verwenden. Derzeit wird die Verarbeitung von Befehlen nur in englischer Sprache unterstützt. Um es zu aktivieren, muss auf das Symbol in der Adressleiste geklickt und ein Sprachbefehl gegeben werden (das Mikrofon ist im Hintergrund deaktiviert).
Die vorgeschlagene Erweiterung unterscheidet sich von typischen Sprachsteuerungssystemen dadurch, dass sie sich nicht auf den Ersatz von Maus und Tastatur bei der Interaktion mit der Benutzeroberfläche konzentriert, sondern als Hilfsmittel zur Verarbeitung von Fragen in natürlicher Sprache positioniert, das die Rolle eines Sprachassistenten übernimmt. Zum Beispiel kann der Benutzer Befehle wie „Wie ist das Wetter jetzt“, „Finde den Tab mit Gmail“, „Schalte den Ton aus“, „Speichern als PDF“, „Vergrößern“, „Öffne die Website mozilla“ geben.
Nach der Installation der Erweiterung wird der Benutzer aufgefordert, das Recht zur Erfassung und Analyse von Sprachmustern zu gewähren und diese an die Server von Mozilla zur Verbesserung der Genauigkeit des Dienstes zu übermitteln (die Daten werden anonym gesammelt und nicht an Dritte weitergegeben). Die Übermittlung von Telemetriedaten mit Sprachdaten ist jedoch optional und kann abgelehnt werden.
Nach Bei der Veröffentlichung soeren-hentzschel.at erfolgt die Verarbeitung der Befehle unter Verwendung des Google-Spracherkennungsdienstes (Google Cloud Speech Service), jedoch sind im Code der Erweiterung die Server von Mozilla (Einstellungen können beim Erstellen überschrieben werden). In der Datei, die die Datenschutzrichtlinie definiert, die Möglichkeit, Sprachdaten sowohl an Mozilla als auch an Google Cloud Speech zu senden.
Quelle: opennet.ru
