Mozilla Company testando o complemento com a implementação de um sistema experimental de navegação por voz que permite utilizar comandos de voz para realizar ações padrão no navegador. Atualmente apenas comandos em inglês são suportados. Para ativar, você precisa clicar no indicador na barra de endereço e emitir um comando de voz (o microfone fica silenciado em segundo plano).
O acréscimo proposto difere dos sistemas típicos de controle de voz por não ter como foco a substituição do mouse e teclado na manipulação da interface, mas se posicionar como uma ferramenta auxiliar no processamento de perguntas em linguagem natural, atuando como assistente de voz. Por exemplo, o usuário pode enviar comandos como “como está o tempo agora”, “encontrar a aba do Gmail”, “silenciar o som”, “salvar como PDF”, “aumentar o zoom”, “abrir site mozilla”.
Após a instalação do add-on, o usuário é solicitado a conceder o direito de coletar e analisar padrões de voz, com sua transferência para os servidores Mozilla para aumentar a precisão do serviço (os dados são coletados anonimamente e não são transferidos a terceiros). Ao mesmo tempo, o envio de telemetria com dados de voz é opcional e pode ser recusado.
Em Os comandos da publicação soeren-hentzschel.at são processados usando o serviço de reconhecimento de fala do Google (Google Cloud Speech Service), mas em código complementar Servidores Mozilla (as configurações podem ser substituídas durante a construção). No arquivo de política de privacidade, capacidade de enviar dados de voz para Mozilla e Google Cloud Speech.
Fonte: opennet.ru