O aplicativo cliente FaceTime ‘Navi’ adiciona legendas ao vivo e legendas via SharePlay

Com o lançamento do macOS 12.1 com suporte para Apple SharePlay, o desenvolvedor Jordi Bruin acaba de lançar o Navi, um aplicativo universal que ajuda pessoas com deficiência auditiva a participarem facilmente de uma chamada do FaceTime usando legendas e anotações.

Diz Bruin, que criou recentemente o Cibo, um aplicativo iOS que ajuda a digitalizar e traduzir cardápios de restaurantes quando você viaja para o exterior. Como o Navi foi criado:

Em abril, participei de um hackathon e brinquei com a API mixToTelephonyUplink para permitir que pessoas idiotas falassem em chamadas telefônicas usando Text to Speech (…) Durante a WWDC, assisti a uma sessão de SharePlay e comecei a imaginar maneiras de concretizar a ideia de Transcrição real novamente.

Com o Navi, o cliente FaceTime ajuda os usuários:

Legendas instantâneas para suas chamadas do FaceTime Traduza as legendas recebidas em tempo real para mais de 20 idiomas Experiência personalizada em torno de uma imagem na imagem No macOS, as legendas ocultas são colocadas diretamente na janela do vídeo As legendas ocultas são criptografadas de ponta a ponta -end entre servidores Apple

Aqui estão 20 idiomas disponíveis para tradução: polonês, turco, tailandês, ucraniano, alemão (Áustria), francês (Suíça, França, Canadá), finlandês, vietnamita, italiano, sueco, alemão, japonês, português (Brasil, Portugal) , Espanhol (México, Espanha), norueguês, dinamarquês, croata, chinês (tradicional e simplificado)), holandês, inglês (Canadá, África do Sul, Filipinas e Reino Unido) e árabe (Arábia Saudita).

Embora Bruin tenha criado este aplicativo para ajudar pessoas com deficiência auditiva e outras deficiências que dificultam a participação em uma videochamada, o aplicativo também é útil para pessoas que não falam a mesma língua, mas precisam de tudo. Tempo. conversação:

O SharePlay adiciona uma API muito simples que permite aos desenvolvedores passar informações entre as pessoas durante uma chamada do FaceTime, tudo criptografado e com baixíssima latência. (…)! Eu tinha mais de 500 pessoas no TestFlight, mas como o teste me forçaria a ligar para elas, tive que encontrar maneiras melhores, então, no final, tive que fazer muito FaceTime em dispositivos diferentes. (…) E às vezes ainda fico maravilhado quando uso a função de tradução ao vivo e consigo conversar com alguém cuja língua não falo. Às vezes parece um filme de ficção científica.

Com esses dois públicos em mente, a desenvolvedora quer continuar aprimorando o Navi para deficientes auditivos e outras deficiências, já que o Navi acaba de lançar:

“Ouvi de alguns usuários com deficiência auditiva do TestFlight que ele é realmente útil, então, em primeiro lugar, gostaria de saber se há algo que eu possa adicionar para fazer o aplicativo funcionar melhor para suas necessidades específicas.”

Para usar o Navi, basta iniciar uma chamada do FaceTime, abrir o Navi e clicar no botão “Ativar legendas” para convidar outras pessoas da chamada do FaceTime para o Navi, depois basta aceitar o convite do SharePlay.

Navi está disponível gratuitamente na App Store aqui. Os usuários podem desbloquear a capacidade de usar legendas em todas as suas chamadas por um pagamento único de $ 6,99.

Para ativar o recurso de tradução ao vivo, os usuários podem comprar pacotes de tokens de tradução, que são usados ​​para traduzir as legendas recebidas, com a opção mais barata sendo $ 26,99 por 250 mil tokens.

FTC: Usamos links de geração automática de receita. Next.

Descobrir. No YouTube para mais notícias da Apple: