Dobragem de áudio e legendas geradas por Inteligência Artificial para traduzir vídeos visualizados através do Microsoft Edge.
O Microsoft Edge está em vias de ganhar recursos de dobragem de áudio e/ou legendas traduzidas em tempo real dos vídeos visualizados nos mais variados sites. Essa opção estará disponível numa primeira fase para sites como Bloomberg, CNBC News, LinkedIn, Reuters e YouTube. A Microsoft diz que mais plataformas de vídeo serão adicionadas no futuro.
Inicialmente, será possível traduzir fontes de áudio do coreano e do espanhol para o inglês, bem como do inglês para o alemão, espanhol, italiano, hindi e russo. Mais uma vez, a Microsoft dá conta de que idiomas adicionais serão suportados posteriormente. Ao passarem o rato sobre um vídeo durante alguns segundos, um ícone de tradução vai aparecer. A Microsoft especifica que determinados conteúdos de vídeo serão mais adequados para tradução, como na área de educação, notícias e conteúdo narrativo.
O recurso de tradução de vídeo em tempo real faz parte dos novos recursos baseados em Inteligência Artificial do Microsoft Edge e da sua integração com o Copilot. Além disso, toda a tradução será realizada no próprio dispositivo, sem qualquer processamento na nuvem. Contudo, para a primeira tradução para um novo idioma, os utilizadores vão necessitar de instalar o modelo de tradução apropriado no dispositivo. Um procedimento cuja repetição não será necessária na próxima vez.
“Muitos fatores afetam a precisão da tradução, como música de fundo, número de pessoas a falar, idioma de origem, etc. Trabalhamos constantemente para melhorar a qualidade da tradução. […] O conteúdo gerado pela IA pode conter erros”, alerta a Microsoft.
Microsoft Edge também pode ajudar nas legendas
Com a chegada dos computadores Copilot+, a Microsoft revelou o Live Captions para Windows 11. Ao contar com o NPU do PC para processar tarefas de IA, qualquer fluxo de áudio beneficia da tradução em tempo real através de legendas em inglês exibidas no ecrã. Mais de 40 idiomas estão envolvidos.
O Live Captions depende da integração no nível do sistema operativo, e para o Microsoft Edge, a tradução de vídeo em tempo real (dobragem de áudio e legendas) funciona de maneira diferente.
