As máquinas entendem a África? Esta é a pergunta que a Meta começou a responder este mês quando publicou um artigo de pesquisa (pdf) detalhando planos para melhorar a precisão com que os algoritmos de IA decodificam as línguas africanas.
O plano, que deve analisar 55 dos idiomas marginalizados da África e melhorar a maneira como as máquinas de IA os traduzem no Facebook, Instagram e Wikipedia, pode impulsionar a inclusão tecnológica na criação e adoção de soluções tecnológicas para a África.
O CEO Mark Zuckerberg postou em seu perfil no Facebook que sua empresa usará um supercomputador para conduzir as traduções por meio de recursos avançados de processamento de linguagem natural (NLP).
“Também trabalhamos com tradutores profissionais para fazer uma avaliação humana, o que significa que falantes nativos dos idiomas avaliam o que a IA produziu. A realidade é que um punhado de idiomas domina a web, então apenas uma fração do mundo pode acessar o conteúdo e contribuir para a web em seu próprio idioma. Queremos mudar isso”, explica.
Objetivo: nenhuma língua é deixada para trás
Atualmente, cerca de 4 bilhões de pessoas estão bloqueadas dos serviços de internet porque seus idiomas são marginalizados e não falam um dos poucos idiomas em que o conteúdo está disponível. A África Subsaariana representa 13,5% da população mundial, mas menos de 1% da população mundial. resultado da pesquisa em grande parte devido às barreiras linguísticas.
“Os modelos de IA exigem muitos dados para ajudá-los a aprender, e não há muitos dados de treinamento traduzidos por humanos para esses idiomas. Por exemplo, existem mais de 20 milhões de pessoas que falam e escrevem luganda, mas exemplos dessa linguagem escrita são extremamente difíceis de encontrar na internet”, diz Meta no jornal.
A empresa espera que tradutores humanos a ajudem a desenvolver um benchmark confiável que possa avaliar automaticamente a qualidade da tradução para muitos idiomas marginalizados e com poucos recursos.
O modelo de IA de código aberto também traduzirá mais 145 idiomas em todo o mundo que não são suportados pelos sistemas de tradução atuais.
“Chamamos esse projeto de No Language Left Behind. Para dar uma ideia de escala, o modelo de 200 idiomas tem mais de 50 bilhões de parâmetros, e nós o treinamos usando nosso novo Research SuperCluster, que é um dos supercomputadores de IA mais rápidos do mundo”, diz Zuckerberg.
Isso permitirá mais de 25 bilhões de traduções todos os dias nos aplicativos Meta e ajudará as máquinas de IA da Meta a mostrar o conteúdo mais interessante nas mídias sociais em idiomas locais e recomendar anúncios mais relevantes.
Avanço para plataformas de mídia social
Isso também pode ser um avanço em áreas em que plataformas de mídia social como TikTok, YouTube, Facebook e WhatsApp têm lutado, como conter discurso de ódio político, bullying, body shaming, desinformação, tráfico humano, exploração sexual e notícias falsas na África. uma vez que os vídeos, texto e áudio são publicados em línguas vernáculas.
A falta de ferramentas de tradução de alta qualidade para centenas de idiomas na África significa que milhões de pessoas hoje não conseguem acessar conteúdo digital ou participar totalmente de conversas online ou mercados digitais em seus idiomas nativos preferidos.
“A África é um continente com uma diversidade linguística muito alta e barreiras linguísticas existem todos os dias. No futuro, imagine visitar seu grupo favorito do Facebook, encontrar uma postagem em igbo ou luganda e poder entendê-la em seu próprio idioma com o clique de um botão”, diz Balkissa Ide Siddo, diretora de políticas públicas para a África da Meta .
Em maio deste ano, o Google adicionou 10 novos idiomas africanos à sua ferramenta Google Translate, mesmo que os africanos continuem corrigindo o problema linguístico da Wikipedia.
