Os sistemas de IA frequentemente falhavam em compreender as línguas africanas, e os corpora de fala de alta qualidade e com licenças permissivas eram o principal gargalo. O Google e seus parceiros africanos também tiveram de lidar com diferenças dialetais, padrões ortográficos e ambientes de gravação irregulares.
Os parceiros fizeram da propriedade local a decisão de design. Após três anos de trabalho, o Google lançou o WAXAL, um conjunto de dados que abrange 21 línguas africanas, enquanto as organizações africanas que coletaram os dados mantiveram a propriedade. Uma licença permissiva manteve o conjunto de dados aberto para implantação comercial, e departamentos de linguística de universidades, além de caixas de gravação portáteis, ajudaram a resolver os problemas técnicos.
O lançamento produziu mais de 11.000 horas de fala a partir de quase 2 milhões de gravações, incluindo cerca de 1.250 horas de fala transcrita e mais de 20 horas de áudio de estúdio. A Universidade de Gana já o estava utilizando para pesquisas sobre saúde materna, transformando instituições locais de coletoras de dados em polos de infraestrutura de IA.
O WAXAL foi lançado com mais de 11.000 horas provenientes de quase 2 milhões de gravações; instituições africanas são proprietárias dos dados e já os utilizam para pesquisas sobre saúde materna.
Os sistemas em línguas africanas eram propensos a erros porque os dados de treinamento eram escassos e difíceis de licenciar.
A propriedade local abordou a soberania e a confiança, mantendo as pessoas que coletaram os dados no controle deles.
Uma licença permissiva permitiu que empreendedores africanos construíssem e comercializassem produtos sem intermediários do Vale do Silício.
Linguistas universitários e equipamentos de gravação projetados localmente tornaram possível uma captura de fala limpa e sensível aos dialetos.
Quando um ecossistema carece de dados locais confiáveis, dê aos contribuidores a propriedade e uma licença permissiva; a governança pode desbloquear infraestrutura, uso comercial e adoção ao mesmo tempo.
O Google afirmou que mais seis línguas já estavam em preparação, elevando o total planejado para 27, enquanto a cobertura dialetal e a ausência de diacríticos no iorubá permaneciam como questões de qualidade não resolvidas. O projeto Paza, da Microsoft, mostrou que a infraestrutura de línguas africanas liderada pela comunidade estava se tornando um campo competitivo, mas o resultado imediato do WAXAL foi um conjunto de dados de propriedade local que já apoia pesquisas e produtos futuros.
CONFIRA AS EVIDÊNCIAS
As fontes
- Google launches WAXAL: A new era for African AI sovereignty Rest of World · restofworld.org ·