Los sistemas de IA a menudo no lograban entender las lenguas africanas, y los corpus de voz de alta calidad con licencias permisivas eran el principal cuello de botella. Google y sus socios africanos también tuvieron que lidiar con diferencias dialectales, estándares ortográficos y entornos de grabación desiguales.
Los socios hicieron de la propiedad local la decisión de diseño. Tras tres años de trabajo, Google lanzó WAXAL, un conjunto de datos que abarca 21 lenguas africanas, mientras que las organizaciones africanas que recopilaron los datos conservaron su propiedad. Una licencia permisiva mantuvo el conjunto de datos abierto para el despliegue comercial, y los departamentos de lingüística universitarios, junto con cajas de grabación portátiles, ayudaron a resolver los problemas técnicos.
El lanzamiento produjo más de 11.000 horas de voz a partir de casi 2 millones de grabaciones, incluidas unas 1.250 horas de voz transcrita y más de 20 horas de audio de estudio. La Universidad de Ghana ya lo estaba utilizando para investigación sobre salud materna, transformando a las instituciones locales de recopiladoras de datos en centros de infraestructura de IA.
WAXAL se lanzó con más de 11.000 horas procedentes de casi 2 millones de grabaciones; las instituciones africanas son propietarias de los datos y ya los están utilizando para investigación sobre salud materna.
Los sistemas para lenguas africanas eran propensos a errores porque los datos de entrenamiento eran escasos y difíciles de licenciar.
La propiedad local abordó la soberanía y la confianza, a la vez que mantenía a las personas que recopilaron los datos en control de estos.
Una licencia permisiva permitió a los emprendedores africanos construir y comercializar productos sin intermediarios de Silicon Valley.
Los lingüistas universitarios y el equipo de grabación diseñado localmente hicieron posible una captura de voz limpia y sensible a los dialectos.
Cuando un ecosistema carece de datos locales de confianza, dé a los contribuyentes la propiedad y una licencia permisiva; la gobernanza puede desbloquear a la vez la infraestructura, el uso comercial y la adopción.
Google dijo que ya había seis lenguas más en preparación, lo que eleva el total previsto a 27, mientras que la cobertura dialectal y la falta de diacríticos del yoruba seguían siendo problemas de calidad sin resolver. El proyecto Paza de Microsoft mostró que la infraestructura de lenguas africanas liderada por la comunidad se estaba convirtiendo en un campo competitivo, pero el resultado inmediato de WAXAL fue un conjunto de datos de propiedad local que ya respalda la investigación y productos futuros.
CONSULTA LAS PRUEBAS
Las fuentes
- Google launches WAXAL: A new era for African AI sovereignty Rest of World · restofworld.org ·