El gigante estadounidense de semiconductores Nvidia anunció recientemente que respaldará el desarrollo de inteligencia artificial generativa basada en datos en japonés, ampliando su servicio de soporte de desarrollo de IA para empresas. Este apoyo cubrirá modelos de lenguaje grandes (LLMs) entrenados con datos en japonés, proporcionados por el Instituto Tecnológico de Tokio y el Grupo Rakuten. Esta iniciativa se enmarca dentro de un esfuerzo más amplio de diversas naciones para desarrollar inteligencia artificial soberana, utilizando sus propias infraestructuras, datos y redes comerciales, con el fin de asegurar que los sistemas de IA se alineen con los valores, leyes e intereses locales.
La decisión de Nvidia de ampliar su servicio de soporte para incluir modelos de lenguaje entrenados en japonés se considera un paso más allá para ayudar a Japón a proteger su infraestructura crítica y fortalecer su competitividad industrial sin depender de otros países para obtener datos o recursos humanos. Esta medida también está diseñada para mejorar la seguridad económica nacional, después de que el yen experimentase caídas históricas a principios de año.
El CEO de Nvidia, Jensen Huang, subrayó en marzo de 2024 la importancia de que Japón desarrolle su propia IA generativa, evitando la dependencia de terceros que puedan recolectar datos japoneses, crear IA con ellos y luego reintroducirla en el país. “No hay razón para permitir que algún otro tercero recolecte esos datos (de Japón), cree una IA y luego la importe de vuelta a Japón”, afirmó Huang, destacando la necesidad de preservar la soberanía de los datos en el desarrollo tecnológico.
Microservicios NIM de Nvidia
En apoyo a estos esfuerzos, Nvidia ha lanzado cuatro nuevos microservicios NIM (Nvidia Inference Model) que permiten a los desarrolladores crear y desplegar aplicaciones de IA generativa de alto rendimiento con mayor facilidad. Estos microservicios son compatibles con modelos comunitarios populares, adaptados para satisfacer las necesidades regionales, mejorando la interacción del usuario mediante una comprensión más precisa y respuestas mejoradas basadas en los idiomas locales y el patrimonio cultural.
Entre los modelos disponibles se encuentran el Llama-3-Swallow-70B, entrenado con datos en japonés, y el Llama-3-Taiwan-70B, entrenado con datos en mandarín. Estos modelos regionales no solo proporcionan una comprensión más profunda de las leyes y regulaciones locales, sino que también reflejan mejor las costumbres y normas culturales. El Instituto Tecnológico de Tokio, por ejemplo, ajustó finamente el modelo Llama-3-Swallow 70B utilizando datos en japonés, permitiendo una adaptación más precisa a las aplicaciones locales.
Además, la familia de modelos RakutenAI 7B, construida sobre el modelo Mistral-7B, fue entrenada con conjuntos de datos en inglés y japonés, y está disponible como dos microservicios NIM diferentes para Chat e Instruct. Estos modelos han logrado puntuaciones líderes entre los grandes modelos de lenguaje en japonés, obteniendo el promedio más alto en el benchmark LM Evaluation Harness realizado entre enero y marzo de 2024.
Mercado asiático y global
Según la empresa de investigación de mercados ABI Research, se espera que los ingresos por software de IA generativa en la región de Asia-Pacífico alcancen los 48 mil millones de dólares para 2030, un aumento significativo desde los 5 mil millones de dólares de este año. Nvidia busca beneficiarse de este crecimiento impulsando las ventas de sus servicios en la región.
En este contexto, Nvidia AI Foundry se presenta como una plataforma esencial para que las empresas personalicen y desplieguen modelos de IA adaptados a sus procesos empresariales y expertise. Al proporcionar un conjunto completo de herramientas, incluyendo modelos fundacionales populares, la plataforma NeMo de Nvidia para ajustes finos y capacidad dedicada en la nube DGX de Nvidia, los desarrolladores pueden crear modelos personalizados empaquetados como microservicios NIM, asegurando resultados cultural y lingüísticamente apropiados.
La iniciativa de Nvidia de apoyar el desarrollo de IA generativa en japonés no solo fortalece la posición de Japón en el ámbito tecnológico global, sino que también sienta un precedente para otras naciones que buscan desarrollar IA soberana. Países como Singapur, Emiratos Árabes Unidos, Corea del Sur, Suecia, Francia, Italia e India ya están invirtiendo en infraestructura de IA soberana, y la disponibilidad de los nuevos microservicios NIM facilita que empresas, agencias gubernamentales y universidades implementen modelos de lenguaje nativos en sus propios entornos.