PaLM, la inteligencia artificial de Google que cuenta chistes

El nuevo modelo de lenguaje es capaz de programar y resolver problemas matemáticos
Foto: Google

Google presentó PaLM (Pathways Language Model), su nuevo modelo de lenguaje que es capaz de programar, resolver problemas matemáticos y explicar chistes con un porcentaje de eficiencia en el aprendizaje que le sitúan por encima de otros modelos de lenguaje creados hasta la fecha.

Google explica que PaLM ha sido entrenado con el modelo Pathways, que le ha permitido entrenar de forma eficiente un solo modelo con múltiples unidades de procesamiento tensorial (TPU) Pods, como recoge en un comunicado publicado en su blog. Se basa en el aprendizaje de 'pocos disparos', que reduce la cantidad de ejemplos necesarios en el entrenamiento con tareas específicas para adaptarlo a una sola aplicación.

Para ello, se ha usado una base de datos con 780 mil millones de tokens, que combina "un conjunto de datos multilingües" además de en inglés, que incluyen documentos web, libros, Wikipedia, conversaciones y código GitHub. También un vocabulario sin pérdidas que "preserva todos los espacios en blanco", algo que se señala como especialmente importante para programar, y la división de los caracteres de Unicode que no se encuentran en el vocabulario en bytes.

 

También te puede interesar: Meta presenta su nuevo superordenador para inteligencia artificial

 

Esta nueva inteligencia artificial alberga 540 mil millones de parámetros, cifra que supera los 175 mil millones del GPT-3 de OpenAI, el modelo de lenguaje que Google cita como pionero en mostrar que estos pueden ser usados para el aprendizaje con impresionantes resultados.

"PaLM ha demostrado capacidades innovadoras en numerosas y muy difíciles tareas", afirma Google, que ha expuesto varios ejemplos que van desde la comprensión y generación del lenguaje al razonamiento y tareas relacionadas con la programación.

Una de las pruebas que Google pone como ejemplo consiste en pedir a PaLM que adivine una película basándose en cuatro emojis: un robot, un insecto, una planta y el planeta Tierra. De entre todas las opciones (L.A. Confidential, Wall-E, León: el profesional, BIG y Rush), la inteligencia artificial elige la correcta: Wall-E.

En otra, se le pide elegir de entre una lista de palabras dos que estén asociadas a 'tropiezo' (stumble) y también acierta al seleccionar 'caída' (fall) y 'traspié' (trip).

El sistema es también capaz de resolver problemas matemáticos sencillos y hasta de explicar un chiste contextualizando y desgranando los elementos que aparecen en el mismo para darle sentido.

Google también señala que PaLM es capaz de programar traduciendo un código "de un lenguaje a otro", escribiendo código en base a "una descripción natural del lenguaje" y "solucionar errores de compilación".

 

Sigue leyendo: Presentan primer acuerdo mundial sobre ética de inteligencia artificial

 

Edición Astrid Sánchez 


Lo más reciente

Yucatán: Joaquín Díaz Mena conmemora el 215 aniversario del inicio de la Independencia de México

El mandatario celebró junto a miles de familias en la Plaza Grande de Mérida

La Jornada Maya

Yucatán: Joaquín Díaz Mena conmemora el 215 aniversario del inicio de la Independencia de México

Grito de Independencia de México tuvo rostro de mujer: Nuevos nombres fueron incorporados a las ''vivas''

Josefa Ortiz fue nombrada con sus apellidos de soltera Téllez Girón

La Jornada

Grito de Independencia de México tuvo rostro de mujer: Nuevos nombres fueron incorporados a las ''vivas''

Estefanía Mercado encabeza Grito de Independencia ante más de 50 mil personas en Playa del Carmen

Grupo Frontera amenizó la fiesta patria en el estadio Mario Villanueva

La Jornada Maya

Estefanía Mercado encabeza Grito de Independencia ante más de 50 mil personas en Playa del Carmen

'Mérida Limpia' sacó de las calles más de 2 mil 500 toneladas de desechos: Cecilia Patrón

La estrategia involucra la participación de los ciudadanos, a la policía ecológica y nuevos puntos verdes en la ciudad

La Jornada Maya

'Mérida Limpia' sacó de las calles más de 2 mil 500 toneladas de desechos: Cecilia Patrón