El modelo de lenguaje GPT-3 ha sido uno de los últimos grandes ejemplos de cómo está evolucionando la inteligencia artificial en la actualidad. El uso y creación de este tipo de herramientas se está convirtiendo en una parte fundamental para el desarrollo de las tecnológicas, y en este sentido Google ha dado otro paso de gigante mostrando al mundo su nuevo modelo de lenguaje: PaLM.
A través de una entrada en su blog oficial, la compañía ha querido desvelar un ápice de lo que es capaz su LLM (acrónimo del inglés Large Language Model), y algunos ejemplos nos han resultado de lo más interesantes.
PaLM quiere superar a GPT-3, y lo ha logrado en muchos aspectos
PaLM viene de 'Pathways Language Model', un modelo de lenguaje que posee hasta 540.000 millones de parámetros, superando los 175.000 millones con los que contaba GPT-3 y alcanzando un hito en el entendimiento humano a través de la inteligencia artificial. En un riguroso documento escrito por el equipo de Google Research han explicado las múltiples funcionalidades de PaLM, un modelo de lenguaje que sorprende por la precisión de sus respuestas y 'razonamiento'.
Según afirman desde Google, PaLM ha sido entrenado utilizando una combinación del inglés y de un conjunto de datos multilingües que incluyen documentos de 'alta calidad'. Entre algunos ejemplos de estos datos se encuentran libros, Wikipedia, conversaciones, o código de GitHub. Además, la compañía asegura que han creado para PaLM un …