LAION y Open Assistant: ¿Qué son y mucho más sobre ambos? Desde Linux

Desde el año pasado y durante todo este presente año les hemos compartido grata y oportunamente sobre las novedades tecnológicas relacionadas con el campo de la tecnología de Inteligencia Artificial. Por ello, hemos dedicado algunas publicaciones a temas como «Las Inteligencias Artificiales más conocidas y usadas IA de código abierto» y «Los Proyectos de Inteligencia Artificial 2023: Gratuitos, libres y abiertos». Y últimamente algunas relacionadas con proyectos específicos de Chatbots webs en forma de sitios webs, clientes de escritorio y terminal o complementos de Navegadores webs.

Pero, en esta oportunidad en especial, hablaremos tanto de una Organización como de un Chatbot web que tienen mucho que aportar en este ámbito. Sobre todo, porque apuestan duro al uso de la filosofía del código abierto para lograr sus objetivos. Y estos son la «Organización LAION y el Chatbot web Open Assistant».

Inteligencia artificial: Las más conocidas y usadas IA de código abierto

Y si eres de aquellos que aún no estás enterado de que van los proyectos y desarrollos de Inteligencia Artificial en general, es importante aclarar nuevamente que:

La Tecnología de la Inteligencia Artificial es una tecnología que se basa en la simulación de procesos de Inteligencia Humana por parte de máquinas, especialmente sistemas informáticos. Estos procesos incluyen el aprendizaje, el razonamiento y la autocorrección. Además, las aplicaciones particulares de IA incluyen el uso de sistemas expertos, y tecnologías de reconocimiento de voz y visión artificial. Inteligencia Artificial: Las más conocidas y usadas IA de código abierto

Sobre la Organización LAION y el Chatbot web Open Assistant

¿Qué es la Organización LAION?

Según el sitio web oficial de LAION, esta organización se autodescribe como:

Una organización en pro de la construcción de una Red abierta de inteligencia artificial a gran escala. Una organización verdaderamente abierta, 100% sin ánimo de lucro y 100 gratis. Por ello, proporciona conjuntos de datos, herramientas y modelos para liberar la investigación del aprendizaje automático. Para así, lograr fomentar la educación pública abierta y un uso de los recursos más respetuoso con el medio ambiente mediante la reutilización de conjuntos de datos y modelos existentes.

Adicionalmente, otros datos importantes sobre la misma son los siguientes:

Tienen como objetivo fundamental el lanzamiento de conjuntos de datos abiertos, código y modelos de aprendizaje automático y el enseñar los conceptos básicos de la investigación de ML a gran escala y la gestión de datos. Para ello, se enfocan en crear modelos, conjuntos de datos y código reutilizables, para evitar o mitigar la necesidad de entrenar desde cero todo el tiempo a los desarrollos creados. De forma tal, de promover un uso eficiente de los recursos energéticos y de cómputo para enfrentar los desafíos del cambio climático. Y para lograr conseguir dicho objetivo, se financian vía donaciones y subvenciones públicas de investigación.

Y por ahora, tiene como proyectos destacados creados, entre muchos otros y modelos y varias herramientas, los siguientes:

• LAION-400M: Un conjunto de datos de pares de texto e imagen de 400 millones bajo un acceso abierto.
• LAION5B: Un conjunto de datos que consta de 5850 millones de pares de imagen-texto filtrados por CLIP, que presenta varios índices de vecinos más cercanos, una interfaz web mejorada para exploración y generación de subconjuntos, y puntajes de detección para marca de agua, NSFW y detección de contenido tóxico.
• LAION-Coco: Un conjunto de datos de 600 millones de subtítulos generados usando BLIP de LAION2B-en.
• LAION-Translated: Un conjunto de datos de 3B de ejemplos traducidos de LAION5B.
• CLIP H/14: El clip de código abierto más grande del mundo.

Para más información sobre dicha organización y sus proyectos de código abiertos se puede acceder a su sección de GitHub.

¿Qué es el Chatbot web Open Assistant?

Según el sitio web oficial de Open Assistant (OA), este Chatbot web es descrito como:

Un asistente con inteligencia artificial de código abierto basado en Chat, cuya visión es crear un modelo de lenguaje grande que pueda ejecutarse en una sola GPU de consumo de alta gama. Aunque, con algunas modificaciones, tambien se busca que, Open Assistant pueda interactuar fácilmente con otras aplicaciones de terceros, así como recuperar información de bases de datos e Internet.

Adicionalmente, otros datos importantes sobre el mismo son los siguientes:

• Está disponible para su registro, uso y contribución al proyecto mediante el siguiente enlace.
• OA es un proyecto organizado por la organización LAION y desarrollado por un equipo de voluntarios en todo el mundo.
• Actualmente, no poseen una API pública disponible para OA, de forma que terceros puedan hacer uso de la misma para otros proyectos.
• Para lograr hacer funcionar a OA el desarrollo usa las siguientes tecnologías: FastAPI para el backend de Python para la aplicación de recopilación de datos y el backend de inferencia. Mientras que, la interfaz está construida con NextJS y Typescript. Además, la base de código de ML se basa en gran medida en PyTorch y utiliza HuggingFace Transformers, así como Accelerate, DeepSpeed, Bitsandbytes, NLTK y otras bibliotecas.
• Todo el código de OA tiene licencia de Apache 2.0, por lo cual, está disponible para una amplia gama de usos, incluido el uso comercial. Mientras que, los modelos usados basados ​​en OA Pythia licenciarán bajo la licencia Apache 2.0 y los modelos basados ​​en OA LLaMa se lanzarán restricciones de licencia dado que es propiedad de la Empresa Meta (Facebook). Y por último, Los datos de OA se publican bajo una licencia Creative Commons que permite una amplia gama de usos, incluido el uso comercial.

Para más información sobre este proyecto de código abierto se puede acceder a su documentación oficial, sección FAQ y sección en GitHub.

Resumen

En resumen, esperamos que tanto la «Organización LAION como el Chatbot web Open Assistant» en el tiempo tenga un gran éxito, no solo en favor del desarrollo del campo de la Inteligencia Artificial, sino en pro del aumento y uso del software de código abierto, y también del software libre. Y si eres de los que, les gusta probar cuanto Chatbot web de Inteligencia Artificial existen, sobre todo cuando son públicos y gratuitos, pues te invitamos a probar y participar en el desarrollo de OA, y luego compartir con nosotros vía comentarios tu experiencia sobre el mismo.

Y, si te ha gustado esta publicación, no dejes de compartirla con otros en tus sitios webs, canales, grupos o comunidades favoritas de redes sociales o sistemas de mensajería. Por último, recuerda visitar nuestra página de inicio en «DesdeLinux» para explorar más noticias. Y también, unirte a nuestro canal oficial de Telegram de DesdeLinux, o este grupo para más información sobre el tema de hoy.