Presentando: Arenita
La petit arena para la inteligencia artificial y humana.
Nuestra idea sobre la evaluación de la inteligencia humana y artificial en un solo loop
Ha pasado un tiempo desde que lanzamos algo nuevo. Si has seguido nuestras actualizaciones, sabrás que casi todas las demostraciones y procesos que habíamos planeado ya están en marcha y validados por sí mismos.
Debido a que el proceso de incubación nos exige enfocarnos en un solo producto o tecnología, vimos esto como una gran oportunidad para desarrollar algo nuevo. Es también una ocasión para experimentar con diferentes stacks y arquitecturas, aprovechando lo aprendido en nuestras demos originales y nuestras experiencias recientes en otras industrias.
¿Qué es Arenita en este contexto?
Estamos creando una plataforma muy amigable para que los humanos prueben y evalúen grandes modelos de lenguaje (LLM). Funciona como cualquier otra “arena” de pruebas tipo doble-ciego, pero a una escala menor, ya que no es su único propósito.
Funciona de forma sencilla: haces una pregunta a los bots y eliges la mejor respuesta, con la posibilidad de dejar notas y observaciones. Estos chats y conversaciones se convierten básicamente en datos abiertos que compartimos con los proveedores y la comunidad para seguir entrenando y mejorando los modelos que todos usamos.
Lo que diferencia a esta plataforma es que la cuenta que crees para acceder se convierte en un perfil que califica y cuantifica tu participación mediante un esquema flexible de puntos. Los mejores participantes serán invitados a enviar su CV y realizar pruebas adicionales para comenzar a construir un perfil psicométrico. De esta manera, cualquiera puede formar parte del grupo de trabajadores del que hablamos en el Opportunities Navigator.
El servicio básico es gratuito desde el principio y, aunque las funciones avanzadas también serán gratuitas, por ahora solo están disponibles mediante invitación.
¿Qué significa “arenita”?
El nombre por sí solo revela el enfoque inicial de este ejercicio: el idioma español. Permíteme explicarlo para quienes no tengan el español (o un idioma de raíz latina) como lengua materna.
En esa familia lingüística, “arena” siempre ha significado el material o tipo de tierra; es casi la misma palabra que los romanos usaron para describir los fosos del Coliseo (harēna), que estaban cubiertos literalmente de harēna. El inglés ya tenía una palabra para “arena” (sand), por lo que cuando adoptaron la palabra arena, pasó a ser equivalente a venue que traduce “recinto” o “lugar” (en un contexto de eventos), lo cual tiene mucho sentido.
Ahora, con el uso de “la arena” en el contexto de la IA, el significado ha vuelto a dar un giro hacia un lugar de competencia y duelos. Ese es el contexto de nuestra plataforma también. En español, puedes añadir un -ito o -ita a casi cualquier palabra para indicar que es “un pequeño” de algo. En nuestro caso, una pequeña arena.
En esta región, “arena” está también asociada con “venue”; y sandbox (caja de arena) es un concepto igualmente común. Ese último también se alinea bien con lo que estamos construyendo aquí.
¿Cuál es el estado actual de Arenita?
Arenita ya está disponible para acceso anticipado. Puedes crear tu cuenta gratis ahora mismo y empezar a ganar puntos de participación para ser invitado a las funciones avanzadas.
Para el acceso básico -la parte de la arena pura- actualmente ofrecemos acceso abierto a varios modelos abiertos y locales. Estos pueden ser más lentos o menos confiables, lo cual es en realidad una buena noticia para ustedes: los errores proporcionan más “contenido” para evaluar. También pueden reportar fallos de la plataforma o de sus procesos en los campos de observación de cada respuesta.
Actualmente estamos trabajando en subvenciones y asociaciones para ofrecer los últimos modelos de todos los proveedores y para abrir las funciones avanzadas al público general. Como planeamos usar Arenita para nuestros propios procesos de selección, no tenemos prisa por dar un paso más en el ciclo de desarrollo. Quizás sea mejor lanzar todo una vez que hayamos validado el proceso completo; tener la imagen completa nos permitirá simplificarlo tanto como sea posible.
