ENES

Embeddings

Convertir palabras, imágenes o documentos en listas de números que capturan significado.

Un mapa de puntos donde perro, cachorro y gato están juntos y factura e impuesto quedan lejos, con un vector de números bajo uno de los puntos

Un embedding es una lista de números (un vector) que representa un contenido: una palabra, una oración, un documento entero, una imagen. Lo produce una red neuronal de manera que las cosas con significado parecido reciban números parecidos. 'Perro' y 'cachorro' quedan cerca; 'perro' y 'factura' quedan lejos. Un embedding típico tiene de unos cientos a unos miles de números.

Las computadoras no pueden comparar significados, pero comparan números muy rápido. Una vez que todo es un embedding, 'encontrá documentos parecidos a este' se convierte en 'encontrá los puntos más cercanos', un problema de geometría. Eso alimenta la búsqueda semántica (resultados que coinciden con la idea, no con las palabras exactas), las recomendaciones, la detección de duplicados y el agrupamiento.

Adentro de un LLM, cada token se convierte primero en un embedding; así entra el texto a la matemática. Afuera, los embeddings son la columna vertebral de RAG: los documentos se convierten una vez y se guardan en una base de datos vectorial, la pregunta se convierte en el momento de la consulta y se recuperan los fragmentos más cercanos.

Ejemplo: una mesa de ayuda que recibe 'se me puso negra la pantalla' tiene que encontrar el artículo 'El monitor no enciende' aunque no coincida ninguna palabra. Con embeddings, las dos oraciones quedan cerca, así que la búsqueda funciona.

Para quedarse

Para seguir leyendo

Términos relacionados

Más de IA