Ir al contenido
Del texto a las representaciones
Entiende los vectores sin equipararlos al significado humano.
Cómo funciona
Representaciones
Una tabla de embeddings asocia identificadores de tokens con vectores. Las capas siguientes los transforman y combinan con el contexto. La representación de «banco» puede depender de las palabras que lo rodean y del objetivo aprendido.
Comprobar lo aprendido
Antes de responder, formula tu explicación.
Dos vectores cercanos representan necesariamente la misma idea en todas las tareas.
Qué recordar
La cercanía depende de la representación y la métrica. Puede ayudar a recuperar documentos sin probar equivalencia de significado ni comprensión humana.
ProfundizarDel concepto al usoPoner en práctica
Fuentes científicas
- Vaswani et al. · 2017Attention Is All You NeedarXiv v7 · 2023Publicación original
Síntesis didáctica de las fuentes citadas. Los resultados dependen de las tareas, protocolos y recursos de cada publicación.