Chunking

Letra C

Cómo se dividen los documentos antes de la recuperación. A menudo marca la diferencia entre IA que funciona y IA que alucina.

Actualizado:

Definición operativa

El chunking es cómo se dividen los documentos antes de la recuperación. Suena aburrido. Destruye silenciosamente la mayoría de los sistemas RAG. El chunking de tamaño fijo ignora el significado. El chunking semántico lo respeta. A menudo marca la diferencia entre IA que funciona e IA que alucina.