Статьи по тегу: chunking

Вы загружаете сотни страниц корпоративной документации в векторную базу данных, настраиваете RAG-пайплайн и задаете тестовый вопрос. В ответ генеративная модель выдает уверенную галлюцинацию. Вы открываете логи ретривера и видите причину: алгоритм нашел нужный фрагмент текста, но обрезал его ровно на середине ключевого определения. Вторая половина осталась в следующем блоке, который не прошел порог релевантности и был отброшен.