Semantic Chunker
Cắt tài liệu theo cấu trúc thay vì đếm ký tự, để đoạn được truy hồi là một đoạn đọc hiểu được.
Cắt theo số ký tự cố định sẽ chặt đôi một điều khoản và đưa cho mô hình hai mảnh, mà không mảnh nào nói được điều khoản đó nói gì.
Ragenta cắt theo tiêu đề, ranh giới danh sách và mép bảng, với kích thước và độ chồng lấn cấu hình được theo từng knowledge base. Bạn xem được các chunk mà một tài liệu tạo ra trước khi có ai đặt câu hỏi lên nó.