FURKAN SAKIZLIAI DATA ENGINEERING

RAG · DOCUMENT STRUCTURE

Chunking, parsing ve kaybolan bağlantılar

İyi chunking text ve heading, paragraph, table, figure, source relation'larını korur.

Aydınlık document yüzen segment'lere ayrılıyor; mavi çizgiler heading, table ve neighbourhood relation'larını korurken amber kesintiler lost context'i gösteriyor.
01 · PARSEReading order, element type ve table structure'ı reconstruct et.
02 · LINKParent, neighbour, reference, version ve permission'ı koru.
03 · TESTDamaged segment index'e girmeden boundary'leri test et.
TEMEL YÖNTEM

PARSE → STRUCTURE → SEGMENT → LINK → RETRIEVE → REASSEMBLE → TEST

Small hit explicit structure ve controlled context expansion ile reliable evidence olur.

CHUNK INTEGRITY TESTİ

Heading, table veya footnote içeren page seç. Chunk boundary çiz ve korunması gereken relation'ları işaretle.