Chunk
Un chunk è un blocco di testo in cui un sistema di intelligenza artificiale suddivide un documento per analizzarlo, indicizzarlo e recuperarlo. Il chunking è l’operazione che produce questi frammenti, di solito corrispondenti a un paragrafo o a una sezione coerente.
Nei sistemi basati sul RAG ogni chunk viene trasformato in un embedding e confrontato con la domanda. Alla generazione arrivano solo i blocchi più pertinenti, staccati dal resto della pagina e valutati ciascuno per conto proprio. Nella risposta entrano quindi i frammenti che reggono anche letti da soli. Una logica simile, applicata al ranking dei singoli passaggi, era già presente nel passage ranking di Google.
In fase di scrittura il chunking sposta l’attenzione sull’autonomia di ogni blocco. Un paragrafo che rimanda a un soggetto citato più sopra, o che separa una misura dalla condizione che la rende vera, perde significato quando viene estratto e rischia di essere sostituito da un passaggio più completo di un altro sito. L’autonomia riguarda il senso, non la lunghezza: spezzare un testo in frasi brevissime o in serie di domande e risposte toglie al modello il contesto di cui ha bisogno e peggiora la lettura per le persone.
La tenuta dei blocchi si può controllare prima della pubblicazione, quando correggerla costa meno. AI Engine di SEOZoom analizza un contenuto con una logica vettoriale simile a quella dei motori AI, ne misura la pertinenza rispetto alla keyword e ai testi concorrenti e indica se la pagina è pronta per essere scelta o se altri trattano il tema in modo più completo.
