Chunking semântico
Dividir um documento nos pontos em que o assunto realmente muda, em vez de num limite fixo de caracteres. Mede-se a similaridade entre frases consecutivas e marca-se a fronteira onde ela cai — assim cada chunk trata de um tópico coerente.
Mecânica: gera-se o embedding de cada frase e comparam-se as vizinhas; quando a similaridade cai abaixo de um limiar, o tópico mudou e ali fica a fronteira. O resultado são chunks de tamanhos variados, cada um cobrindo uma só coisa, com embeddings mais limpos e melhor correspondência do que cortes arbitrários no meio de um argumento. Contrapartida: o preparo é mais caro (é preciso gerar todos os embeddings antes) e o limiar exige ajuste. Difere do chunking de tamanho fixo (simples, mas desajeitado) e do baseado em estrutura (por títulos). Um passo rumo a uma indexação de RAG mais inteligente, muitas vezes combinado com o late chunking.