Descripción
Actualmente PhotonicDhtAdapter intenta procesar todo el bloque de texto entregado en un solo vector. Para soportar indexación masiva (como repositorios completos o bases de datos como CVE.org), necesitamos un motor de fragmentación (Chunking Engine).
Tareas
Descripción
Actualmente
PhotonicDhtAdapterintenta procesar todo el bloque de texto entregado en un solo vector. Para soportar indexación masiva (como repositorios completos o bases de datos como CVE.org), necesitamos un motor de fragmentación (Chunking Engine).Tareas
SemanticChunkerensynapse-infraosynapse-core.PhotonicDhtAdapter: cada fragmento debe ser vectorizado de forma independiente y emitido a la DHT con un ID secuencial o referencial.