Sin Pockets profundos de investigación profunda.
Cuando "Deep Research" aterrió en las herramientas de alta tecnología de la información y las comunicaciones , Me estaba curiosoM SK3 ¿qué es esto?MSC4 de hechoM Sk5 Así que lo desconstruíM sk6 Y una vez entendido la arquitectura M Sk7 me he dado cuenta de que IMsc8 ya construyé la mayoría de ella M sk9
En este enfoque, la fuerza del paso de reducción elimina la necesidad de un modelo grande y costoso para producir resultados satisfactorios.
En particular, Ya disponía de muchos bloques de construcción esencialesM SK1 incluyendo multi-extracción de fuentesMSC3 extracción de entidadesMska4 gráficos de conocimientoMske5 y inserciónM Ska6 clasificación basada en Mska7 que se comparten con lucidRAG y la serie DocSummarizerMSKA8
El Comité recomienda al Estado Parte que incluya en su próximo informe periódico datos desglosados por sexo, edad y origen étnico.
En los instrumentos comerciales, M SK1Deep Research” normalmente significa una laborfMeaningful
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.
Connotativolow que planea un enfoque de investigación, hace multi-cuestión de pasos /browsingM SK3reading across lots of sources MSC4often web |+ tu archivo cargado | / | archivos conectados | МSK7 | luego escribe un informe más largo con citaciones |
Una gran parte del valor consiste en mejorar la entrada: atraer fuentes de señales más frescasM SK1 más altas - que cualquier modelo’ reducir los datos de entrenamientoMSC4 fecha de suspensiónMST5 afirmaciones de base en pruebasMst6 y reducir la posibilidad de que el modelo haga las cosasM st7
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad de oportunidades entre los hombres y las mujeres en materia de empleo, incluida la eliminación del trabajo forzoso., El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.El Comité recomienda que el Estado Parte adopte todas las medidas necesarias para garantizar la igualdad de oportunidades entre los hombres y las mujeres en materia de empleo, incluida la eliminación del trabajo forzoso. El Comité recomienda que el Estado Parte adopte todas las medidas necesarias para garantizar la igualdad de oportunidades entre los hombres y las mujeres en materia de empleo, incluida la asignación de recursos suficientes al sector privado. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad de oportunidades entre hombres y mujeres en materia de empleo, incluida la eliminación del trabajo forzoso.
El DoomSummarizer sigue el mismo flujo de trabajo, pero es’s ingeniado, por lo que la mayor parte del M SK2read + reducirMSC4 trabajo es determinista y localMST5 y el LLM se utiliza principalmente para la síntesisMSL6
Si el paso de reducción es fuerte, no se necesita un modelo grandeM SK2 caro para obtener un buen resultado.
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. y la serie DocSummarizer, Ya tenía la mayor parte de los bloques de construcción: multiM SK2 extracción de fuentes , extración de entidadesMSC4 gráficos de conocimientoMST5 inserciónM ST6 clasificación basada en el rankingM st7
El Grupo de Trabajo tal vez desee tomar nota del informe del Secretario General sobre la aplicación de las recomendaciones contenidas en el párrafo 6 supra. El Comité recomienda que el Estado Parte adopte todas las medidas necesarias para garantizar la igualdad de oportunidades entre hombres y mujeres en materia de empleo, incluida la adopción de medidas legislativas, administrativas, judiciales y de otra índole.. ¿Cómo tomar todos estos señales y fusionarlos en algo coherente con un pequeño modelo?
Que's DoomSummarizerM SK1 Named after doom scrolling, porque es doom Scrolls así que usted no tiene que ' Point it at your sourcesMSC5 set a vibeMST6 get a synthesisMst7
Pero este artículo no se refiere a la herramienta, sino a las ideas que lo hacen funcionar.
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. de la serie DocSummarizer.
Si usted quiere el terreno primero:
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. La Comisión Consultiva recomienda que el Secretario General apruebe el siguiente proyecto de resolución:.
[El Comité recomienda que el Estado Parte adopte todas las medidas necesarias para garantizar la igualdad de oportunidades entre los hombres y las mujeres en materia de empleo, incluida la eliminación del trabajo forzoso.
La RAG estándar ya realiza la extracción semántica de documentos de fragmentos: chunk documents, embed them , and fetch the topM SK3k most similar chunksMSC4
El dolor es el último paso.
¿Qué pasa si haces más trabajo? El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros en todos los niveles de vida, incluido el acceso a la educación y a la atención de salud. El Grupo de Trabajo tal vez desee tomar nota del informe del Secretario General sobre la aplicación de las recomendaciones contenidas en el párrafo 6 supra.
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. Reducir antes de generarEl Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.
flowchart TD
subgraph REDUCE["REDUCE: Distil to Signals"]
Q[Query] --> Decompose[Composite Decomposition]
Decompose --> S1[Subquery 1]
Decompose --> S2[Subquery 2]
S1 & S2 --> Fetch[Multi-Source Fetch]
Fetch --> Embed[ONNX Embed Each Item]
Embed --> Rank[6-Signal RRF Fusion]
Rank --> TextRank[TextRank Extraction]
TextRank --> NER[Entity Extraction]
NER --> Profile[Entity Profile Vectors]
Profile --> Segments[Salient Segment Extraction]
end
subgraph SYNTH["SYNTHESIZE"]
Segments --> Standard["Standard Path - 1 LLM Call"]
Segments --> LongForm["Long-Form Path - N+3 LLM Calls"]
end
style REDUCE fill:#1a1a2e,color:#e0e0e0
style SYNTH fill:#162447,color:#e0e0e0
La fase de reducción es determinista: embeddingsM SK1 ranking, extracción de entidades , TextRank≥, puntuación de segmentos. No llamadas LLMMSC6
Sincronización es el único paso LLM. Para una consulta estándar los señales reducidas son suficientemente limpias que El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. La Comisión Consultiva observa con preocupación que, a pesar de los esfuerzos realizados por el Departamento de Operaciones de Mantenimiento de la Paz y la Oficina del Alto Comisionado de las Naciones Unidas para los Refugiados (ACNUR) en relación con la repatriación voluntaria de refugiados y desplazados internos, la situación sigue siendo precaria.El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.
Para más detalles sobre este patrón, véase El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer..
Antes de que nada se reduzca, la consulta tiene que convertirse en acciones de búsqueda.
Un pequeño modelo de sentinel local (0.6B en mi casoM SK1 modo JSON, temperatura 0.1) interpreta la consulta crua en una intención estructuradaMSC4 luego un router de fuente controlado YAMLMNK5 convierte esa intención en fetches concretosMRK6
flowchart TD
Q["User Query"] --> Sentinel["Sentinel: JSON Interpretation - categories, intent, entities, - temporal hints, tone"]
Sentinel --> Router["Source Router - YAML category → source mapping"]
Router --> S1["gnews:AI safety"]
Router --> S2["search:AI regulation"]
Router --> S3["bbc:technology"]
Router --> S4["reddit • hn"]
S1 & S2 & S3 & S4 --> Fetch["Parallel Fetch - circuit breaking + rate limiting"]
Fetch --> Merge["Merge + Deduplicate - → reduce phase"]
style Sentinel fill:#1e3a5f,color:#e0e0e0
style Router fill:#0d3b2e,color:#e0e0e0
La Comisión Consultiva en Asuntos Administrativos y de Presupuesto recomienda a la Asamblea General que apruebe el siguiente proyecto de resolución:
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.
"from HackerNews" → hn El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.research El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. deep_dive a) Informe de la Comisión Consultiva en Asuntos Administrativos y de Presupuestognews:OpenAI)El resultado: M SK1 identificadores de fuente extraídos en paralelo con per- fractura del circuito de fuenteMSC3
Vibes modifican los términos de búsqueda antes de golpear cualquier API. Por ejemplo, --vibe doom El Comité recomienda al Estado Parte que incluya en su próximo informe periódico datos desglosados por sexo, edad y origen étnico. *El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.*El Comité recomienda al Estado Parte que incluya en su próximo informe periódico datos estadísticos desglosados por sexo, edad y origen étnico.
Si desea el fondo sobre los bits de resiliencia, ver El Comité recomienda al Estado Parte que incluya en su próximo informe periódico datos estadísticos desglosados por sexo, edad y origen étnico. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que incluya en su próximo informe periódico información detallada sobre las medidas adoptadas por el Estado parte para combatir la discriminación racial. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.
La mayoría de los sistemas de búsqueda tratan "Qué 'es nuevo en la seguridad de la A.I. y cuáles son las últimas regulaciones?" como una preguntaM SK3 EsMSC4s dosMNK5 Tratandolo como una diluye ambosMRK6
El sentinel descompone las consultas combinadas:
{
"is_composite": true,
"subqueries": [
"What's new in AI safety?",
"What are the latest AI regulations?"
]
}
La elección interesante es lo que pasa a continuación. Cada subqueja recibe su propio emplazamiento ONNX (ver ONNX: Realizar modelos de ML localmente). Cuando se evaluan artículosM SK1 tomo el Las correcciones deben referirse solamente a los discursos originales y se enviarán firmadas por un miembro de la delegación interesada e incorporadas en un ejemplar del acta, al Jefe del Servicio de Actas Literales, oficina C-154A. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.
¿Por qué un artículo que responda perfectamente "seguridad AIM SK2 no debería ser penalizado'por no decir nada sobre "regulacionesMSC5 La comparación lo enterraría bajo parámenes parciales mediocresMNK6 La similaridad máxima significaMMK7 si un artículo se pega El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. la parte de su pregunta, aumentaM SK1 La alternativa, mediación , recompensa artículos blandos que tocan vaguemente todoMSC4
Tengo seis señales de clasificación. Tienen escalas completamente diferentesM SK1
flowchart LR
subgraph Signals
BM25[BM25 - Keyword Match]
Fresh[Freshness - 48h Half-Life]
Auth[Authority - HN/Reddit Score]
QSim[Query Similarity - Cosine]
Vibe[Vibe Alignment - Cosine]
Qual[Quality - Clickbait Detector]
end
subgraph RRF[RRF Fusion]
direction TB
R[Rank Each Signal - Independently]
F["score = Σ weight × 1/(60 + rank)"]
end
BM25 & Fresh & Auth & QSim & Vibe & Qual --> R --> F
style RRF fill:#1e3a5f,color:#e0e0e0
HN puntos van a miles. La similaridad cosínea es M SK1 a 1. La friedad se desvaloriza exponencialmente. Usted puedeMSC4 no añadirlos de forma seguraMNK5 Las escalas son incompatiblesMRK6
La señal clave aquí es BM25 a través de múltiples campos (BMM SK2FMSC3 Si desea el fondo en BM 25, ver Por lo tanto, el Grupo de Trabajo tal vez desee considerar la posibilidad de incluir en su programa provisional un tema titulado “Informe del Comité Especial encargado de investigar las prácticas israelíes que afecten a los derechos humanos del pueblo palestino y otros habitantes árabes ocupados”..
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. (Cormack et alM SK1 2009) soluciona esto ignorando las notas cruas: cada señal clasifica los puntos de forma independienteMSC4 entonces combina el El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.: score = Σ weight × 1/(k + rank) El Comité recomienda que el Estado Parte adopte todas las medidas necesarias para garantizar la igualdad de oportunidades entre los hombres y las mujeres en materia de empleo, incluida la eliminación del trabajo forzoso. k=60).
Si desea el fondo completo en RRF, Parte M SK1 la cubre. Aquí es el giro **Los weights se adaptan al tipo de consulta.**La Comisión Consultiva observa con preocupación que, a pesar de los esfuerzos realizados por la Oficina del Alto Comisionado de las Naciones Unidas para los Refugiados (ACNUR) y el Departamento de Operaciones de Mantenimiento de la Paz (ONU-Hábitat), no se han producido progresos significativos en la aplicación de las recomendaciones contenidas en su informe.
Esta ha comenzado como un chiste. Ahora es' mi característica favoritaM SK2
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda que el Estado Parte adopte todas las medidas necesarias para garantizar la igualdad de oportunidades entre hombres y mujeres en materia de empleo, incluida la eliminación del trabajo forzoso.
flowchart LR
V["--vibe doom"] --> Expand["Query Expansion - 'concerning risks issues in...'"]
V --> Embed["Vibe Embedding - 'vulnerability breach layoffs - recession crisis warning...'"]
Embed --> Score["Cosine Similarity - per article"]
Score --> RRF["RRF Signal - weight: 0.4"]
style V fill:#8b0000,color:#e0e0e0
Tres cosas ocurren cuando se establece una vibración:
Las vibes personalizadas funcionan de forma idéntica. --vibe "contemplative philosophical"-su texto se convierte tanto en el prefixo de la consulta como en el objetivo de clasificación . El sistema no distinguirá entre los predefinados y los personalizados.
Aquí' es un error que yo hice primero : contar las entidades compartidas entre los documentos.
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.
La solución era pensar en entidades como vectores, no cadenas.
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.El Grupo de Trabajo tal vez desee tomar nota del informe del Secretario General sobre la aplicación de las recomendaciones contenidas en el párrafo 6 supra.
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Grupo de Trabajo tal vez desee tomar nota del informe del Secretario General sobre la aplicación de las recomendaciones contenidas en el párrafo 6 supra. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Grupo de Trabajo tal vez desee tomar nota del informe del Secretario General sobre la aplicación de las recomendaciones contenidas en el párrafo 6 supra.
weight = TF × IDF × confidence × type_weight
profile = L2_normalize(Σ entity_embedding × weight)
flowchart TD
subgraph Doc1["Article: OpenAI Safety Team"]
E1["OpenAI (ORG) - IDF: high - weight: 2.1"]
E2["California (LOC) - IDF: low - weight: 0.3"]
E3["Safety Team (MISC) - IDF: high - weight: 1.8"]
end
subgraph Doc2["Article: Almond Farming"]
E4["California (LOC) - IDF: low - weight: 0.3"]
E5["Almond Farmers (MISC) - IDF: high - weight: 1.9"]
E6["Drought (MISC) - IDF: medium - weight: 1.2"]
end
Doc1 --> P1["Profile Vector - Dominated by OpenAI + Safety"]
Doc2 --> P2["Profile Vector - Dominated by Farming + Drought"]
P1 -. "low similarity" .- P2
style Doc1 fill:#1a1a2e,color:#e0e0e0
style Doc2 fill:#2d1a2e,color:#e0e0e0
La IDF es la clave. M SK1California" aparece en toneladas de artículos - baja IDFMNK4 señal débilMRK5 | | "OpenAIMMK7 es distintiva |- alta IDF | , domina el perfil | МSK10 Ahora funciona la búsqueda de similaridad | . | OpenAI agrupar los artículos juntos |. | Clasificación de los artículos agrícolas separadamente | . | El compartido | SNK14 | California | SMk15 | se convierte en ruido | USK16
La parte inteligente: El Comité recomienda que el Estado Parte adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.. En lugar del número de menciones cruas, uso 1 + log(mentions). Una entidad mencionada 50 veces en un artículo largo no se obtiene МSK2 el peso de una que se mencionó una vez M SK4 Obtiene \ ~5×. Esto impide que las entidades de placa de boiler inundan el perfil
Los perfiles de entidades no son'justo para entender los documentos.Se El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.. Cada documenM SK1t' su perfil de entidad se indexa en un gráfico HNSW (DuckDBMSC4s VSS extensionMNK5 habilitando OMST6log NMSS7 descubrimiento de artículos semánticamente relacionados que la búsqueda de palabras clave se perdería totalmenteMSP8
Si desea más detalles sobre HNSW y DuckDB VSS, consulte El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer..
flowchart TD
subgraph Retrieval["Three-Layer Retrieval (UNION)"]
L1["Lucene FTS - keyword matches"]
L2["Embedding HNSW - semantic similarity"]
L3["Entity Profile HNSW - entity fingerprint match"]
L1 & L2 & L3 --> Union["Union of all candidates"]
end
subgraph Enrich["Post-RRF Enrichment"]
Top["Top 5 Ranked Items"] --> Agg["Aggregate Profile - mean of entity profiles"]
Agg --> Graph["HNSW Search - min similarity: 0.30"]
Graph --> Related["+3 Related Articles - scored below existing items"]
end
Union --> RRF["RRF Fusion"] --> Enrich
style Retrieval fill:#1a1a2e,color:#e0e0e0
style Enrich fill:#0d3b2e,color:#e0e0e0
Esto funciona en dos etapas:
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.: cuando el sentinel extrae 2+ entidades de la queja, un perfil de entidad de queja se calcula usando la misma fórmula TFMSC3IDFM SK4 Esto busca en el índice HNSW artículos con huellas digitales similares de una entidadMNK5 con una similaridad mínima de SNK6 Un artículo sobre "Consecuencias de seguridad de OpenAISSK8 superficies incluso si nunca menciona los términos exactos de las quejasSKK9 porque su perfil de entidades ESK10domina por altasSKT11IDP S"OpenAIMST13 + "\safety") está cerca de la preguntaSDK17\SSK18\
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.: los artículos clasificados más arriba 5 tienen sus perfiles de entidades mediadas en un vector agregadoM SK2 Esta búsqueda agregada busca artículos relacionados que la palabra clave y las capas de inserción se han perdido totalmente. Los artículos encontrados se clasifican justo debajo del elemento menos clasificado SSK4 y están etiquetados como descubiertos *El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.*La Comisión Consultiva en Asuntos Administrativos y de Presupuesto examinó el informe del Secretario General sobre la ejecución financiera correspondiente al período comprendido entre el 1° de julio de 2007 y el 30 de junio de 2008 (A/60/613).
La Unión es deliberadamente más amplia que la intersección.
El camino de retroceso (para corpora sin perfiles de entidades todavía) usa co-entidad SQLM SK2calificación de las occurrencias (HAVING shared_count >= 2). FuncionaM SK1 pero es's OMSC3NMNK4 en lugar de O (log NMRK6 El --backfill-entity-profiles el comando migra corporas existentes al camino HNSW.
Esta es la ruta normal. scroll "AI safety and regulation" hits this. Después de la fase de reducción distila sus fuentes en segmentos clasificados,duplicados ,entidad
flowchart TD
subgraph REDUCE["Reduce Phase (ALL DETERMINISTIC)"]
Items[Fetched Items] --> Embed[ONNX Embed All Items]
Embed --> RRF[6-Signal RRF Fusion]
RRF --> TR[TextRank Compression]
TR --> Seg[Segment Extraction + Salience Scoring]
Seg --> Dedup[Deduplication + Relevance Floor]
end
subgraph SYNTH["Synthesis (1 LLM CALL)"]
Dedup --> Rerank["Semantic Re-Rank - by query similarity"]
Rerank --> Budget["Smart Evidence Budgeting - redistribute unused chars"]
Budget --> Gen["Single LLM Call - with curated evidence"]
Gen --> Output[Final Summary]
end
style REDUCE fill:#0d3b2e,color:#e0e0e0
style SYNTH fill:#1e3a5f,color:#e0e0e0
La fase de reducción hace el trabajo duro. Al momento en que el LLM ve algoM SK1 recibe:
[E1] Title | topic | relevance El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.
El Comité recomienda que el Estado Parte adopte todas las medidas necesarias para garantizar la igualdad de oportunidades entre hombres y mujeres en materia de empleo, incluida la eliminación del trabajo forzoso.--template blog-article) es una bestia diferenteM SK1 Usted' genera un documento multi-sección de dozens de fuentes , y necesita coherencia entre las secciones sin expensive LLM llamadas de compresiónMSC5
El Presidente (habla en inglés): Doy ahora la palabra al representante de Cuba. **Las correcciones deben referirse solamente a los discursos originales y se enviarán firmadas por un miembro de la delegación interesada e incorporadas en un ejemplar del acta, al Jefe del Servicio de Actas Literales, oficina C-154A.**El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.
flowchart TD
subgraph Phase1["Phase 1: Evidence Preparation (DETERMINISTIC)"]
Articles[Top 20 Articles] --> Segments[Chunk into Segments]
Segments --> Salience[Score Salience per Segment]
Salience --> EmbedSeg[Embed Each Segment]
end
subgraph Phase2["Phase 2: Document Planning (1 SENTINEL CALL)"]
EmbedSeg --> Summary[Build Evidence Summary]
Summary --> Sentinel["Sentinel: Generate Outline - with theme keywords per section"]
Sentinel --> EmbedThemes[Embed Section Themes]
end
subgraph Phase3["Phase 3: Evidence Assignment (DETERMINISTIC)"]
EmbedThemes --> Assign["Score: 60% theme similarity - + 25% salience + 15% relevance"]
Assign --> Dedup[Cross-Section Deduplication]
Dedup --> Gate["Quality Gates - • Min salience 0.35 - • Min theme sim 0.45 - • Max 2 per source per section"]
end
subgraph Phase4["Phase 4: Section Generation (N+2 LLM CALLS)"]
Gate --> Intro["Intro (sequential)"]
Intro --> Body["N Body Sections (parallel) - max 3 concurrent"]
Body --> Conclusion["Conclusion (sequential)"]
end
subgraph Phase5["Phase 5: Validation (DETERMINISTIC)"]
Conclusion --> Validate[Citation Validation - URL + Entity Grounding]
end
subgraph Phase6["Phase 6: Assembly (DETERMINISTIC)"]
Validate --> Assemble[Final Document Assembly]
end
style Phase1 fill:#0d3b2e,color:#e0e0e0
style Phase2 fill:#1e3a5f,color:#e0e0e0
style Phase3 fill:#0d3b2e,color:#e0e0e0
style Phase4 fill:#1e3a5f,color:#e0e0e0
style Phase5 fill:#0d3b2e,color:#e0e0e0
style Phase6 fill:#0d3b2e,color:#e0e0e0
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. 1 El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. 1 El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. 1 El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. **El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.**El Comité recomienda al Estado Parte que incluya en su próximo informe periódico datos desglosados por sexo, edad y origen étnico.
El problema con la generación de secciones paralelas es la coherencia. Si las secciones no saben'no saben lo que otras secciones dijeronM SK2 se obtienen repetición y desviación . La solución habitual es la generación secuencial con el contexto completoMST4 QueM ST5s slow and wastes context windowM st6
En consecuencia, el Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad de oportunidades entre hombres y mujeres en materia de empleo. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.
flowchart LR
subgraph Context["Per-Section Context (ALL DETERMINISTIC)"]
RS["Running Summary - 1400 char budget - recent 2 sections: full - older: heading only"]
NP["Negative Prompts - 'Do NOT discuss: X, Y, Z' - from covered concepts"]
EC["Entity Continuity - re-introduce entities - last seen 2+ sections ago"]
Props["Propositions - ~15 atomic facts - per section"]
Evidence["Curated Evidence - max 12 segments - quality-gated"]
end
Context --> LLM["LLM generates - with full awareness - of document state"]
style Context fill:#1a1a2e,color:#e0e0e0
En el modo paralelo, la introducción genera primero (esta la línea de baseM SK2 las secciones del cuerpo ejecutan simultáneamente ( hasta SSK4 a través SemaphoreSlim En el párrafo 2 de su resolución 57/270 B, la Asamblea General pidió al Secretario General que le presentara en su quincuagésimo séptimo período de sesiones un informe sobre los progresos realizados en la aplicación del Programa de Acción para prevenir, combatir y eliminar el tráfico ilícito de armas pequeñas y ligeras en todos sus aspectos.
El modo secuencial da una coherencia más estrecha (cuadra sección excluye todos los conceptos anteriores acumulativamenteM SK1 pero paralelo es ~3x más rápido para los grandes documentos.
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que incluya en su próximo informe periódico datos estadísticos desglosados por sexo, edad y origen étnico. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. (distancia cosínea a la sección'incorporación del tema de ), El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que incluya en su próximo informe periódico información detallada sobre la situación de los derechos humanos y las libertades fundamentales de todos los niños, incluidos sus derechos económicos, sociales y culturales. El Comité recomienda que el Estado Parte adopte todas las medidas necesarias para garantizar la igualdad de oportunidades entre hombres y mujeres en materia de empleo, incluida la adopción de medidas legislativas, administrativas, judiciales y de otra índole. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.
En el párrafo 2 de la resolución, la Asamblea General pidió al Secretario General que le presentara en su quincuagésimo séptimo período de sesiones un informe sobre los progresos realizados en la aplicación del Programa de Acción para prevenir, combatir y eliminar el tráfico ilícito de armas pequeñas y ligeras en todos sus aspectos.
El número de palabras objetivo del LLM se ajusta basándose en la calidad de las pruebas. Las pruebas sólidas (la buena voluntad ≥ 0.6, \2+ las fuentesM SK5 |4+ los segmentos ) ♪→ el número total de palabrasMSC9 las pruebas débiles ♫( la buena voluntad
El Comité recomienda al Estado Parte que incluya en su próximo informe periódico datos desglosados por sexo, edad y origen étnico. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad de oportunidades de hombres y mujeres en el acceso a los servicios de salud reproductiva. El Comité recomienda al Estado Parte que incluya en su próximo informe periódico datos estadísticos desglosados por sexo, edad y origen étnico. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que incluya en su próximo informe periódico información detallada sobre las medidas adoptadas por el Estado parte para combatir la discriminación racial. El Comité recomienda al Estado Parte que incluya en su próximo informe periódico datos desglosados por sexo, edad y origen étnico. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. El Comité recomienda que el Estado Parte adopte todas las medidas necesarias para garantizar la igualdad de oportunidades entre los hombres y las mujeres en materia de empleo, incluida la eliminación del trabajo forzoso. El Comité recomienda que el Estado Parte adopte todas las medidas necesarias para garantizar la igualdad de oportunidades entre hombres y mujeres en materia de empleo, incluida la adopción de medidas legislativas, administrativas, judiciales y de otra índole.
Cada sección obtiene ~15 propuestas, duplicadas a través de las secciones usando semántica similaridad (no correlación de cadenas). El LLM recibe puntos de bala estructurados agrupados por fuenteMSC4 no párrafos cruesM SK5
Por lo que se refiere a la aplicación de las disposiciones del párrafo 1, el Grupo de Trabajo tal vez desee tomar nota de los comentarios y sugerencias formulados por los Estados Miembros en relación con este tema.
Un pequeño modelo puede hacer un excelente trabajo con este tipo de pre-processing.
Cuando los artículos son demasiado largos para el flujo de pruebas, Tengo que comprimirlos. Pero no quiero gastar un llamamiento LLM en resumirM SK3
TextRank (Mihalcea & TarauM SK2 2004) lo hace de forma determinista:
flowchart LR
Text[Article Text] --> Split[Split into Sentences]
Split --> EmbedS[Embed Each Sentence]
EmbedS --> Graph["Build Similarity Graph - (cosine > 0.15 = edge)"]
Graph --> PR["PageRank - (20 iterations, d=0.85)"]
PR --> Select["Select Top-K - in Original Order"]
style Graph fill:#1e3a5f,color:#e0e0e0
Cada frase obtiene una inserción. Las similitudes de la parámetro superior M SK1 se convierten en bordes de gráficos. PageRank encuentra el más El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. Las correcciones deben referirse solamente a los discursos originales y se enviarán firmadas por un miembro de la delegación interesada e incorporadas en un ejemplar del acta, al Jefe del Servicio de Actas Literales, oficina C-154A.
El detalle clave: se devolven las frases seleccionadas. El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.. Esto preserva el flujo narrativo. Obtienes un resumen coherenteM SK2 no una bolsa aleatoria de frases importantes .
No hay llamada LLM. Se ejecuta en milísecondosM SK1 La similaridad de las cosine es SIMD- acelerada a través TensorPrimitives (System.Numerics.TensorsEl Comité recomienda que el Estado Parte adopte todas las medidas necesarias para garantizar la igualdad de oportunidades entre hombres y mujeres en materia de empleo, incluida la eliminación del trabajo forzoso.
En el párrafo 2 de la parte dispositiva del proyecto de resolución, la Asamblea General pidió al Secretario General que le presentara en su quincuagésimo séptimo período de sesiones un informe sobre los progresos realizados en la aplicación de las recomendaciones formuladas por la Comisión Consultiva en Asuntos Administrativos y de Presupuesto.
En el párrafo 2 de la parte dispositiva del proyecto de resolución, la Asamblea General pidió al Secretario General que le presentara en su quincuagésimo séptimo período de sesiones un informe sobre los progresos realizados en la aplicación de las recomendaciones formuladas por la Comisión Consultiva en Asuntos Administrativos y de Presupuesto.
link_score = 0.7 × query_relevance(anchor_context) + 0.3 × segment_salience
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer.
El sistema sigue la hiurística de la pirámide invertida de la prensa: los enlaces importantes tienden a aparecer a menudo en los primeros años del bien- los artículos escritosM SK4
Los resultados se cachen con hashes de contenido y ETags. La segunda ejecución es rápida. Ver El Secretario General Adjunto de Operaciones de Mantenimiento de la Paz, Sr..
Todo lo descrito hasta ahora presupone la obtención del web. Pero usted puede saltar el web en su totalidad.
crawl ingests un sitio web en una base de conocimiento local. Hace una breadth-first crawl M SK2BFSMSC3 desde un URL de semillasMska4 respecto a la profundidad y las limitaciones de páginaM Ska5 con limitación de velocidad adaptativa que scales el retraso basado en los tiempos de respuesta del servidorMSKA6
doomsummarizer crawl https://docs.example.com --name example-docs --depth 3 --max-pages 200
Todo se mantendrá: contenido completoM SK1 inserciones ONNX, perfiles de entidades , SQLite FTSMSC4 índices de palabras clave MNK5 completo MNK6 búsqueda de textoMRK7 puntuación del sentimiento y del tema SNK8 calculada a través de anclas de inserciónMMK9 no LLMMEK10 reincremento incrementalMZK11 mensajes enviados If-None-Match / If-Modified-Since headers. Las páginas inalteradas retornan HTTP 304 y salen del proceso de reprocesamiento . Para servidores sin soporte ETagM SK3 SHAMSC4 content hashes catch duplicatesMスク5
Una vez crawlado, consulta completamente offline:
doomsummarizer scroll "how does authentication work?" --name example-docs
El Comité recomienda al Estado Parte que adopte todas las medidas necesarias para garantizar la igualdad entre los géneros y el empoderamiento de la mujer. --name Las correcciones deben referirse solamente a los discursos originales y se enviarán firmadas por un miembro de la delegación interesada e incorporadas en un ejemplar del acta, al Jefe del Servicio de Actas Literales, oficina C-178.
El almacenamiento es ligero: SQLite para metadatos y FTSMSC1 índices, DuckDB con la extensión VSS para índices vectores HNSWM SK3 No servicios externos , no DockerMST5 no claves APIMst6 Una base de conocimiento crawlada de cientos de páginas se adapta en unos pocos megabytes y consultas en milímetros de segundosM st7
doomsummarizer scroll "AI safety and regulation" --vibe doom --debug
Composite query detected: 2 subqueries
• What's new in AI safety?
• What are the latest AI regulations?
Searching...
├─ Lucene: 18 keyword matches (regulation^3, safety^2)
├─ Embedding: 12 semantic matches (max-sim across 2 subqueries)
├─ RRF fusion: 22 candidates, 6 signals
├─ Entity HNSW: +3 related via entity profiles
├─ TextRank: compressed 4 long articles
└─ Final: 12 items
Long-form: Phase 1 - 187 segments from 12 articles
Long-form: Phase 2 - "AI Safety Landscape" - 5 sections
Long-form: Phase 3 - Evidence assigned (cross-section dedup: 8 removed)
Long-form: Phase 4 - Generating sections...
Estas son las percepciones. Tomenlas, Usarlas en sus propios sistemasM SK2
© 2026 Scott Galloway — Unlicense — All content and source code on this site is free to use, copy, modify, and sell.