Reranking de documentos

Puntúa cuánto responde cada documento recuperado a la consulta, ordena los candidatos por un puntaje de rerank de 0 a 1 y descarta los irrelevantes, con la plantilla Reranking de documentos.

Objetivo: enviar a tu LLM solo los documentos que responden a la pregunta, el mejor primero.

Crea la decisión

Plantillas → Reranking de documentos → Crear decisión:

ParteContenido
Statequery (string, obligatorio), document (string, obligatorio)
relevancescore — unrelated, same topic, no answer, partial answer, direct answer, complete answer
answers_queryprobability — ¿se podría responder la consulta solo con este documento?
Compuestorerank_score = 2 × relevance + 1 × answers_query, de 0 a 1
Políticasrerank_score < 0.2 → block (descarta el documento)

Llámala

curl -X POST https://api.dcision.io/v1/decisions/document-reranking \
  -H "Authorization: Bearer $DCISION_API_KEY" \
  -H "Content-Type: application/json" \
  -d '{
    "state": {
      "query": "What is the refund window for annual plans?",
      "document": "Annual plans can be refunded within 30 days of purchase. Monthly plans are not refundable."
    }
  }'
200 OK (abreviado)
{
  "schema": "document-reranking",
  "result": { "relevance": "complete answer", "answers_query": 0.95 },
  "scores": { "relevance": 4.86 },
  "composites": { "rerank_score": 0.96 },
  "action": "continue"
}

Actúa según el resultado

Cada candidato es una decisión; ejecútalas en paralelo y ordena:

const scored = await Promise.all(docs.map(async (doc) => ({ doc, d: await dcisionDecide("document-reranking", { query, document: doc.text }) })));
const top = scored
  .filter(({ d }) => d.action !== "block")
  .sort((a, b) => b.d.composites.rerank_score - a.d.composites.rerank_score)
  .slice(0, 3)
  .map(({ doc }) => doc);

Ajústala

  • Haz rerank de una lista corta: es una llamada por documento, así que puntúa los 5–10 primeros resultados de tu búsqueda vectorial, no todo el índice.
  • Cambia los pesos de rerank_score si las respuestas parciales importan más en tu corpus.
  • Desactiva storeInput si los documentos son privados.

En esta página