Marco de verificación adversarial para contenido legal generado por IA: verificación de hechos, validación de citas, detección de alucinaciones y puntuación de preparación para distribución.
npx clawhub@latest install legal-red-teamLegal Red Team es un marco de verificación adversarial listo para producción, diseñado para documentos legales generados por IA. Comprueba sistemáticamente la precisión factual, valida las citas legales contra fuentes oficiales, detecta patrones de alucinación conocidos, verifica operaciones aritméticas y puntúa los documentos según su idoneidad para distribución — todo ello mediante una metodología estructurada de seis categorías. Esta habilidad no constituye asesoramiento jurídico y está concebida para complementar, no reemplazar, la revisión legal profesional cualificada.
npx clawhub@latest install legal-red-teamHaz clic en el botón Instalar en la parte superior de esta página para una configuración rápida
Cada documento es evaluado a través de seis categorías estructuradas: precisión factual, citas de autoridad legal, validación aritmética, verificación de fuentes, detección de especulaciones y suficiencia de descargos de responsabilidad. Cada categoría tiene señales de alerta y comprobaciones definidas, lo que garantiza que no se pase por alto ningún modo de fallo común.
La habilidad se centra en cinco patrones recurrentes de alucinación de IA en contenido jurídico: números de artículos plausibles pero incorrectos, fechas incorrectas expresadas con seguridad, orientaciones presentadas erróneamente como derecho vinculante, referencias jurídicas desactualizadas y errores aritméticos en el cálculo de plazos. Cada patrón cuenta con una técnica de detección definida.
Los hallazgos se clasifican en cuatro niveles de gravedad — CRÍTICO, ALTO, MODERADO y BAJO — con definiciones claras, ejemplos y acciones requeridas en cada nivel. Los problemas CRÍTICOS deben resolverse antes de cualquier distribución.
La herramienta legal_quality_scorer.py genera una puntuación compuesta del 1 al 5 con desglose por categoría. Los documentos con una puntuación inferior a 4/5 no deben distribuirse; el flujo de trabajo de control previo a la distribución exige cero problemas CRÍTICOS y la inclusión completa de avisos legales.
Dos scripts de Python — legal_fact_checker.py y legal_quality_scorer.py — admiten entrada de texto o archivo, salida en JSON, modo detallado e informes guardados. Funcionan como herramientas de análisis de primera pasada, diseñadas para alimentar la revisión adversarial manual.
Tres flujos de trabajo listos para ejecutar cubren la revisión adversarial completa, la verificación rápida de citas y el control previo a la distribución. Cada flujo de trabajo incluye un paso de validación para confirmar que se han cumplido los criterios de finalización.
Ejecuta legal_fact_checker.py para marcar todas las citas y fechas, verifica cada una en EUR-Lex o eCFR, luego ejecuta legal_quality_scorer.py para confirmar una puntuación de 4/5 o superior y cero hallazgos CRÍTICOS antes de enviar a clientes o personal.
Usa el Flujo de trabajo 2 (Verificación rápida de citas) para extraer cada cita legal del documento y verificar cada una con la fuente oficial correspondiente — detectando números de artículos inventados o disposiciones mal citadas antes de que lleguen al equipo legal.
Integra legal_quality_scorer.py como una puerta automatizada en un pipeline de generación de documentos. Cualquier documento con una puntuación inferior a 4/5 queda retenido para revisión humana; solo los documentos que cumplen el umbral y los requisitos de aviso legal pasan a las etapas siguientes.
Aplica la metodología de seis pasos con una mentalidad adversarial: marca cada afirmación fáctica y cada cifra, verifica las fechas en relación con el texto normativo, señala la especulación presentada como certeza y elabora un informe de hallazgos clasificados por gravedad para el equipo de redacción.
npx clawhub@latest install legal-red-teamInicia sesión para escribir una reseña
Aún no hay reseñas. ¡Sé el primero en compartir tu experiencia!