SAMPLE / SYNTHETIC CASE

SCIENTIFIC
ASSURANCE REPORT

Strategy Atlas-M1

NO PROMOTIONEl resultado histórico parece atractivo, pero la evidencia queda bloqueada por riesgo de sesgo, inestabilidad y sensibilidad a fricción. No se abre ninguna fase confirmatoria.

1. Executive assurance summary

Atlas-M1 es una estrategia ficticia creada únicamente para demostrar qué entrega un TITAYT Scientific Audit. El análisis no pregunta solo si el backtest gana, sino si la evidencia sigue siendo creíble después de controlar calidad de datos, timing de información, robustez, fricción y gobernanza prospectiva.

DATA QUALITYPASS

Dataset reconstruible y con trazabilidad suficiente.

INFORMATION TIMINGBLOCKED

Una variable no demuestra disponibilidad antes de la decisión.

ROBUSTNESSBLOCKED

Resultado concentrado en una ventana y vecindad de parámetros.

FRICTIONBLOCKED

La ventaja histórica se degrada bajo stress moderado.

PROSPECTIVEREQUIRED

Hace falta una nueva cohorte prospectiva tras corregir y congelar la especificación.

CONFIRMATORY OOSSEALED

No se abre mientras discovery no esté maduro.

2. Data quality and provenance

ControlStatusEvidencia
TimestampsPASSOrden temporal reconstruible.
DuplicadosPASSNo aparecen eventos duplicados en la muestra.
Campos críticosPASSNo faltan campos requeridos en el instante de decisión.
LineagePASSCada evento conserva referencia a su fuente sintética.
Principio TITAYT: si los datos no son suficientemente fiables, el sistema no “corrige” el problema inventando valores ni interpreta el resultado. El estado pasa a DATA_QUALITY_BLOCKED.

3. Bias, leakage and robustness

ControlStatusObservación
Disponibilidad ex anteBLOCKEDUna feature no demuestra existir antes del timestamp de decisión.
Exclusiones post-hocPASSNo se eliminan manualmente outcomes perdedores.
Estabilidad temporalBLOCKEDGran parte del R histórico se concentra en un subperiodo.
Sensibilidad de parámetrosBLOCKEDPequeñas variaciones deterioran el resultado.
ConcentraciónREVIEWUn subconjunto pequeño explica una fracción elevada del resultado.

4. Friction and implementation realism

Un backtest que solo funciona bajo ejecución ideal no es evidencia suficiente para producción. TITAYT estresa el resultado bajo supuestos realistas y conserva las hipótesis de ejecución como parte de la evidencia.

BASE COST MODELPASS

Aplicado de forma consistente.

SPREAD STRESSBLOCKED

El efecto histórico se reduce de forma material.

SLIPPAGE STRESSBLOCKED

La estrategia es sensible a movimientos adversos pequeños.

5. Prospective validation and OOS governance

Corregir el modelo no permite volver a buscar indefinidamente en el mismo histórico. La siguiente evidencia debe empezar después de congelar la nueva especificación.

CORRECTFREEZENEW PROSPECTIVE DISCOVERYCANDIDATE FREEZENEW CONFIRMATORY
OOS existente: SEALED. Un resultado histórico atractivo no autoriza abrir el confirmatorio ni modificar hard gates de ejecución.

6. Remediation plan

  1. Reconstruir y documentar el pipeline de la variable con timing incierto.
  2. Congelar una única especificación corregida y sus supuestos de fricción.
  3. Registrar un plan prospectivo con presupuesto de búsqueda finito.
  4. Iniciar una nueva cohorte discovery después del freeze.
  5. Solo si discovery lo soporta, congelar candidato y abrir una cohorte confirmatoria nueva.

7. What the client receives

EntregableIncluido
Executive assurance verdictSí
Data-quality reviewSí
Bias / leakage reviewSí
Robustness and friction reviewSí
Prospective / OOS governance mapSí
Traceable evidence matrixSí
Personalized buy/sell recommendationNo
Performance guaranteeNo