El entregable

Un documento hecho para ser discutido.

Cada cifra es trazable hasta cómo se produjo, cada limitación está escrita y el resultado se enuncia contra una regla que se congeló antes de que el resultado existiera.

Qué contiene

Abre cualquier parte para ver qué incluye. Cada resumen está pensado para bastar por sí solo; el detalle está ahí para cuando se discute una cifra.

Doce partes, en el orden en que se entregan. El veredicto va primero a propósito: un informe que te obliga a leer once secciones para encontrar la respuesta es un informe escrito para su autor.

VeredictoUn resultado, su motivo y qué ocurre después.
La primera página responde a la pregunta que se hizo, en una línea y en lenguaje claro. Indica cuál de los tres resultados aplica, por qué, y cuál es el siguiente paso. Nada de lo que viene después lo contradice.
Validation Scope confirmadoLa afirmación, el activo, el timeframe, los costes y el benchmark que aceptaste.
El alcance que confirmaste antes de ejecutar nada, reproducido literalmente: la versión de la estrategia, el activo, el timeframe, el periodo, los supuestos de coste y el benchmark. Va justo debajo del veredicto porque todo lo que sigue solo es válido dentro de él.
Resumen ejecutivoQué se encontró, en el espacio de una página.
Qué hace la estrategia, qué se midió, qué se sostuvo y qué no — escrito para quien decide, no para quien audita. El detalle está más abajo; esta es la parte que sobrevive a ser reenviada.
Métricas claveRecalculadas desde los inputs congelados y reconciliadas con lo que declaraste.
Retorno, volatilidad, Sharpe, drawdown máximo y rotación, recalculados a partir del material congelado en lugar de copiados de tu informe. Cuando una cifra recalculada difiere de la declarada, se muestran ambas y se explica la diferencia.
Comparación con el benchmarkComparable con comparable, contra la referencia acordada en el alcance.
La estrategia frente al benchmark que confirmaste, en el mismo periodo, con los mismos costes y la misma base de exposición. Sin una comparación justa, una mejora no puede atribuirse a la estrategia en lugar de al mercado en el que estaba.
Monte Carlo clásicoCómo podría haberse desarrollado la misma ventaja por otros caminos plausibles.
Caminos alternativos generados conservando parte de la dependencia temporal observada, para que el drawdown, el tiempo bajo el agua y las rachas perdedoras se lean como rangos y no como la única cifra que ocurrió.
Permuted Monte CarloLos mismos retornos, reordenados — cuánto del riesgo fue suerte de secuencia.
Los retornos observados se conservan exactamente y se cambia su orden. Si el perfil de riesgo se deshace al reordenar, la experiencia histórica dependía de una secuencia y no de una ventaja.
Drawdowns y tiempo bajo el aguaNo solo cuánto de profundo, también cuánto de largo.
Cada drawdown con su profundidad y su duración. La profundidad es lo que se cita; la duración es lo que decide si una estrategia se mantiene el tiempo suficiente para recuperarse.
HallazgosQué se encontró, localizado con la precisión suficiente para actuar.
Cada hallazgo indica qué se comprobó, qué se observó y por qué importa, con el lugar del material donde aplica. Un hallazgo que no se puede localizar es una opinión.
LimitacionesQué no pudo establecer esta validación.
Huecos en los datos, supuestos que hubo que asumir, partes de la afirmación fuera del alcance acordado. Una limitación solo es aceptable si es específica y está escrita, y por eso esto es una sección y no una frase de cautela general.
RecomendacionesQué tendría que cambiar, por orden de prioridad.
Concretas, ordenadas por cuánto movería el resultado cada una, y escritas para que puedas juzgar si cumplirlas compensa antes de comprometerte.
Siguiente pasoQué hacer con esto, dicho explícitamente.
Pasar a shadowing sin capital, revalidar tras cambios concretos, o aportar el material que falta. El informe nunca termina en una ambigüedad sobre qué ocurre después.

Cómo se presenta un resultado

La misma estructura de cuatro pilares sostiene cualquier resultado. Este es ilustrativo y deliberadamente imperfecto — una validación que no puede terminar en «no concluyente» no es una validación.

Ejemplo ilustrativo — no es el resultado de un cliente

Resultado

Evidencia insuficiente

Nada falló de forma clara, pero el material aportado no permite resolver la pregunta en ningún sentido. Eso es la ausencia de un resultado, no un resultado negativo, y nunca se informan como si fueran lo mismo.

Por qué: Una categoría obligatoria no pudo resolverse en ningún sentido.
Siguiente paso: Aportar el material que falta para poder resolver la pregunta.

Cómo se argumenta el resultado

CausalSe sostieneEvidencias: 3
EstadísticaNo concluyenteEvidencias: 1
EconómicaNo concluyenteEvidencias: 1
RobustezPendienteEvidencias: 0

Encargo: eng-00000000

«Preparada para shadowing» nunca es una autorización para operar con capital real. Significa que la estrategia se ha ganado el derecho a ser observada, sin capital, y nada más.

Validar una estrategia — 59 €Descargar el informe de ejemplo

Informe de ejemplo

No puedo enseñarte el informe de un cliente. Así que apliqué el proceso a una estrategia mía, publicada en abierto, y el veredicto fue que no funciona. Todas las cifras de abajo salen de esa validación y cualquiera puede clonar el repositorio y comprobarlas.

Resumen ejecutivo

La estrategia recorta exposición cuando detecta estrés de mercado y, al recortar, reduce más las acciones de beta alta. La comparación decisiva no es contra comprar y mantener: es contra una cartera que recorta exactamente la misma exposición sin mirar la beta. Solo así una diferencia puede atribuirse a la capa evaluada.

Estrategia evaluada

CAGR: 22.77%
Sharpe: 1.343
Caída máxima: -21.82%

Control de exposición igualada

CAGR: 22.70%
Sharpe: 1.324
Caída máxima: -23.46%

Aportación de la capa

Retorno activo anual: +0.02%
Information ratio: 0.025
IC bootstrap 95%: [-0.31%, +0.38%]

Por método

CausalPASS WITH LIMITATIONS
EstadísticoPASS WITH LIMITATIONS
EconómicoFAIL
RobustezFAIL

Gates

GateQué compruebaUmbralObservadoResultado

Evidencia absolutaSi la estrategia bate al mercado con significatividadHAC t >= 1.963.518PASS

Control emparejadoSi la capa aporta algo sobre el control de exposición igualadaHAC t >= 1.960.118FAIL

Estrés de costesSi esa aportación sobrevive a un coste de ejecución de 100 pb>= 0% at 100 bps-0.043%FAIL

Estabilidad cronológicaSi al menos dos de tres subperiodos son positivos>= 66.67%33.3%FAIL

Trazabilidad

Control emparejado: FAIL conduce a Económico: FAIL conduce a Revisión necesaria por fallo real

Limitaciones

Los parámetros se eligieron después de ver el histórico sobre el que se prueban, así que no existe un periodo futuro intacto.
El universo de 200 nombres son empresas que cotizan hoy, lo que infla por construcción la referencia de comprar y mantener.
El histórico de precios contiene distorsiones por operaciones societarias que están documentadas pero no rastreadas hasta la fuente.
La simulación no modela retorno de la liquidez, impacto de mercado, mínimos de orden ni capacidad.

Condiciones para revalidar

Congelar la especificación actual y recoger un periodo prospectivo real, sin reajustar nada durante ese periodo.
Reconstruir el universo con identificadores de emisor y constituyentes point-in-time.
Evaluar por separado la puerta de exposición sola, que es la que produce casi toda la mejora.
Añadir un modelo de ejecución con costes reales de la cartera y límites de capacidad.

DespliegueINCONCLUSIVE

INCONCLUSIVE: sin periodo prospectivo ni modelo de ejecución ligado a capacidad no puede concluirse nada sobre el despliegue. Se informa por separado del veredicto formal.

Veredicto formal

Revisión necesaria

Motivo: fallo económico real — la capa no aporta valor medible frente al control de exposición igualada

Resultado formal recogido en el informe firmado: NO-GO

El informe completo

Este resumen es una vista de la página. El documento que recibe un cliente es más largo: explica qué hace la estrategia, con qué se compara y por qué, y qué queda fuera del alcance. Descárgalo y júzgalo tú.

Descargar el informe (PDF)3 páginas · PDF

Ver el repositorio en GitHub

Y un anexo de evidencia

Junto al informe va un anexo con las series, las métricas y las figuras que respaldan cada número: curva de capital, caídas con su duración, métricas móviles, distribución de retornos y las huellas de integridad de los datos de entrada. El informe es lo que se lee para decidir; el anexo es lo que aguanta cuando alguien discute una cifra.

Fragmento del anexo de evidencia que acompaña al informe.

¿Tienes algo que necesite una revisión independiente?

Describe la estrategia, el backtest o el modelo. El alcance y el precio se confirman contigo antes de empezar cualquier trabajo.

Solicitar una validación

No se ejecuta nada, ni se cobra nada, antes de que apruebes el alcance.

La información que envíes se utilizará para evaluar tu solicitud. Consulta la política de privacidad.