EvalIA
Todos los proyectos · Read in English
Para profesionales · Análisis psicométrico
EvalIA
Una herramienta de análisis psicométrico que conserva las decisiones detrás de cada resultado.
La pregunta
EvalIA conecta preparación de datos, confiabilidad, análisis factorial y seis modelos TRI con reportes y código R reproducible.
Una decisión importante
La herramienta contrasta resultados con ecuaciones independientes y rechaza soluciones inadmisibles aunque hayan convergido. Si cambian los datos o la configuración del reporte, invalida las salidas anteriores para evitar entregar un documento desactualizado.
Mi participación
Defino los requisitos psicométricos y el flujo de trabajo, y dirijo la implementación y la revisión con agentes de IA.
Qué se contrastó y cómo
El registro del 11 de septiembre de 2026 distingue ecuaciones independientes, referencias públicas y pruebas de integración. Este extracto conserva las tolerancias declaradas; no representa una nueva ejecución.
| Salida | Referencia usada | Alcance documentado |
|---|---|---|
| Probabilidades TRI | Ecuaciones fuera de mirt | Rasch, 2PL, 3PL, GRM, PCM y RSM; 8 reactivos y 19 valores de θ por modelo; tolerancia 1e−8 |
| Información TRI | Derivadas numéricas | Seis modelos; tolerancia 1e−6 |
| EAP y error posterior | Integración con 8,001 puntos | Tres patrones por modelo; tolerancia 0.003 |
| Reportes | Cambio de datos o configuración | Invalidación de descargas anteriores; recorridos con datos sintéticos |
Un ejemplo de decisión: converger no basta para aceptar un AFC con varianza residual negativa. La herramienta rechaza esa solución. También evita presentar como actual un reporte generado antes de cambiar su configuración.
Registro completo de validación (11/sep/2026) · Registro de recorridos y estados · Procedencia
La validación documenta cálculos y contratos concretos. No certifica instrumentos, poblaciones ni todos los casos posibles. El registro conserva dos omisiones históricas de la suite principal y no sustituye una evaluación con profesionales externos.
Estado de la evidencia
- Comprobado / documentado
- El registro del 11 de septiembre documenta probabilidades para seis modelos TRI (tolerancia 1e−8), información (1e−6) y EAP (0.003), además de confiabilidad y análisis factorial. La fase 4 registra 15 comprobaciones de UX y 20 de integración. Son comprobaciones documentadas, no repetidas para esta ficha.
- Observado en uso
- Los recorridos documentados usan datos sintéticos e incluyen generación de reportes e invalidación al cambiar su configuración. No constituyen un estudio con profesionales externos.
- Pendiente
- Ampliar casos analíticos, observar uso externo y revisar las condiciones de distribución. Las pruebas no certifican la validez de los instrumentos que se analicen.
Copias de VALIDACION_FASE3.md y UX_FASE4.md, fechadas el 11/sep/2026, consultables en esta ficha. Sus resultados no certifican la validez de los instrumentos analizados.