El problema que nadie había resuelto bien
Evaluar la coherencia metodológica de una tesis de investigación es una tarea que normalmente toma semanas: un comité lee el documento, identifica inconsistencias entre el problema, los objetivos, las hipótesis, y la metodología, y devuelve observaciones en un ciclo lento y costoso.
El Motor DTM (Design Thinking Methodology) lo hace en menos de 1 segundo.
La arquitectura técnica
DTM no es un clasificador simple. Es un sistema de evaluación multi-dimensional que usa un LLM para:
- Extraer los componentes metodológicos del texto (problema, objetivos, hipótesis, variables, metodología)
- Aplicar 10 reglas de coherencia semántica entre ellos
- Detectar sinónimos y reformulaciones (un objetivo no tiene que repetir verbatim el problema para ser coherente)
- Generar un reporte con score numérico y observaciones específicas
Los 71 tests
La suite de tests cubre casos reales extraídos de tesis aprobadas y rechazadas en 8 universidades latinoamericanas. Incluye variantes en español, inglés y portugués, y casos extremos como tesis con objetivos contradictorios o hipótesis que no derivan del problema.
Por qué Claude y no GPT-4
Durante el desarrollo evaluamos 4 modelos. Claude resultó superior en dos dimensiones clave: comprensión de texto académico en español, y capacidad de seguir instrucciones complejas con alta precisión. La tasa de falsos positivos (marcar como incoherente algo que sí es coherente) con Claude es 3x menor que con el mejor modelo de OpenAI.
Disponibilidad
El Motor DTM está disponible en dtm.aiudalabs.com. El análisis de tesis de hasta 20,000 palabras es gratuito.