Volver a los blogs

Dos conferencias, dos idiomas: lo que revelan ATP e ICAI sobre el futuro de la integridad de las pruebas

Tendencias y perspectivas

Recientemente asistí a dos congresos centrados en pruebas y evaluación.

  • La primera fue ATP (Asociación de Editores de Pruebas), que representa en gran medida organismos de acreditación, programas de certificación y proveedores de evaluación del sector privado.
  • La segunda fue ICAI (Centro Internacional para la Integridad Académica), una comunidad que se centra principalmente en la educación superior y en las instituciones K–12.

Ambos grupos se enfrentan al mismo desafío fundamental: cómo garantizar que las evaluaciones sigan siendo justas y auténticas en la era de la IA.

Lo que más llamó la atención no fueron simplemente las diferencias en las soluciones que se discutían. Fueron las diferencias en cómo cada comunidad habla del problema en sí. El vocabulario, las suposiciones y las prioridades a menudo sonaban notablemente diferentes, incluso cuando las preocupaciones subyacentes eran muy similares.

Es importante señalar que estas observaciones provienen de asistir a una variedad de sesiones y itinerarios en cada conferencia, no en todas las presentaciones o participantes. Los patrones descritos aquí reflejan temas que surgieron en muchas conversaciones más que divisiones rígidas entre las comunidades. Hubo ponentes ATP que enfatizaron la prevención y el diseño reflexivo de evaluaciones, y hubo participantes de ICAI que hablaron con firmeza sobre la importancia de controles de seguridad más estrictos. Aun así, el tono general y el lenguaje utilizado en cada comunidad reflejaban a menudo diferentes tradiciones y prioridades profesionales.

Comprender esas diferencias revela algo importante: estas dos comunidades tienen mucho que aprender la una de la otra.

El lenguaje del problema

Uno de los contrastes más claros entre las conferencias fue el lenguaje utilizado para describir el mismo desafío subyacente.

TemaLenguaje ATPIdioma ICAI
Preocupación centralSeguridad en exámenes, prevención de fraudes, suplantaciónIntegridad académica, cultura de aprendizaje, comportamiento del alumnado
Foco de la discusiónActores de amenaza, vulnerabilidades, vectores de ataqueMotivación, justicia, presión, éxito estudiantil
Enmarcado para el examinadorCandidatos, malos actores, proxiesEstudiantes, aprendices
Soluciones discutidasCapas de seguridad, biometría, algoritmos de detecciónCódigos de honor, expectativas, cultura institucional
Términos de mediciónValidez de la puntuación, psicometría, estadística forenseIntegridad de aprendizaje, comportamiento ético

En términos sencillos, las conversaciones sobre ATP suelen sonar similares a las discusiones sobre ciberseguridad, mientras que las conversaciones sobre ICAI se acercan más a las políticas educativas o al desarrollo estudiantil.

Ninguna de las dos perspectivas es incorrecta. Simplemente reflejan los entornos en los que opera cada comunidad. Las organizaciones de acreditación deben proteger el valor de las certificaciones profesionales que a menudo tienen consecuencias financieras o regulatorias. Las universidades, por otro lado, deben equilibrar la aplicación de la ley con su misión más amplia de educación y desarrollo estudiantil.

Diferentes suposiciones sobre los examinados

Estas diferencias lingüísticas reflejan supuestos filosóficos más profundos sobre cómo deben protegerse las evaluaciones y qué papel deben desempeñar las instituciones.

DimensiónATP (Acreditación / Sector Privado)ICAI (Educación)
Suposición por defectoLos sistemas deben prevenir el fraudeLos sistemas deben proteger la equidad
OrientaciónProteger el valor de la certificación y la marcaApoyar el aprendizaje del alumnado
Mentalidad de aplicaciónPrevenir y detectar infraccionesGarantizar el debido proceso y la educación
Velocidad de cambioExperimentación rápidaConsenso institucional y política

Durante muchas sesiones de ATP, el enfoque solía centrarse en preguntas como:

"¿Cómo detenemos operaciones de trampa cada vez más sofisticadas?"

En la ICAI, la discusión se centró más en cuestiones como:

"¿Por qué hacen trampas los estudiantes y cómo cambiamos ese comportamiento?"

Ambas perspectivas responden a desafíos reales, pero abordan el problema desde puntos de partida diferentes.

ATP: Seguridad en una carrera armamentística de IA

En ATP, un tema apareció repetidamente en las sesiones: la IA ha acelerado drásticamente el panorama de amenazas para las organizaciones de pruebas.

Los ponentes describieron cómo hacer trampas se ha vuelto más barato, rápido y escalable que nunca. Las herramientas de IA ahora pueden ayudar a los candidatos a responder preguntas en tiempo real, hacerse pasar por los examinados o recopilar contenido para su distribución futura.

Debido a este panorama en rápida evolución, muchas conversaciones sobre ATP se centraron principalmente en la infraestructura de seguridad y los sistemas de detección.

Un tema recurrente fue la transición hacia la seguridad multinivel, donde ningún control único resuelve el problema por sí solo.

Estas herramientas permiten a las organizaciones de pruebas detectar exámenes comprometidos o redes de trampas coordinadas incluso después de que la sesión de pruebas haya finalizado.

ICAI: La integridad como problema cultural

En ICAI, las conversaciones fueron generalmente menos técnicas y se centraron más en la motivación estudiantil y la cultura institucional.

Muchas sesiones exploraron las razones por las que los estudiantes eligen hacer trampas en primer lugar. La investigación presentada en la conferencia destacó varios factores comunes, como la presión para ser admitido en programas competitivos, la carga de cursos elevada, las limitaciones de tiempo y la percepción de que "todos los demás están haciendo trampas".

Por este enfoque, las discusiones de ICAI a menudo enfatizaban soluciones como códigos de honor, expectativas claras sobre el uso de herramientas de IA, aplicación coherente en todos los cursos y programas diseñados para enseñar integridad académica.

La creencia subyacente es que la cultura y las expectativas juegan un papel fundamental en la configuración del comportamiento estudiantil. Aunque la aplicación sigue siendo importante, muchas discusiones de la ICAI enfatizaron la prevención a través de la educación, la claridad y las normas institucionales compartidas.

Donde convergen las dos comunidades

A pesar de estas diferencias, las dos conferencias también revelaron áreas importantes de acuerdo.

Perspectiva compartidaImplicación
La IA cambia permanentemente las pruebasLos enfoques tradicionales por sí solos ya no son suficientes
Las soluciones deben ser en capasNinguna herramienta, diseño o política por sí sola puede resolver el problema
El diseño de la evaluación importaLa seguridad no puede añadirse simplemente después
La colaboración es necesariaLas organizaciones de pruebas deben aprender unas de otras

Ambas comunidades reconocen cada vez más que los desafíos creados por la IA no pueden resolverse solo con la tecnología, ni con políticas y culturas únicas.

La tecnología sin expectativas culturales puede crear entornos adversariales entre instituciones y examinados. Al mismo tiempo, la cultura sin controles de seguridad puede dejar las evaluaciones vulnerables a métodos de trampa cada vez más sofisticados.

Un puente entre dos mundos

La conclusión más llamativa de asistir a ambas conferencias es que el ecosistema de pruebas a veces da la sensación de dividirse en dos conversaciones paralelas.

Uno habla el lenguaje de la seguridad, la gestión de riesgos y la psicometría.

El otro habla el lenguaje de la educación, el desarrollo estudiantil y la cultura de la integridad.

Sin embargo, ambas comunidades intentan responder a la misma pregunta fundamental:

¿Cómo podemos asegurarnos de que el trabajo presentado representa realmente a la persona evaluada?

Cada vez más es necesario que las soluciones operen en la intersección de estas dos perspectivas. El futuro de la integridad de las pruebas probablemente requerirá sistemas que combinen seguridad en capas, análisis conductual, un diseño de evaluación reflexivo y expectativas claras para los estudiantes.

En otras palabras, La tecnología, la cultura y la colaboración deben trabajar juntas.

Ninguna de las conferencias, ni ningún enfoque, puede resolver el problema por sí sola.

Entradas relacionadas en el blog