Una asistencia con IA parala enseñanza de la química

Un proyecto de investigación de la AG Chemiedidaktik en la Universidad de Oldenburg: Chemie.KI evalúa las respuestas del alumnado según la rúbrica de evaluación que usted define y aprueba – criterio por criterio, con puntuación parcial en lugar de una nota global.

Participar ahora Conocer el proyecto
  • fundamentado científicamente
  • para docentes
  • Universidad de Oldenburg

Novedad: Chemie.KI ha sido revisado y ampliado a fondo. La evaluación se basa ahora en una mejor base, ahora puede crear sus propias tareas – y el registro está por ahora abierto a todas las docentes de química.

El principio

¿Cómo funciona Chemie.KI?

Para cada tarea de química almacenamos una rúbrica de evaluación fija con criterios individuales – por ejemplo: ¿Se usó correctamente el término técnico? ¿Se derivó la justificación de forma coherente? Un modelo de lenguaje comprueba después la respuesta del alumnado criterio por criterio y otorga puntuación parcial en lugar de una nota global.

Para que la IA actúe como una docente de química experimentada, además la entrenamos con miles de respuestas reales de alumnado evaluadas por expertas y expertos. Así el modelo aprende también a tratar con respuestas incompletas o lingüísticamente imperfectas – y en las primeras evaluaciones alcanza una calidad de valoración cercana a la de evaluadores humanos.

Demostración guiada La ciencia tras Chemie.KI
La retroalimentación

Cada punto tiene un pasaje probatorio

No se evalúa la respuesta en su conjunto, sino cada criterio por separado. A cada puntuación parcial otorgada corresponde el pasaje en el texto de la respuesta en el que se basa – resaltado con color y comprensible tanto para el alumnado como para usted.

Lo que un criterio no cubre queda visible como no conseguido: marcado con puntos, con una indicación de lo que habría faltado para la puntuación completa. Solo se evalúa lo que la tarea también exige.

Pruébelo usted mismo

Seleccione una tarea, escriba una respuesta y haga que se evalúe. El resultado aparece en la tarjeta contigua.

Explique por qué una disolución de hidróxido de sodio reacciona de forma básica. Indique también cómo cambia el valor de pH con respecto al agua pura.

Säure-Base · AFB II · 3 Punkte

Explique por qué una disolución de hidróxido de sodio reacciona de forma básica. Indique también cómo cambia el valor de pH con respecto al agua pura.

Natriumhydroxid se disocia en agua en Na+ y OH−K1. Como resultado aumenta la concentración de iones hidroxiloK2 por encima de la de iones oxonio, por eso cambia el pH de la disoluciónK3.

Cada pasaje probatorio está resaltado con color. Pase el cursor por debajo de un criterio para resaltar su pasaje.

  • K1

    La disociación del sólido en agua está nombrada correctamente con ambos iones.

    Disociación descrita

    1/1
  • K2

    Se menciona el exceso de iones hidroxilo frente a los iones oxonio como causa.

    Justificación de la relación iónica

    1/1
  • K3

    Se menciona que el pH cambia, pero no en qué dirección con respecto al agua pura.

    pH indicado · Nota: El pH está por encima de 7, el valor del agua pura

    0/1

Puntuación obtenida2 de 3

Diseño de una tarea

De la tarea a la retroalimentación

Cuatro pasos, desde crear su propia tarea hasta analizar toda la clase.

  1. 1

    Definir tarea y criterios

    Usted escribe la tarea y cada criterio de evaluación en su propia línea con la puntuación. La puntuación total se obtiene automáticamente.

    docente
  2. 2

    Aprobar rúbrica de evaluación

    Chemie.KI genera a partir de ello la solución modelo, las reglas de puntuación parcial y los casos límite. Usted los lee, corrige y aprueba. Sin aprobación no se evalúa.

    docente
  3. 3

    Editar prueba por código

    Las tareas aprobadas las agrupa en una prueba. Su grupo de clase la abre con un código de cinco cifras – sin cuenta, sin nombre.

    grupo de clase
  4. 4

    Retroalimentación y evaluación

    Cada respuesta recibe puntuación parcial, una justificación por criterio y el pasaje probatorio. Usted ve la clase de un vistazo – incluyendo los casos límite señalados.

    Ambos
Ver los cuatro pasos como demo guiada
Situación actual

Cifras y datos

Cuatro datos por los que debe medirse el proyecto.

17.693 casos anotados

Respuestas de alumnado evaluadas por expertas y expertos – la base de toda evaluación.

κ = 0,87 Concordancia con el estándar de oro

Docentes humanos alcanzan 0,90. A la investigación

unos segundos hasta la retroalimentación

La retroalimentación se genera durante la realización – no días después.

sin nombre Participación mediante código

El alumnado realiza pruebas mediante un código de cinco cifras – sin cuenta y sin datos personales.

Empezar

¿Ha llegado hasta el final? Muy bien

Entonces empiece: no cuesta nada. Cree una cuenta, apruebe una tarea y deje que su grupo de clase participe mediante un código. El resto se descubre al probarlo.

Registrarse ahora Vea primero la demostración

gratuito en el marco del proyecto de investigación no se necesitan datos de su grupo de clase se puede eliminar en cualquier momento

Confiabilidad

El control permanece con usted

Una IA que evalúa desempeños debe ser verificable. Cuatro disposiciones que lo garantizan.

Nada funciona sin aprobación

Una tarea solo se evalúa cuando usted ha leído y aprobado la rúbrica de evaluación.

Chemie.KI propone una solución modelo, reglas de puntuación parcial y casos límite; nada de ello es vinculante hasta que usted lo haya confirmado. Hasta entonces, la tarea permanece invisible para su grupo de clase.

Sus criterios siguen siendo sus criterios

Número, orden y valores en puntos se comprueban en cada llamada al modelo. Las desviaciones provocan la interrupción – no una corrección silenciosa.

Por tanto, el modelo puede evaluar, pero no reescribir lo que se evalúa. Un criterio al que usted haya asignado un punto no puede pasar de repente a valer dos.

Cada evaluación se recalcula

Los puntos parciales no pueden exceder los máximos; la suma debe encajar. Ambas comprobaciones las realiza el sistema.

El cálculo es aritmética, no una valoración; por eso no pertenece al modelo lingüístico, sino antes y después de este.

Los casos límite vuelven a usted

Los casos inseguros se marcan para revisión en vez de pasar. Las respuestas calificadas manualmente por usted pueden almacenarse como referencia.

Así, con el tiempo no cambia la evaluación, sino solo el número de casos que todavía debe revisar usted mismo.

¿Y si la IA se equivoca? Lo verá: a cada puntuación parcial le corresponde el pasaje probatorio en el texto de respuesta y una justificación en una frase. Una evaluación que no puede comprenderse no sirve de mucho en caso de duda.

La calidad media con la que esto funciona se ha medido y publicado.

Al estudio
Tareas

Dos vías hacia la tarea evaluada

Puede usar el repertorio comprobado o crear tareas propias – ambas acaban en la misma prueba.

Preparadas de antemano

Tareas del repertorio

En 13 campos temáticos están disponibles 65 tareas comprobadas con rúbrica de evaluación lista – basadas en miles de respuestas de alumnado evaluadas por expertas y expertos.

  • Seleccionar tarea e incorporarla directamente a una prueba
  • Ver la rúbrica de evaluación y copiarla para tareas propias
  • Utilizable sin tiempo de preparación
Ver en la demo
Creada por usted

Tareas propias

Introduzca su propia formulación de la tarea, defina criterios, haga que se genere una guía de evaluación, revise y apruebe – para un campo temático del catálogo o para un tema propio.

  • Usted determina los criterios y los valores de puntos
  • Ajustes finos para operador, AFB y severidad posibles
  • Sus propias respuestas evaluadas se pueden almacenar como calibración
Crear cuenta

Ambos caminos terminan igual: usted reúne las tareas aprobadas en una prueba que su grupo de clase abre con un código de cinco cifras, sin cuenta y sin nombres. Las tareas tomadas del repertorio todavía pueden adaptarse antes; la guía de evaluación sigue siendo suya.

Puede mirar primero y decidir más tarde; la demostración no necesita una cuenta.

Demostración guiada
Cifras y datos

Qué hay detrás de las cuatro cifras

De dónde proceden los datos, qué significan y cuáles son sus límites.

17.693 casos anotados

Respuestas reales de estudiantes, evaluadas por personas

La cifra refleja el estado actual de nuestra base de datos: no es una estimación, sino el inventario que se cuenta al abrir esta página. Cada caso es una respuesta realmente escrita en la clase de química, evaluada criterio por criterio por especialistas.

A partir de este inventario, el modelo aprende cuánto vale una respuesta en la práctica: con errores ortográficos, frases a medias y pensamientos correctos expresados con palabras poco habituales. Por eso juzga con más indulgencia que una simple búsqueda de palabras clave y con más rigor que una lectura superficial benevolente.

κ = 0,87 Concordancia

Cercana a la de dos docentes que evalúan lo mismo

Cohen’s κ mide en qué medida coinciden dos evaluaciones, descontando las coincidencias que podrían explicarse por puro azar. 1,0 sería un acuerdo total; 0 sería adivinar.

Cuando dos docentes con experiencia evalúan de forma independiente las mismas respuestas, en nuestras recogidas de datos alcanzan aproximadamente 0,90. Chemie.KI alcanza 0,87 frente al estándar de referencia. La diferencia es pequeña, pero existe; por eso la aprobación sigue correspondiéndole a usted y se marcan los casos límite.

unos segundos hasta la retroalimentación

Retroalimentación mientras la pregunta aún está abierta

La evaluación se genera durante la realización: enviar, esperar brevemente y leer la retroalimentación. La duración exacta depende de la extensión de la respuesta y de la carga; son segundos, no minutos.

La diferencia didáctica no está en la velocidad, sino en el momento: quien se entera después de una semana de cuál fue el problema ya ha olvidado su propio razonamiento. Quien se entera de inmediato todavía puede retomarlo.

sin nombre Participación mediante código

El alumnado no necesita una cuenta

Una prueba se abre mediante un código de cinco cifras. No se crea ninguna cuenta, no se solicita ningún nombre ni se almacena ninguna dirección de correo electrónico; la respuesta queda en la base de datos sin ninguna persona detrás.

Para usted, esto significa que puede ver el grupo de clase en su conjunto y cada respuesta por separado, pero la relación con un nombre solo se establece allí donde usted mismo la crea: en el aula, no en el sistema.

Situación y límites: Las cifras actuales se cuentan de nuevo cada vez que se carga la página. La concordancia procede de una recogida de datos sobre un conjunto fijo de tareas y no se aplica automáticamente a cada tarea nueva; para sus propias tareas es un punto de referencia, no una promesa.

El método, la base de datos y el análisis se describen detalladamente.

La ciencia que hay detrás