Correzione con IA, rivista dal docente

Ecco una correzione assistita dall'inizio alla fine, su una domanda aperta fittizia: la griglia bloccata prima della prova, la risposta di un partecipante, il suggerimento di Evalmee IA criterio per criterio, poi la decisione del correttore. È questa decisione, non il suggerimento, a entrare nel voto.

La domanda, su 6 punti: «Spiega la differenza tra valutazione formativa e valutazione sommativa, con un esempio di ciascuna». Prima della prova, il correttore ha collegato tre criteri alla domanda, 2 punti ciascuno, e ha bloccato la griglia: la definizione della valutazione formativaValutazione formativaValutazione condotta durante l'apprendimento, la cui funzione è informare lo studente e il docente sulle acquisizioni in corso di costruzione. Il suo prodotto utile è il feedback, non il voto: è frequente, a bassa posta in gioco, e serve a correggere la traiettoria finché si è ancora in tempo. Il termine nasce dai lavori di Michael Scriven del 1967, ripresi da Benjamin Bloom, che oppongono la valutazione che forma alla valutazione che fa un bilancio. In concreto, una valutazione formativa si riconosce da tre tratti: un feedback rapido e preciso su ogni risposta, un risultato che pesa poco o nulla sul voto finale, e un seguito didattico deciso a partire dagli errori osservati. Esempio: un quiz di dieci domande alla fine di ogni lezione, corretto automaticamente, con la spiegazione della risposta giusta mostrata subito; il docente rilegge le statistiche per domanda e riprende nella lezione successiva il concetto che metà del gruppo ha sbagliato. L'effetto testing rafforza l'interesse del dispositivo: mettersi alla prova consolida la memoria più che rileggere. La stessa domanda può servire in formativo o in sommativo; a decidere è l'uso del risultato, non il formato.Vedi la definizione completa, quella della valutazione sommativaValutazione sommativaValutazione che interviene al termine di una sequenza, di un modulo o di un anno per fare un bilancio delle acquisizioni e produrre un voto che conta. Fissa un risultato invece di accompagnare un progresso, e si distingue dalla valutazione formativa per la sua funzione, non per il formato delle domande poste. La parola viene da somma: il voto riassume ciò che è stato appreso e serve a decidere, superare un modulo, classificare, ammettere, rilasciare un titolo. Quando questa decisione condiziona un diploma o una certificazione si parla più precisamente di valutazione certificativa. Esempio: l'esame finale di un corso di diritto dei contratti, due ore, un caso pratico e dieci domande brevi, valutato in trentesimi e con un peso del sessanta per cento sul voto del modulo, il resto proveniente dalla valutazione continua. Poiché il suo voto ha conseguenze, una valutazione sommativa esige più di una formativa: una griglia di punteggio pubblicata in anticipo, condizioni di svolgimento identiche per tutti, un'identificazione del candidato, una correzione tracciabile e una possibilità di ricorso. Un'analisi degli item dopo la prova resta utile: una domanda che i candidati migliori sbagliano più spesso degli altri segnala un testo ambiguo o una soluzione errata.Vedi la definizione completa, la pertinenza degli esempi.

La risposta del partecipante: «La valutazione formativa avviene durante l'apprendimento. Serve a individuare ciò che chi impara non ha ancora capito, per tornarci sopra. La valutazione sommativa è quella che conta nella media, come l'esame di fine semestre».

Dopo un clic su Genera i feedback, Evalmee IA propone 4 punti su 6 e questo feedback: «Le due definizioni si distinguono per il momento e per l'uso del voto. Manca un esempio di valutazione formativa; un quiz di fine lezione senza voto lo sarebbe».

Il correttore rilegge. Tiene il feedback e il punto tolto sugli esempi, ma ripristina i 2 punti della definizione sommativa: «quella che conta nella media» è la formulazione usata a lezione. Fa clic su Approva. La risposta vale 5 punti su 6.

Definisci i criteri e il punteggio prima dell'esame. Dopo la prova blocchi la griglia della domanda, l'IA genera suggerimenti di punti e di feedback, tu li rileggi e fai clic su Approva. Il voto si muove solo in quest'ultima fase.

L'ordine conta: la grigliaRubrica di valutazioneTabella che incrocia i criteri di valutazione con livelli di prestazione descritti a parole, dal più debole al più elevato. Il correttore colloca l'elaborato in una casella invece di attribuire una cifra: il voto diventa la conseguenza di una descrizione condivisa in anticipo.Vedi la definizione completa viene bloccata prima che l'IA intervenga, quindi il punteggioGriglia di punteggioRegola che converte le risposte di un candidato in un voto. Fissa il numero di punti per domanda, le eventuali penalità e il modo in cui vengono attribuiti i punti parziali. Pubblicata prima della prova, costituisce l'impegno dell'esaminatore su ciò che sarà valorizzato.Vedi la definizione completa è stabilito prima di aver visto gli elaborati e si applica a tutte le risposte.

L'assistente si chiama Evalmee IA. Si appoggia a OpenAI, sui suoi punti di accesso europei: la domanda, la rubrica e la risposta gli vengono inviate senza il nome né l'identificativo del partecipante, e non servono ad addestrare alcun modello.

L'IA suggerisce punti e scrive feedback sulle risposte scritte. Non valuta le domande chiuse, non definisce alcun criterio, non convalida alcun elaborato e non rileva il plagio. Ognuno di questi quattro limiti corrisponde a una scelta di progettazione, non a una lacuna temporanea.

Una pagina prodotto che promette una correzione interamente automatica descrive un esame che pochi istituti accetterebbero di difendere davanti a una commissione. Ecco quindi la linea esatta. La comparativa delle piattaforme d'esame online pone la stessa domanda agli altri sei editori francesi, con la pagina pubblica su cui ogni risposta è stata letta.

Prima della prova, il punteggio è fissato e la griglia bloccata. Dopo la prova, resta modificabile dalla scheda Prova, e tutti i voti vengono ricalcolati. In entrambi i casi, uno stesso esame non viene mai corretto secondo due punteggi diversi.

Una griglia bloccata non si modifica senza conseguenze: se la sblocchi quando alcune risposte sono già corrette, quelle correzioni vengono azzerate. La prova segue la stessa regola. Una volta aperto l'esame, le domande viste dai partecipanti non cambiano più, in modo che tutti abbiano svolto la stessa prova.

Un errore di punteggio si rimedia dopo. Dalla scheda Prova, il pulsante Modifica permette di rivedere le opzioni corrette, le ponderazioni, il commento di correzione e i tag, poi di avviare Ricalcola i voti. Una risposta giusta segnata male si corregge così in due minuti, senza ritoccare gli elaborati uno per uno. Una domanda da annullare si riduce a una ponderazione riportata a zero, seguita dallo stesso ricalcolo.

Sulle domande a scelta, il punteggio è esplicito e configurabile, anche dopo che i partecipanti hanno svolto la prova. La modalità per discordanze valuta sia le opzioni selezionate sia quelle lasciate vuote. Per vedere che effetto ha una penalità su un compito prima di fissarla, il calcolatore del voto della verifica applica lo stesso calcolo domanda per domanda. Per restituire il voto su una scala diversa dal totale dei punti, il convertitore di voti in decimi fa la proporzione e stampa la tabella completa.