https://frosthead.com

Un computer può davvero valutare un saggio?

In futuro, i computer saranno i nostri medici, i nostri soldati, i nostri vigili del fuoco e i nostri insegnanti. Diagnosticano le malattie, nutrono i nostri bambini, proteggono le nostre case e insegnano ai nostri figli. Una società sta già sviluppando un programma informatico di valutazione del saggio in grado di eliminare i professori e i valutatori di prova standardizzati. Ma un computer può davvero valutare un saggio elaborato con cura?

La società, edX, la pensa sicuramente così. Offrono già corsi online alle istituzioni, insieme a un sistema di intelligenza artificiale che valuterà i saggi degli studenti. John Markoff al New York Times spiega:

Anant Agarwal, un ingegnere elettrico che è presidente di EdX, ha predetto che il software di classificazione istantanea sarebbe uno strumento pedagogico utile, che consente agli studenti di sostenere test e scrivere ripetutamente saggi e migliorare la qualità delle loro risposte. Ha detto che la tecnologia offrirebbe netti vantaggi rispetto al tradizionale sistema di classe, in cui gli studenti spesso aspettano giorni o settimane per i voti.

"C'è un enorme valore nell'apprendimento con feedback immediato", ha detto il dott. Agarwal. "Gli studenti ci stanno dicendo che imparano molto meglio con un feedback immediato."

Se il feedback immediato è di alta qualità è un'altra domanda. Gli scettici di questi selezionatori di computer non sono difficili da trovare. Un gruppo, che si definisce Professionisti contro il punteggio macchina dei saggi degli studenti nella valutazione degli alti pali, ha rilasciato una dichiarazione e sta raccogliendo firme per denunciare il compito di passare a un computer. Loro scrivono:

Affrontiamo le realtà del punteggio automatico del saggio. I computer non possono "leggere". Non possono misurare gli elementi essenziali di un'efficace comunicazione scritta: accuratezza, ragionamento, adeguatezza delle prove, buon senso, posizione etica, argomento convincente, organizzazione significativa, chiarezza e veridicità, tra gli altri.

La petizione chiede ai legislatori di smettere di fare affidamento sui computer per la valutazione e alle scuole di interrompere l'acquisto nei sistemi di punteggio automatizzati.

Agarwal riconosce che il software potrebbe essere migliore e spera che migliorerà nel distinguere un buon saggio da uno mediocre. "Questo è l'apprendimento automatico e c'è ancora molta strada da fare, ma è abbastanza buono e il vantaggio è enorme", ha detto al New York Times . Inoltre, dice, chiunque pensi che gli insegnanti siano coerenti si sta prendendo in giro. "Abbiamo scoperto che la qualità della valutazione è simile alla variazione che trovi da istruttore a istruttore."

In effetti, alcuni studi hanno suggerito che i computer e gli insegnanti producono lo stesso tipo di variabilità nei punteggi. Uno studio di Mark Shermis presso l'Università di Akron ha concluso che "il punteggio automatizzato del saggio è stato in grado di produrre punteggi simili a punteggi umani per articoli di scrittura a risposta estesa con pari prestazioni sia per il genere di scrittura basato su fonti sia per quello tradizionale". Lo studio di Shermis, tuttavia, non è mai stato pubblicato su una rivista e altri ricercatori hanno messo in dubbio le sue affermazioni. Les C. Perelman del MIT ha scritto una risposta al documento Shermis, scrivendo che "un attento esame della metodologia del documento e dei set di dati utilizzati dimostra che tale affermazione non è supportata dai dati nello studio."

Il gruppo di professionisti cita anche diversi articoli che suggeriscono che i computer non sono bravi come gli insegnanti nel valutare gli studenti.

Molto probabilmente, questa è una domanda se questi computer sono ancora abbastanza bravi a classificare, e non se mai lo saranno. Ma non saranno solo gli insegnanti a ottenere più alta tecnologia, ma anche gli studenti. Se gli studenti apprendono ciò che il programma sta cercando, possono semplicemente scrivere un programma per scrivere a loro volta il saggio perfetto basato sulle specifiche del software. Forse in futuro, gli insegnanti informatici classificheranno gli studenti informatici.

Altro da Smithsonian.com:

L'insegnamento dell'Estonia al 100% dei suoi primi alunni a codice
Insegnare agli sbirri da vedere

Un computer può davvero valutare un saggio?