{"id":143512484,"date":"2024-04-14T13:17:19","date_gmt":"2024-04-14T13:17:19","guid":{"rendered":"https:\/\/www.webcircolare.net\/scarrione\/2024\/04\/14\/una-startup-che-supporta-la-valutazione\/"},"modified":"2024-04-14T15:35:34","modified_gmt":"2024-04-14T13:35:34","slug":"una-startup-che-supporta-la-valutazione","status":"publish","type":"post","link":"https:\/\/www.webcircolare.net\/scarrione\/2024\/04\/14\/una-startup-che-supporta-la-valutazione\/","title":{"rendered":"Una startup che supporta la valutazione"},"content":{"rendered":"\n<p>Cari lettori,<\/p>\n\n\n\n<p>abbiamo gi\u00e0 avuto modo di riflettere pi\u00f9 volte su quanto un assistente artificiale possa rendere pi\u00f9 efficace e stimolante la nostra attivit\u00e0 di valutazione, usualmente percepita come uno dei compiti pi\u00f9 noiosi, monotoni e frustranti da parte della categoria professionale degli insegnanti di ogni ordine e grado.<\/p>\n\n\n\n<p>Oggi vado ad esaminare e presentare sinteticamente una startup che cerca di dare risposta a questo bisogno: <a href=\"https:\/\/www.graide.co.uk\/\">Graide &#8211; AI grading. Increase feedback and save time.<\/a><\/p>\n\n\n\n<p>Al nostro arrivo sulla home page veniamo accolti da un chatbot, con questa proposta di interazione:<\/p>\n\n\n\n<figure class=\"wp-block-image size-large is-resized\"><img decoding=\"async\" src=\"http:\/\/www.webcircolare.net\/scarrione\/wp-content\/uploads\/2024\/04\/df73e41c-3fb0-4f50-9e2f-202ea72d8e35_812x894.png\" alt=\"\" style=\"width:366px\"\/><\/figure>\n\n\n\n<p>Ovviamente, chiediamo di saperne di pi\u00f9 e ci vengono proposte alcune alternative: una linea di approfondimento sull\u2019integrazione con i sistemi LMS (tra cui spiccano Moodle e Blackboard), una pi\u00f9 tecnica sulla disponibilit\u00e0 di API (al momento non disponibile, contrattabile, diciamo, su misura) e una pi\u00f9 accademica sulla presenza di casi di studio. <\/p>\n\n\n\n<p>Questa ultima possibilit\u00e0 mi sembra la pi\u00f9 interessante da proporvi, perch\u00e9 si lega bene a riflessioni che abbiamo fatto in passato sulla base di esperienze empiriche anche con strumenti gratuiti. Vengono citati tre studi di riferimento: i primi due sono entrambi dell\u2019Universit\u00e0 di Birmingham e il terzo di JSC (l&#8217;agenzia britannica per il digitale, i dati e la tecnologia che si occupa di istruzione terziaria, ricerca e innovazione, associazione no profit). Vengono pubblicati direttamente sul sito di Graide e non ci sono riferimenti a pubblicazioni scientifiche esterne, il che riduce forse la loro attendibilit\u00e0 ai nostri occhi. Tuttavia, la distribuzione nel tempo (dal 2021 al 2023), ci spinge a considerare con interesse i risultati, che non sembrano frutto di un\u2019esperienza episodica o improvvisata, nata sull\u2019onda dell\u2019entusiasmo e delle \u201cmode\u201d che anche nella pedagogia, come nella tecnologia, si manifestano spesso nel mondo che ci circonda.<\/p>\n\n\n\n<p>Il primo articolo, del novembre 2021, viene sintetizzato cos\u00ec nell\u2019abstract iniziale:<\/p>\n\n\n<div class=\"pullquote\">\n<p>Graide di 6 Bit Education \u00e8 una piattaforma di valutazione e feedback basata sull&#8217;intelligenza artificiale. Impara il modo in cui gli educatori danno il feedback in modo da non dover valutare la stessa risposta due volte. Questa ricerca ha confrontato la valutazione su carta con quella sulla piattaforma Graide per 10 domande con 172 invii per domanda. I tempi medi di valutazione si sono ridotti del 74% e il numero di parole di feedback fornite \u00e8 aumentato di un fattore di 7,2. Stimiamo che un&#8217;universit\u00e0, con 3500 studenti STEM, che utilizza Graide potrebbe risparmiare oltre 240.000 sterline all&#8217;anno.<\/p>\n<\/div>\n\n\n<p>Viene dunque evidenziata un\u2019utilit\u00e0 per i feedback nei corsi universitari, con una forte enfasi sull\u2019aspetto economico e pratico pi\u00f9 che su quello metodologico-didattico.<\/p>\n\n\n\n<p>Se volete leggere tutto lo studio, lo trovate qui: <a href=\"https:\/\/www.graide.co.uk\/blog\/university-of-birmingham-research\">University of Birmingham &#8211; Graide Efficacy Research<\/a><\/p>\n\n\n\n<p>Lo studio del 2022, sempre dell\u2019Universit\u00e0 di Birmingham mostra in modo pi\u00f9 oggetivo e \u201cdata driven\u201d cosa accade utilizzando uno strumento come Graide:<\/p>\n\n\n\n<blockquote class=\"wp-block-quote\"><p>46 membri del personale e assistenti didattici post-laurea hanno utilizzato Graide durante il progetto pilota, 31 hanno partecipato all&#8217;indagine e le statistiche principali del progetto pilota sono le seguenti:<\/p><ul><li><p>Quantit\u00e0 media di feedback dato al compito: 55,3 parole<\/p><\/li><li><p>Tempo medio impiegato per valutare i compiti: 5,3 minuti<\/p><\/li><li><p>22532 domande classificate nel set di dati.<\/p><\/li><\/ul><ul><li><p>10197 (45.3%) Domande valutate in 0-14 secondi.<\/p><\/li><li><p>6873 (30.5%) Domande valutate da 0 a 6 secondi<\/p><\/li><\/ul><ul><li><p>254.620 parole di feedback<\/p><\/li><\/ul><ul><li><p>20.794 parole di feedback digitate (utilizzo 12,2x)<\/p><\/li><\/ul><ul><li><p>46 dipendenti hanno utilizzato Graide per contrassegnare il lavoro (31 hanno partecipato all&#8217;indagine)<\/p><\/li><li><p>Rispetto ai sistemi esistenti:<\/p><\/li><\/ul><ul><li><p>L&#8217;80% ritiene che sia pi\u00f9 facile dare un feedback coerente<\/p><\/li><li><p>Il 71% trova pi\u00f9 facile dare un feedback di alta qualit\u00e0<\/p><\/li><li><p>Il 58% afferma che \u00e8 pi\u00f9 facile per gli studenti partecipare e ricevere feedback, il resto afferma che \u00e8 lo stesso<\/p><\/li><li><p>Il 90% lo trova pi\u00f9 veloce<\/p><\/li><\/ul><ul><li><p>Graide ha mostrato una riduzione media del 53% dei tempi di valutazione.<\/p><\/li><li><p>Il 94% degli utenti desidera continuare a utilizzare Graide.<\/p><\/li><\/ul><\/blockquote>\n\n\n\n<p>Anche in questo caso vi indico di seguito il link per chi vuole approfondire: <a href=\"https:\/\/www.graide.co.uk\/case-studies\/pdf-grading-univeristy-of-birmingham\">graide.co.uk\/case-studies\/pdf-grading-univeristy-of-birmingham<\/a><\/p>\n\n\n\n<p>La recensione pi\u00f9 interessante \u00e8 comunque quella del 2023, a cura dell\u2019agenzia britannica per il digitale. In questo caso si rimanda anche all\u2019articolo esterno al sito del produttore, proprio sul sito del Centro Nazionale per l\u2019Intelligenza Artificiale: <a href=\"https:\/\/nationalcentreforai.jiscinvolve.org\/wp\/2023\/06\/14\/national-centre-for-ai-graide-pilot-overview\/\">Graide Pilot Overview&nbsp; &#8211; Artificial intelligence (jiscinvolve.org)<\/a> Il Centro Nazionale per l&#8217;Intelligenza Artificiale nell&#8217;istruzione terziaria (NCAI) mira ad accelerare l&#8217;adozione dell&#8217;intelligenza artificiale (AI) nell&#8217;istruzione. Attraverso una serie di progetti pilota e di test che permettono ai membri di Jisc di sperimentare direttamente l&#8217;implementazione dell&#8217;AI, il NCAI pu\u00f2 valutare diversi prodotti AI e condividere i loro punti di forza, aiutando i membri a comprendere meglio in quali circostanze gli strumenti AI funzionano bene. <\/p>\n\n\n\n<p>Il test pilota di Graide nel settore dell&#8217;istruzione superiore aveva come obiettivo  studiare la domanda di strumenti di valutazione AI e verificare se Graide potesse soddisfare tali esigenze. Iniziato a marzo 2022 e concluso a gennaio 2023, il progetto si \u00e8 svolto in due fasi: nella prima, nove universit\u00e0 hanno testato Graide e sono state intervistate per scoprire l&#8217;utilit\u00e0 della piattaforma; nella seconda, cinque universit\u00e0 hanno sperimentato Graide direttamente.<\/p>\n\n\n\n<p>I feedback rilevati indicano che Graide \u00e8 particolarmente efficace nell&#8217;ambito matematico, grazie a un&#8217;interfaccia intuitiva e alla capacit\u00e0 di dare feedback consistente, migliorando anche la coerenza del feedback fornito dai docenti. Tuttavia, Graide si \u00e8 mostrato meno efficace per domande matematiche pi\u00f9 complesse con meno risposte standardizzate e per materie meno quantitative.<\/p>\n\n\n\n<p>Le risposte degli studenti al monitoraggio mostrano un apprezzamento per la rapidit\u00e0 e la qualit\u00e0 del feedback ricevuto tramite Graide, con la maggior parte che desidererebbe continuare ad utilizzarlo.<\/p>\n\n\n\n<p>E se questa sintesi dell\u2019articolo sopra linkato di Tom Moule comincia a mettervi un po\u2019 di curiosit\u00e0 e vi siete persi i miei post precedenti, trovate prove ed esperimenti su <a href=\"https:\/\/www.webcircolare.net\/scarrione\/\">www.federicascarrione.info.<\/a><\/p>\n\n\n\n<p>A presto!<\/p>\n\n\n\n<p>Federica<\/p>\n","protected":false},"excerpt":{"rendered":"<p>L&#8217;AI che assiste l&#8217;insegnante<\/p>\n","protected":false},"author":1,"featured_media":0,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[10,12,11],"tags":[],"post_mailing_queue_ids":[],"_links":{"self":[{"href":"https:\/\/www.webcircolare.net\/scarrione\/wp-json\/wp\/v2\/posts\/143512484"}],"collection":[{"href":"https:\/\/www.webcircolare.net\/scarrione\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.webcircolare.net\/scarrione\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.webcircolare.net\/scarrione\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/www.webcircolare.net\/scarrione\/wp-json\/wp\/v2\/comments?post=143512484"}],"version-history":[{"count":2,"href":"https:\/\/www.webcircolare.net\/scarrione\/wp-json\/wp\/v2\/posts\/143512484\/revisions"}],"predecessor-version":[{"id":143512490,"href":"https:\/\/www.webcircolare.net\/scarrione\/wp-json\/wp\/v2\/posts\/143512484\/revisions\/143512490"}],"wp:attachment":[{"href":"https:\/\/www.webcircolare.net\/scarrione\/wp-json\/wp\/v2\/media?parent=143512484"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.webcircolare.net\/scarrione\/wp-json\/wp\/v2\/categories?post=143512484"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.webcircolare.net\/scarrione\/wp-json\/wp\/v2\/tags?post=143512484"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}