Usi la AI? La sai usare veramente?

 Ieri, mentre scrollavo le notizie su Linkedin, mi è caduto l'occhio su un post di Datapizza dedicato alle skill di chi utilizza solitamente la AI e, dopo averlo letto, mi è venuta voglia di creare un test apposito.

Tutto è cominciato con una domanda semplice a chatGPT, allegando l'articolo originale da cui è nata la mia iniziativa e, prompt dopo prompt, alla fine è nato un vero e proprio progetto.

Vi presento il mio AI Skill Test.

Cinquanta domande che affrontano vari temi legati al mondo degli LLM, e non solo. 

La cosa interessante di questo test è che viene chiesto anche quale sia la propria consapevolezza sul tema, così che alla fine dell'esame, chi si è sottoposto abbia un confronto tra ciò che crede, e ciò che è risultato dal test.

Il test propone domande secche, domande a risposta multipla, test di prompt engineering, e anche qualche trabocchetto. Il set di domande è ben più ampio di quello che potete immaginare, per cui, se al primo giro va storta, ripetendolo, non appariranno gli stessi quesiti della precedente esperienza... E' Inutile barare! Meglio prendere atto che si hanno delle lacune, e c'è pure una bella bibliografia da cui partire per studiare, e migliorare il proprio score.

E ancora di più... Sono subito arrivati i primi feedback, il che è incredibile.

Però vorrei fare una breve riflessione sulle proposte che mi sono state fatte. Copio e incollo:

50 domande forse sono troppe per iniziare. Potrebbe funzionare meglio una versione più breve, tipo 10-20 domande, con la possibilità di espandere fino a 50 per chi vuole approfondire.

La seconda cosa che ho notato è che l'ordine delle risposte cambia ogni volta, e questo aggiunge un piccolo carico mentale in più quando si cerca di rispondere velocemente. Mi capitava di rispondere spesso nello stesso modo, e ogni volta dovevo fermarmi un attimo in più a controllare dove fosse l'opzione giusta.

Infine, sarebbe utile poter cliccare la risposta e passare automaticamente alla domanda successiva, senza dover premere "avanti" manualmente, lasciando comunque la possibilità di tornare indietro per cambiare risposta.

Cosa ci leggete in queste proposte?

Io ci vedo una grossa difficoltà ad affrontare un compito di lunga durata (50 domande sono troppe). Ci vedo difficoltà di concentrazione (l'elenco delle risposte deve avere sempre lo stesso ordine, altrimenti diventa un problema). Ci vedo anche un po' di pigrizia (bisogna passare in automatico alla domanda successiva, il tasto avanti è... troppo "manuale").

Ovviamente questi feedback sono oro per me, e sto già modificando la pagina in modo tale che possa rispondere alle richieste ricevute senza però trasformare il test in un classico giochino da social network. Implementerò sicuramente l'avanzamento automatico dove possibile, e prevederò, oltre al test completo, dei test più brevi per i singoli temi. Non cambierò l'ordine casuale delle risposte... Credo che sia utile per 'costringere' colui che esegue il test a concentrarsi su ciò che sta facendo.

Tornando al test... Come sempre è disponibile su GitHub, a questo indirizzo.