La maggior parte dei creatori di corsi si preoccupa solo di un numero: il tasso di completamento. Osservano le percentuali, aggiornano continuamente le dashboard e si preoccupano degli abbandoni a metà corso. Il tasso di completamento sembra sinonimo di successo o fallimento. Un tasso di completamento elevato sembra la prova dell'efficacia del corso, mentre un tasso di completamento basso sembra il segno del fallimento del corso.
Ma semplicemente non è vero.
Il tasso di completamento è facile da monitorare, ma non ha alcun significato per l'apprendimento. Uno studente può completare ogni lezione senza imparare nulla di utile. Uno studente può abbandonare dopo la seconda lezione e cambiare radicalmente il proprio modo di pensare, agire o lavorare. Quale dei due casi ha più successo? Il secondo.
In questo articolo discuteremo del motivo per cui il completamento del corso è diventato così ampiamente adottato, del perché sia una metrica inefficace e di quali metriche dovresti considerare se il tuo corso deve davvero apportare un valore reale.
Perché i tassi di completamento sono diventati la metrica predefinit
Il motivo per cui i tassi di completamento sono diventati popolari non è che siano la misurazione migliore, ma che sono i più facili da monitorare. La maggior parte delle piattaforme di apprendimento dispone di un sistema automatizzato per questo. Mostrano se uno studente ha terminato il corso oppure no.
È anche piuttosto facile da integrare in una dashboard. Un unico numero semplice, ordinato e promettente oppure, al contrario, problematico e impegnativo. Quando l'80% degli utenti termina il corso, sembra un grande risultato. Quando è il 20%, è ovviamente un'indicazione che qualcosa non va.
Anche le piattaforme hanno un ruolo. La maggior parte delle piattaforme per la creazione di corsi usa il tasso di completamento come metrica insieme alle valutazioni e alle iscrizioni. Così, lasciano intendere che sia importante quanto le altre metriche e, alla fine, i creatori tendono a considerarlo un obiettivo chiave anziché solo un segnale.
C'è anche una componente psicologica. Completare qualcosa dà un senso di realizzazione sia ai creatori sia agli studenti. È gratificante dire: "Ho finito questo corso." Di conseguenza, anche creatori e utenti tendono a equipararlo all'apprendimento, mentre è ben lontano dalla verità. Questa supposizione non è una buona base.
Inoltre, è molto comodo da confrontare. Un corso che vanta un tasso di completamento del 70% sembrerà automaticamente migliore di un corso con il 40%. Questo facilita i report e le decisioni rapide. Ma non tutte le metriche facili da monitorare e confrontare sono significative. Quindi i tassi di completamento sono stati usati perché riducono al minimo le complicazioni.
Il problema dei tassi di completamento
I tassi di completamento sembrano trasparenti, eppure nascondono moltissimo.
Il problema centrale è che non misurano l'apprendimento. Completare un corso significa solo che uno studente ha guardato o cliccato tutto il materiale. Non dice se ha capito il materiale, se lo ha assimilato o se può usare le informazioni in modo produttivo.
Gli studenti possono tecnicamente completare un corso senza coinvolgersi davvero: accelerando i contenuti, saltando gli esercizi ed evitando la pratica. Anche se nei dati analitici questo appare come progresso, non riflette un apprendimento reale né lo sviluppo di competenze.
Un altro problema dei tassi di completamento è che ignorano completamente l'intenzione dell'utente. Non tutti seguono un corso perché vogliono finirlo. Molti studenti stanno cercando di risolvere un problema o trovare un'informazione specifica, ma potrebbero non aver bisogno di tutte le lezioni offerte. In questo caso, una volta trovato ciò che cercavano, continueranno con il resto dei contenuti nel modo che preferiscono. Dal loro punto di vista, il corso ha avuto successo; secondo le tue metriche, invece, hanno abbandonato.
Si tratta di un falso negativo. Viene rilevato un problema dove in realtà non esiste alcun problema.
I tassi di completamento possono anche portare a una progettazione molto scadente. Quando l'obiettivo è il completamento, i corsi diventano sempre più brevi e semplici. Le informazioni complesse vengono rimosse, gli esercizi vengono ridotti o eliminati del tutto e qualsiasi elemento che possa richiedere troppo tempo allo studente per essere assimilato o compreso viene escluso perché considerato un rischio.
Il risultato finale è un contenuto facile da fruire, ma non altrettanto facile da applicare. Lo studente lo segue rapidamente ma non impara nulla di sostanziale.
La metrica che conta davvero: il cambiamento comportamentale
Se il completamento non è l'obiettivo giusto, allora quale lo è? Il cambiamento comportamentale.
È tutto qui. L'obiettivo del corso è cambiare il modo in cui una persona si comporta dopo aver seguito il corso. Potrebbe trattarsi di nuove abitudini, nuove competenze applicate in situazioni lavorative reali o decisioni diverse.
Il contenuto è semplicemente lo stimolo. Ecco alcuni esempi:
● Il successo di un corso di marketing è che un marketer lanci una campagna. Non che abbia guardato tutte le lezioni sulle campagne.
● Il successo di un corso di programmazione è che qualcuno abbia creato un'app che funziona. Non che abbia guardato ogni video.
● Il successo di un corso di fitness è che la routine quotidiana di esercizi sia ora più efficace e che venga seguita con costanza. Non che siano stati guardati tutti i video e date tutte le risposte.
● Il successo di un corso di leadership è un miglioramento della comunicazione nel team e migliori capacità decisionali sul posto di lavoro. Non che siano state seguite tutte le lezioni.
In ogni caso, il risultato può essere osservato al di fuori dell'ambiente di apprendimento stesso. Il mondo è un po' diverso.
Ecco perché il cambiamento comportamentale è una metrica molto migliore. Collega ciò che viene appreso all'azione nel mondo reale. Fornisce prove chiare che un corso ha avuto un effetto diretto.
È il motivo stesso per cui le persone seguono corsi. Molto raramente cercano solo di consumare contenuti. Le persone cercano di risolvere un problema o migliorare un aspetto della propria vita o del proprio lavoro. Il cambiamento comportamentale è ciò che si vede quando questo accade.
Come misurare il cambiamento comportamentale
Il cambiamento comportamentale, pur essendo più difficile da misurare rispetto ai tassi di completamento, non è affatto impossibile. L'unico vero requisito è guardare oltre la piattaforma del tuo corso e misurare cosa fanno gli studenti dopo aver fruito dei tuoi contenuti.
Follow-up di base come primo passo
Puoi iniziare con follow-up di base. Chiedi agli studenti quali azioni hanno intrapreso dopo aver completato una lezione o un modulo. Questo può essere fatto tramite brevi sondaggi inviati alcuni giorni o settimane dopo. Assicurati di concentrare le domande sull'applicazione nel mondo reale:
● Quali azioni hai intrapreso dopo questo corso?
● Quali sono stati i risultati di questa azione?
● Quali aspetti della tua routine/flusso di lavoro hai cambiato?
Risposte come questa possono fornire dati direttamente riconducibili al vero impatto.
Segnali orientati all'azione per continuare
Oltre ai semplici follow-up, concentrati sui segnali orientati all'azione all'interno della piattaforma del corso. Sebbene il completamento delle lezioni indichi l'acquisizione di conoscenze, assicurati di monitorare il completamento di azioni specifiche all'interno di ogni lezione. Alcuni esempi includono:
● È stato completato un compito?
● È stato inviato un progetto?
● È stato applicato un framework o un sistema?
Questi indicatori sono prove molto più solide di un cambiamento comportamentale rispetto alla semplice visualizzazione delle lezioni.
Quali sono i prossimi passi?
I tassi di implementazione sono un'altra strada da perseguire. Qui monitorerai in che misura gli studenti stanno integrando i materiali appresi nella loro pratica reale. Se un corso insegna una metodologia o un sistema specifico, cerca di determinare quanti studenti lo hanno effettivamente implementato.
Oltre all'implementazione, richiedi e monitora prove del lavoro svolto dai tuoi studenti. Incoraggiali a inviare progetti completati, screenshot dei risultati, confronti prima e dopo, o casi di studio personali per dimostrare i progressi. In questo modo misuri il cambiamento comportamentale e crei una prova sociale dell'efficacia del tuo corso.
Per ottenere prove a lungo termine, invia controlli differiti. Ai traguardi di 30, 60 e 90 giorni, chiedi agli studenti cosa è stato mantenuto. Un cambiamento comportamentale coerente nel lungo periodo ha un impatto molto maggiore rispetto a un singolo episodio isolato di azione.
Infine, combina i risultati qualitativi e quantitativi. Sebbene le metriche evidenzino le tendenze, le storie individuali forniscono profondità e comprensione. Un caso ben articolato di cambiamento tangibile è infinitamente più prezioso di un alto tasso di completamento senza prove dei risultati.
Metriche di supporto che contano più del completamento
Sebbene il cambiamento comportamentale sia il risultato finale, è importante utilizzare metriche di supporto per monitorare gli studenti mentre si avvicinano a esso. Forniscono segnali anticipati per ottimizzare il tuo corso molto prima di vedere risultati a lungo termine.
Profondità del coinvolgimento
La profondità del coinvolgimento è una metrica potente. Invece di monitorare semplicemente fino a che punto arrivano gli studenti, misura quanto profondamente stanno interagendo. Questo include il tempo trascorso nelle lezioni chiave, il completamento degli esercizi e la revisione attenta delle parti più complesse.
Uno studente disposto a dedicare tempo a comprendere un concetto difficile ha molte più probabilità di applicarlo in seguito rispetto a chi scorre rapidamente il materiale. Più profondamente si coinvolge, più è probabile che agisca.
Tasso di ritorno
Il tasso di ritorno è un'altra metrica importante. Tiene traccia di quante volte uno studente torna dopo la sessione iniziale con il corso. Se le persone continuano a tornare più volte, probabilmente trovano il contenuto abbastanza prezioso da tornarci, ancora e ancora.
I corsi che portano a un cambiamento comportamentale raramente vengono completati in una sola sessione. Gli studenti torneranno quando saranno pronti ad agire su un'informazione o a richiamarla alla mente.
Interazione a livello di lezione
L'interazione a livello di lezione è un altro segnale prezioso. Invece di considerare il corso nel suo insieme, cerca di capire come le singole lezioni guidano l'azione:
● Quali lezioni hanno il tasso di replay più alto?
● Dove gli studenti mettono in pausa il video o dedicano più tempo?
● Quali sezioni specifiche portano gli utenti a completare un'attività?
Usa queste informazioni per capire quali parti del corso forniscono un vero valore e quali invece necessitano di ottimizzazione, rimozione o miglioramento.
Output pratico
L'output pratico è anch'esso un segnale potente. Cosa stanno producendo gli studenti come risultato del tuo corso? Si tratta di un documento, di un progetto, di un piano o di un qualche risultato concreto?
Se il tuo corso non porta a un output, difficilmente porterà a un cambiamento.
Monitora gli abbandoni nei diversi punti con una visione più sofisticata. Sebbene siano spesso considerati un fallimento, gli abbandoni possono essere visti come segnali. Se gli studenti lasciano il corso in un certo punto ma riescono comunque a ottenere con successo il cambiamento comportamentale desiderato, quella specifica lezione potrebbe già fornire il valore chiave.
Infine, esamina il feedback degli studenti concentrandoti sui risultati. Invece di chiedere "Ti è piaciuto il corso?" chiedi "Cosa hai fatto di diverso dopo aver seguito questo corso?" e "Quale risultato hai ottenuto?"
La soddisfazione si ottiene facilmente. L'impatto è molto più difficile da raggiungere, ma è di fondamentale importanza.
Queste metriche complementari ti permettono di andare oltre un successo superficiale per arrivare a una comprensione più profonda di come il tuo corso generi risultati.
Conclusione
Il tasso di completamento è semplice da misurare, ma premia solo i progressi all'interno del tuo corso piuttosto che i risultati al di fuori di esso.
Affidandoti esclusivamente al tasso di completamento, puoi creare corsi facili da completare ma difficili da implementare.
La misura che dimostra davvero che stai avendo un impatto è il cambiamento comportamentale; dimostra che gli studenti non stanno semplicemente consumando informazioni, ma stanno mettendo in pratica ciò che hanno imparato.
Questo richiede un po' più di impegno. Saranno necessarie domande migliori da porre e un meccanismo migliore per monitorare i risultati, ma il valore della progettazione del corso giustifica ampiamente il tempo aggiuntivo.
Una volta che misurerai ciò che conta davvero, inizierai a sviluppare corsi che saranno ricordati e consigliati molto tempo dopo che lo spettatore avrà smesso di guardare le lezioni.
