Повечето създатели на курсове се интересуват само от едно число: процента на завършване. Те следят процентите, обновяват таблата за управление и се тревожат за отпадането на участници по средата на курса. Процентът на завършване изглежда като успех или провал. Високият процент на завършване изглежда като доказателство за ефективността на курса, а ниският — като провал на курса.
Но това просто не е вярно.
Процентът на завършване е лесен за проследяване, но е безсмислен за обучението. Обучаемият може да завърши всеки урок, без да научи нищо полезно. Може да се откаже след втория урок и коренно да промени начина, по който мисли, действа или работи. Кое е по-успешно? Второто.
В тази статия ще разгледаме защо завършването на курсове се е наложило толкова широко, защо е неефективен показател и на кои показатели трябва да обръщате внимание, ако курсът ви трябва да носи реална стойност.
Защо процентите на завършване се превърнаха в стандартния показател
Причината процентите на завършване да станат популярни не е, че са най-добрият измерител, а че са най-лесни за проследяване. Повечето платформи за обучение разполагат с автоматизирана система за това. Те показват дали обучаемият е завършил курса, или не.
Освен това те лесно се интегрират в табло за управление. Една проста цифра, която изглежда добре и обещаващо или, напротив, проблематично и тревожно. Когато 80% от потребителите завършат курса, това изглежда като голямо постижение. Когато са 20%, очевидно е знак, че нещо не е наред.
Платформите също играят роля тук. Повечето платформи за създаване на курсове използват процента на завършване като показател наред с оценките и записванията. Така те внушават, че той е също толкова важен, колкото и останалите показатели, и в крайна сметка създателите са склонни да го приемат като ключова цел, а не просто като сигнал.
Има и психологически компонент. Завършването се усеща като постижение и за създателите, и за обучаемите. Удовлетворяващо е да кажеш: „Завърших този курс.“ В резултат създателите и потребителите също са склонни да го приравняват с ученето, въпреки че това далеч не е вярно. Това предположение не е добра основа.
Нещо повече, много е удобно за сравняване. Курс с 70% процент на завършване автоматично ще изглежда по-добре от курс с 40%. Това улеснява отчетите и бързите решения. Но не всеки показател, който е лесен за проследяване и сравняване, е смислен. Затова процентите на завършване се използват, защото свеждат усложненията до минимум.
Проблемът с процентите на завършване
Процентите на завършване изглеждат прозрачни, но прикриват много неща.
Основният проблем е, че те не измерват ученето. Завършването на курс означава единствено, че обучаемият е изгледал или е преминал с кликване през всички материали. То не показва дали е разбрал материала, запомнил го е или може да използва информацията продуктивно.
Технически обучаемите могат да завършат курс, без наистина да се ангажират — като преминават набързо през съдържанието, пропускат упражненията и избягват практиката. Макар това да изглежда като напредък в анализите, то не отразява реално учене или развитие на умения.
Друг проблем с процентите на завършване е, че те напълно пренебрегват намеренията на потребителя. Не всеки записва курс, защото иска да го завърши. Много обучаеми се опитват да решат проблем или да намерят определена информация, но може да не се нуждаят от всички предлагани уроци. В този случай, след като намерят търсеното, те ще продължат с останалото съдържание по какъвто начин предпочетат. От тяхна гледна точка курсът е бил успешен; според вашите показатели те са отпаднали.
Това е фалшиво отрицателен резултат. Открива се проблем там, където всъщност няма такъв.
Процентите на завършване могат да доведат и до много лош дизайн. Когато целта е завършване, курсовете стават все по-кратки и несложни. Сложната информация се премахва, упражненията се намаляват или се премахват изцяло, а всеки елемент, който може да отнеме твърде много време на обучаемия да усвои или разбере, се изключва като риск.
Крайният резултат е съдържание, което е лесно за консумиране, но не и за прилагане. Обучаемият преминава бързо през него, но не научава нищо съществено.
Показателят, който наистина има значение: промяна в поведението
Ако завършването не е правилната цел, тогава каква е? Промяната в поведението.
Това е всичко. Целта на курса е да промени начина, по който човек се държи след преминаването му. Това може да са нови навици, нови умения, прилагани в реални работни ситуации, или вземане на различни решения.
Съдържанието е просто стимулът. Ето няколко примера:
● Успехът на курс по маркетинг е в това маркетологът да стартира кампания. Не в това да е изгледал всички уроци за кампании.
● Успехът на курс по програмиране е в това някой да е създал работещо приложение. Не в това да е изгледал всяко видео.
● Успехът на фитнес курс е в това ежедневната тренировъчна рутина на човека вече да е по-ефективна и той да я спазва. Не в това да е изгледал всяко видео и да е отговорил на всеки въпрос.
● Успехът на курс по лидерство е подобрената комуникация в екипа и по-добрите умения за вземане на решения на работното място. Не в това всички уроци да са били посетени.
Във всеки случай резултатът може да се наблюдава извън самата учебна среда. Светът е малко по-различен.
Затова промяната в поведението е много по-добър показател. Тя свързва наученото с действие в реалния свят. Дава ясно доказателство, че курсът е имал пряк ефект.
Точно затова хората посещават курсове. Много рядко те просто искат да консумират съдържание. Хората искат да решат проблем или да подобрят част от живота или работата си. Промяната в поведението е начинът, по който това изглежда на практика.
Как да измервате промяната в поведението
Промяната в поведението е по-трудна за измерване от процентите на завършване, но в никакъв случай не е невъзможна. Единственото реално изискване е да погледнете извън платформата си за курсове и да измерите какво правят обучаемите, след като са преминали през вашето съдържание.
Основни последващи проверки като първа стъпка
Можете да започнете с основни последващи проверки. Попитайте обучаемите какви действия са предприели след завършването на урок или модул. Това може да се постигне чрез кратки анкети, изпратени няколко дни или седмици по-късно. Уверете се, че въпросите са насочени към приложението в реалния свят:
● Какви действия предприехте след този курс?
● Какви бяха резултатите от това действие?
● Кои аспекти на вашата рутина/работен процес променихте?
Подобни отговори могат да предоставят директно приложими данни за реалното въздействие.
Сигнали, ориентирани към действие, които да проследявате
Освен простите последващи проверки, фокусирайте се върху сигнали, ориентирани към действие, в рамките на платформата за курсове. Макар завършването на урок да показва придобиване на знания, уверете се, че проследявате изпълнението на конкретни действия във всеки урок. Примерите включват:
● Изпълнена ли беше задача?
● Предаден ли беше проект?
● Приложена ли беше рамка или система?
Тези индикатори са много по-силно доказателство за промяна в поведението от гледаемостта на уроците.
Какви са следващите стъпки?
Процентите на внедряване са друг подход, който си струва да разгледате. Тук ще проследявате до каква степен обучаемите интегрират усвоените материали в реалната си практика. Ако курсът преподава конкретна методология или система, опитайте се да определите колко обучаеми действително са я внедрили.
В допълнение към внедряването, поискайте и проследявайте доказателства за свършената работа от обучаемите си. Насърчавайте ги да изпращат завършени проекти, екранни снимки на резултати, сравнения „преди и след“ или лични казуси, за да покажат напредъка си. Така измервате промяната в поведението и създавате социално доказателство за ефективността на курса си.
За дългосрочни доказателства изпращайте отложени проверки. На 30-ия, 60-ия и 90-ия ден попитайте обучаемите какво са запомнили. Устойчивата дългосрочна промяна в поведението има много по-голямо въздействие от единичен кратък изблик на действие.
И накрая, комбинирайте качествените и количествените си констатации. Докато показателите открояват тенденции, индивидуалните истории осигуряват дълбочина и разбиране. Добре представен случай на осезаема промяна е безкрайно по-ценен от висок процент на завършване без доказателства за резултати.
Подкрепящи показатели, които са по-важни от завършването
Макар промяната в поведението да е крайната цел, важно е да използвате подкрепящи показатели, за да проследявате обучаемите по пътя им към нея. Те дават по-ранни сигнали за оптимизиране на курса ви много преди да видите дългосрочни резултати.
Дълбочина на ангажираността
Дълбочината на ангажираността е мощен показател. Вместо просто да проследявате докъде стигат обучаемите, измервайте колко задълбочено взаимодействат със съдържанието. Това включва времето, прекарано в ключови уроци, изпълнението на упражнения и внимателното преглеждане на по-сложните части.
Обучаем, който е готов да отдели време, за да разбере трудна концепция, е много по-вероятно да я приложи по-късно от някой, който преглежда материала набързо. Колкото по-задълбочено се ангажират, толкова по-вероятно е да действат.
Процент на връщане
Процентът на връщане е друг важен показател. Той проследява колко пъти обучаемият се връща след първата си сесия с курса. Ако хората продължават да се връщат многократно, вероятно намират съдържанието за достатъчно ценно, за да се връщат към него отново и отново.
Курсовете, които водят до промяна в поведението, рядко се завършват на един път. Обучаемите ще се връщат, когато са готови да действат според дадена информация или да си я припомнят.
Взаимодействие на ниво урок
Взаимодействието на ниво урок е друг ценен сигнал. Вместо да разглеждате курса като цяло, разберете как отделните уроци стимулират действие:
● Кои уроци имат най-висок процент на повторно гледане?
● Къде обучаемите спират видеото или прекарват допълнително време?
● Кои конкретни раздели карат потребителите да изпълнят задача?
Използвайте тази информация, за да разберете кои части от курса носят истинска стойност и кои се нуждаят от оптимизиране, премахване или подобряване.
Практически резултат
Практическият резултат също е мощен сигнал. Какво създават обучаемите в резултат на вашия курс? Включва ли това документ, проект, план или някакъв конкретен резултат?
Ако курсът ви не води до резултат, вероятно няма да доведе и до промяна.
Наблюдавайте отпаданията в различни точки с по-задълбочен анализ. Макар често да се разглеждат като провал, отпаданията могат да се приемат като сигнали. Ако обучаемите напускат курса в определен момент, но все пак успешно постигат желаната промяна в поведението, този конкретен урок може вече да предоставя ключова стойност.
Накрая преглеждайте обратната връзка от обучаемите с фокус върху резултатите. Вместо да питате „Хареса ли ви курсът?“, попитайте „Какво направихте по различен начин, след като преминахте този курс?“ и „Какъв резултат постигнахте?“
Удовлетворението се постига лесно. Въздействието е много по-трудно, но изключително важно.
Тези допълващи се показатели ви позволяват да преминете отвъд повърхностния успех към по-дълбоко разбиране за това как курсът ви генерира резултати.
Заключение
Процентът на завършване е ясен показател, но възнаграждава само напредъка в рамките на курса ви, а не резултатите извън него.
Ако разчитате единствено на процента на завършване, може да създадете курсове, които са лесни за завършване, но трудни за прилагане.
Показателят, който действително доказва, че имате въздействие, е промяната в поведението; тя доказва, че обучаемите не просто консумират информация, а прилагат наученото на практика.
Това изисква малко повече усилия. Ще са нужни по-добри въпроси и по-добър механизъм за проследяване на резултатите, но ползата за дизайна на курса напълно оправдава допълнителното време.
След като започнете да измервате това, което наистина има значение, ще започнете да създавате курсове, които ще бъдат запомняни и препоръчвани дълго след като зрителят спре да гледа уроците.
