Raporty, statystyki, leaderboard – jak SuperMemo wspiera użytkowników i firmy w monitorowaniu efektów nauki

SuperMemo udostępnia wszystkim swoim użytkownikom podsumowania ich nauki oraz ranking użytkowników (leaderboard) oparty na ocenie faktycznego poziomu wiedzy. Firmy mają do dyspozycji cztery rozszerzone typy raportów z nauki: ogólny raport postępów, raport aktywności, raport według stron oraz raport testów poziomujących. Dzięki nim działy HR i L&D sprawdzają postępy pracowników w kursie językowym, czas nauki oraz obszary, w których uczący się mają największe trudności. Dane pochodzą bezpośrednio z algorytmu optymalizacji powtórek SuperMemo (spaced repetition), który na bieżąco analizuje wszystkie aktywności związane z nauką na platformie oraz w aplikacjach.

Na czym polega metoda SuperMemo?

SuperMemo od końca lat osiemdziesiątych rozwija system inteligentnych powtórek, znany jako spaced repetition – jest autorem i pionierem tego podejścia. To metoda, która optymalizuje harmonogram powtórek pod indywidualne tempo nauki użytkownika.

Algorytm bierze pod uwagę kontakt z każdą stroną ćwiczeniową podczas sesji nauki. Jeśli odpowiedź użytkownika jest poprawna, kolejna powtórka dla takiej karty w kursie zostaje zaplanowana z dłuższym odstępem czasu niż powtórka dla karty, na której odpowiedź była nieprawidłowa. Jeśli karta sprawia trudność, system proponuje wcześniejsze powtórzenie tego konkretnego materiału.

Dzięki temu użytkownik nie traci czasu na zbyt częste powtarzanie treści, które już dobrze zna. Nauka metodą SuperMemo ma dwie główne zalety:

• szybkość – system minimalizuje czas potrzebny na utrwalenie materiału,
• efektywność – użytkownik zapamiętuje informacje skuteczniej na dłużej.

Dziś metodę wymyśloną przez SuperMemo stosuje wiele aplikacji, jednak ich jakość jest zróżnicowana. Jak to możliwe? Umiejętność przewidywania przebiegu krzywych zapominania jest bardzo skomplikowana i wymaga głębokiej wiedzy eksperckiej. Jakość algorytmu przejawia się tym, jak precyzyjnie jest on w stanie przewidzieć faktyczne prawdopodobieństwo pamiętania, a jest to wartość, którą można statystycznie zmierzyć. Im lepsza jakość algorytmu spaced repetition, tym większa oszczędność czasu na naukę i tym większa retencja wiedzy użytkownika. Według naszych badań, pomimo dużej konkurencji, komercyjne wersje algorytmów SuperMemo nadal zdecydowanie przewyższają w tym aspekcie naśladowców.

Dane stanowiące o jakości algorytmu SuperMemo są podstawą statystyk, które SuperMemo udostępnia wszystkim użytkownikom, oraz raportów, które są dostępne w przypadku współpracy z klientami korporacyjnymi i instytucjonalnymi B2B.

Statystyki dostępne dla każdego użytkownika

Każdy kursant SuperMemo ma w aplikacji i serwisie online dostęp do zakładki „Statystyki”. Znajdują się tam dane o przerobionych nowych kartach, wykonanych powtórkach oraz czasie poświęconym na naukę.

Statystyki można filtrować według czterech okresów:

• Dzisiaj – aktywność z bieżącego dnia,
• Ten tydzień – podsumowanie ostatnich siedmiu dni,
• Ten miesiąc – wyniki z ostatnich 30 dni,
• Łącznie – pełna historia nauki od momentu dołączenia do SuperMemo.

Podsumowania są oparte na indywidualnych historiach nauki będących podstawą algorytmu SuperMemo. Te same dane źródłowe jeszcze pełniej zasilają raporty B2B dla klientów korporacyjnych, edukacyjnych i instytucjonalnych. 

Ranking użytkowników oparty na realnej wiedzy

SuperMemo prowadzi też ranking użytkowników (leaderboard), który różni się od rankingów znanych z innych platform do nauki języków. Nie liczy się tu liczba ukończonych lekcji ani czas spędzony w aplikacji, ale realna retencja wiedzy.

Pozycję w rankingu wyznacza łączna ilość informacji, którą użytkownik faktycznie aktualnie pamięta. Jak to możliwe? Algorytm SuperMemo szacuje indywidualne prawdopodobieństwo pamiętania każdej informacji każdego użytkownika platformy. Suma tych prawdopodobieństw daje wynik rankingowy danej osoby. To rozwiązanie jest możliwe wyłącznie dzięki precyzji algorytmu spaced repetition SuperMemo. 

Dlaczego punkty rankingowe spadają? Spadek wynika z upływu czasu i naturalnego zapominania, zgodnie z krzywymi zapominania precyzyjnie prognozowanymi przez SuperMemo. 

Dlaczego punkty rankingowe rosną? Wzrost oznacza, że w danym dniu użytkownik wie więcej niż dzień wcześniej. Aby utrzymać ten trend, warto uczyć się na bieżąco – przerabiać nowe karty i wykonywać zaplanowane powtórki. Każda nowa informacja zapamiętana danego dnia to +1 punkt w rankingu. Każda powtórka to wzrost o ułamek będący różnicą między wartością 1 (stuprocentowa szansa pamiętania), a prawdopodobieństwem pamiętania danej informacji sprzed jej odświeżenia.

Raporty dla klientów B2B – dane, które widzi firma, szkoła lub instytucja

Firmy, szkoły i instytucje korzystające z SuperMemo mają dostęp do znacznie szerszego zakresu danych niż pojedynczy użytkownik. SuperMemo udostępnia pełną historię postępów i pracy z platformą oraz każdym kursem dla każdego pracownika, historię nauki i powtórek na poziomie poszczególnych stron kursu oraz informacje przekrojowe dla grupy w formie umożliwiającej elastyczną analizę i syntezę tych danych.

SuperMemo oferuje cztery typy raportów: raport ogólny, raport aktywności, raport według stron oraz raport testów poziomujących. Każdy z nich odpowiada na inne potrzeby działu HR lub L&D.

Raport ogólny

To podstawowy raport postępów. Pokazuje ogólny obraz nauki w grupie lub u pojedynczego użytkownika.

Raport ogólny zawiera m.in.:

• datę pierwszego przerobienia kursu,
• datę ostatniego przerobienia kursu,
• postępy w kursie – liczbę przerobionych stron i procent ukończenia,
• czas spędzony na nauce.

Dział HR sięga po ten raport, gdy potrzebuje szybkiego przeglądu postępów całej grupy pracowników.

Raport aktywności

Raport aktywności jest najpopularniejszym wyborem, gdy trzeba przeanalizować proces nauki konkretnego pracownika. Pokazuje dane w podziale na poszczególne dni.

Raport aktywności zawiera m.in.:

• datę każdej sesji nauki,
• postępy w kursie – liczbę nowych stron nauczonych danego dnia wraz z procentem postępu,
• liczbę zaplanowanych powtórek na dany dzień,
• liczbę powtórek zaplanowanych i zaległych,
• liczbę wykonanych powtórzeń,
• całkowity czas spędzony na przeglądaniu stron kursu.

Raport według stron

To najbardziej szczegółowy raport SuperMemo. Analizuje proces nauki jednego użytkownika na poziomie pojedynczej strony kursu.

Raport według stron zawiera m.in.:

• liczbę błędnych odpowiedzi udzielonych na danej stronie,
• liczbę wykonanych powtórzeń,
• datę pierwszego i ostatniego przerobienia strony,
• aktualny interwał między powtórzeniami,
• liczbę dni do następnej powtórki,
• historię interwałów i ocen według daty.

Porównanie czterech typów raportów

Na tej podstawie firma może tworzyć własne przekroje i wizualizacje analityczne albo korzystać z wzorców dostarczonych przez SuperMemo, na przykład:

• raporty postępów zespołu,
• rankingi wykorzystania kursu,
• analizy zaangażowania uczących się,
• głębsze analizy retencji wiedzy, niezależne od tradycyjnych testów,
• mapę obszarów, z którymi pracownicy mają największe problemy.

Podsumowanie

Raporty SuperMemo dla firm opierają się na pełnych danych o nauce, które napędzają algorytm spaced repetition. Dzięki temu dział HR i L&D otrzymuje informacje oparte na realnym postępie w nauce, a nie tylko na czasie spędzonym w aplikacji.

Raport ogólny daje szybki przegląd całej grupy. Raport aktywności pokazuje regularność nauki dzień po dniu. Raport według stron pozwala dotrzeć do konkretnej strony kursu, z którą pracownik ma problem. Raport testów poziomujących zwraca wyniki wykonanych testów natychmiast po ich wykonaniu przez kursantów. Dane z tych czterech raportów można kompilować we własne zestawienia, przekroje i wizualizacje zależnie od potrzeb firmy. SuperMemo udostępnia też zestawienie kursantów zawierające wyniki ich poziomowania, parametry dostępów do aplikacji oraz dane o przyporządkowaniu do grupy na lektoratach (jeśli dotyczy).

Taki zestaw danych umożliwia ocenę efektów wykorzystania platformy, podejmowanie decyzji o dalszym jej wykorzystaniu w firmie oraz o wsparciu, którego potrzebują konkretni pracownicy.

FAQ – najczęstsze pytania o raporty z nauki w SuperMemo