Zdanie quizu w dniu szkolenia niewiele mówi o tym, co uczestnicy potrafią zrobić sześć tygodni później. Retencja nie następuje po zakończeniu kursu. Jest ona projektowana później, a późniejsza praktyka jest rozłożona i sprawdzana. Ten poradnik jest przeznaczony dla kierowników ds. szkoleń i rozwoju, projektantów szkoleń i menedżerów ds. szkoleń. Obejmuje pięć decyzji: co należy zachować, jakie zadania odzyskiwania i realizacji wykorzystać, jak je zaplanować, jak udzielać informacji zwrotnej oraz jak oceniać opóźnione zapamiętywanie i transfer. Rozróżnia również dwie rzeczy, które łatwo pomylić: zapamiętywanie faktów i utrzymywanie sprawności całego zadania. Przypadek i rubryka są ilustracjami: poproś menedżera roli o ich wcześniejsze przejrzenie.
Co mówią badania, a czego nie mówią
Warto poznać dwa wnioski z badań nad pamięcią. W badaniu z 2006 roku przeprowadzonym przez Roedigera i Karpicke, studenci, którzy przetestowano fragment tekstu zamiast go ponownie przeczytać Tydzień później przypomniałem sobie więcej, mimo że ponowne przeczytanie wydawało się bardziej skuteczne w krótkiej perspektywie. Przegląd z 2006 roku autorstwa Cepedy i współpracowników badania praktyki rozproszonej stwierdzono, że rozłożenie ćwiczeń w czasie poprawia późniejsze przypominanie sobie materiału, a najlepsza przerwa zależy od tego, jak długo materiał musi być przechowywany.
Oba to badania laboratoryjne, głównie ze studentami i głównie dotyczące przypominania. Wspierają one przywoływanie i rozmieszczanie informacji jako trafne wybory projektowe. Nie wskazują one właściwego odstępu czasu dla pracowników i niewiele mówią o złożonych zadaniach zawodowych. Potraktuj je jako powód do przetestowania własnego harmonogramu, a nie jako wzór.
Szybkie fakty
| Question | Krótka odpowiedź |
|---|---|
| Co sprawdzasz? | Przypomnij sobie fakty, które muszą być znane, i nowe zadania wymagające umiejętności. |
| Co ustala harmonogram? | Jak często wykonywane jest zadanie, jak ryzykowne jest popełnienie błędu i co pokazują dowody ucznia. |
| Co daje informację zwrotną? | Wyjaśnienia po każdym odzyskaniu, z dodatkowym ćwiczeniem mającym na celu wykrycie zauważonych luk. |
| Jak testować retencję? | Opóźnione przypominanie i opóźnione wykonywanie zadań oceniane oddzielnie. |
| Czy istnieje jeden właściwy interwał? | Nie. Nie kopiuj uniwersalnego harmonogramu. |
| Czego nie może naprawić? | Zadanie, którego nikt nie wykonuje w pracy, a proces, który uległ zmianie. |
1. Określ, co należy zachować
Oddziel to, co należy wycofać, od tego, co należy wykonać. Limit dawki, próg polityki lub zasada bezpieczeństwa to fakt, który powinien szybko przyjść do głowy. Obsługa trudnego klienta lub diagnozowanie usterki to umiejętność, którą należy wykazać, a nie wycofać. Następnie zapytaj, jak często pracownik wykonuje dane zadanie. Coś, co jest wykonywane codziennie, samo się utrzymuje. Coś, co jest wykonywane dwa razy w roku, na przykład czynność awaryjna, zanika, jeśli się tego nie przećwiczy.
2. Wybierz zadania pobierania i wykonywania
Wykorzystuj przywoływanie wiedzy: krótkie pytania, które wymagają od uczestników podania odpowiedzi, a nie jej rozpoznania. Wykorzystuj nowe przypadki zadań do zastosowania: w nowej sytuacji, a nie w tej ze szkolenia. Te dwa przypadki dostarczają różnych dowodów. Uczeń, który przypomina sobie regułę, wykazał się pamięcią. Uczeń, który stosuje ją w nowym przypadku, wykazał się większą wiedzą. Nasz przewodnik po dopasowywanie działań edukacyjnych do taksonomii Blooma wyjaśnia, jak dopasować aktywność do popytu.
3. Zaplanuj ćwiczenia wokół ryzyka i użytkowania
Dobieraj interwały w oparciu o wykorzystanie zadania, ryzyko i dowody uzyskane od uczniów. Rzadko wykonywane, ryzykowne zadanie wymaga więcej prób niż codzienne, niskiego ryzyka. Uczniowie, którzy odpowiadają poprawnie i szybko, mogą być pytani rzadziej. Uczniowie, którzy mają trudności, mogą być pytani szybciej. Nie przedstawiaj jednego harmonogramu jako odpowiedniego dla wszystkich pracowników: zapisz początkowe interwały jako hipotezę, a następnie dostosuj je, uwzględniając opóźnione wyniki.
Szkic startowy: krótka kontrola kilka dni po szkoleniu, kolejna kilka tygodni później, a następnie w momencie, gdy zadanie prawdopodobnie się pojawi, np. przed szczytem sezonu. Potraktuj je jako punkty kontrolne do przetestowania, a nie jako zalecane liczby.
4. Przekaż opinię i dostosuj wsparcie
Wyjaśnij poprawną odpowiedź, a nie tylko to, że uczeń się pomylił. Poświęć więcej czasu na ćwiczenia nad pominiętymi elementami i zgłoś problem instruktorowi lub trenerowi, jeśli to samo nieporozumienie powtarza się w kolejnych próbach. Uporczywe błędy zazwyczaj oznaczają, że pierwotne wyjaśnienie było słabe, a nie że uczeń potrzebuje więcej powtórzeń.
5. Oceń opóźnione zatrzymanie i przeniesienie
Oceń oddzielnie opóźnione przypominanie i opóźnione wykonanie zadania. Zespół może pamiętać regułę, a mimo to błędnie ją stosować. Następnie sprawdź, czy lepsze zapamiętywanie przekłada się na rzeczywistą pracę: obserwację menedżera lub analizę ostatniego zadania. Nasz przewodnik po… ocena osądu i rozwiązywania problemów w szkoleniu obejmuje punktację i kalibrację oraz nasz przewodnik po przeprowadzenie pilotażu mierzącego uczenie się i transfer do miejsca pracy pokazuje jak najpierw przetestować projekt na małej grupie.
Przypadek rozwiązany z informacją zwrotną i ponowną próbą
Ilustrujące. Projektant materiałów dydaktycznych lub kierownik ds. szkoleń powinien zweryfikować przypadek i kryteria odpowiedzi przed ich użyciem.
Walizka. Twój zespół dobrze wypada w teście zaraz po szkoleniu dotyczącym nowego procesu zwrotów, a sześć tygodni później ma problemy ze zrozumieniem przypadku zwrotu.
Zadanie. Zaplanuj odzyskiwanie danych i opóźnione kontrole wydajności. Uzasadnij swoje wybory, podaj wykorzystane dowody i powiedz, co jeszcze musisz wiedzieć.
Pierwsza próba. „Wysyłaj ten sam quiz ponownie w każdy piątek przez następne dziesięć tygodni”. Recenzent pyta, czy quiz sprawdza te same pytania, które już znają, czy sprawdza obsługę sprawy, czy tylko jej odbiór, oraz jak często ktoś będzie miał do czynienia ze zwrotem towaru. Uczeń nie zna odpowiedzi na żadne z tych pytań.
Prześlij opinię i spróbuj ponownie. Recenzent zwraca uwagę, że powtarzanie tych samych zadań uczy ludzi ich obsługi, a quiz nie może wykazać, czy poradzą sobie z danym przypadkiem. Uczeń jest proszony o nowy plan.
Silniejsza próba. Uczeń oddziela pięć faktów, które należy przypomnieć, takich jak okres zwrotu i limity akceptacji zwrotów, od jednej umiejętności, czyli obsługi nietypowych zwrotów. Fakty otrzymują krótkie pytania z wyjaśnieniami, kilka dni i kilka tygodni po szkoleniu. Umiejętność za każdym razem otrzymuje nowy przypadek, oceniany za pomocą rubryki. Częstotliwość jest zwiększana w przypadku rzadko spotykanych typów przypadków. Opóźnione przywołanie i opóźniona realizacja przypadku są raportowane osobno, a menedżer dokonuje przeglądu dwóch rzeczywistych zwrotów w ósmym tygodniu. Mówią, czego jeszcze potrzebują: jak często występuje każdy typ przypadku i kto jest właścicielem reguł procesu, jeśli ulegną zmianie.
Dlaczego każda odpowiedź jest możliwa do obrony lub niekompletna. Oceniaj według zatwierdzonych kryteriów, a nie gustu recenzenta. Pierwsza próba myli powtarzanie z zapamiętywaniem i nie pozwala na ocenę wykonania zadania, dlatego jest uznawana za błąd krytyczny. Druga dopasowuje czynność do zapotrzebowania, ustala harmonogram na podstawie użycia i ryzyka oraz mierzy zarówno przypomnienie, jak i wykonanie.
Oceń plan
Oceń każde kryterium od 0 do 2. Dostosuj kryteria do swoich potrzeb, współpracując ze specjalistą: ta rubryka stanowi proponowany punkt wyjścia, a nie sprawdzony standard gotowości.
| Kryterium | 0: nieobecny lub nieobsługiwany | 1: częściowy, z pominięciami | 2: kompletne i uzasadnione |
|---|---|---|---|
| Wykonanie zadania | Powtarza oryginalny quiz. | Harmonogramy kontroli, ale tylko w celu odwołania. | Planuje pobieranie faktów i nowych przypadków dotyczących umiejętności. |
| Rozumowanie | Nie podano powodu odstępów. | Podaje powód, ale nie podaje zastosowania ani ryzyka. | Ustala odstępy czasu w zależności od zastosowania, ryzyka i dowodów oraz określa, co jest niepewne. |
| Granice | Twierdzi, że jeden harmonogram pasuje każdemu. | Notatki ograniczają się do planu ich przetestowania. | Traktuje harmonogram jako hipotezę i definiuje sposób jego dostosowania. |
Definiuj błędy krytyczne osobno, na przykład raportując wynik z odwołania jako dowód kompetencji w zadaniu. Wynik ogólny nigdy nie może ukrywać krytycznego błędu.
Aby sprawdzić plan, porównaj linię bazową z niewidocznym, opóźnionym zadaniem i przed rozpoczęciem zdefiniuj populację, mianownik i harmonogram. Zmierz wydajność zadania, jakość zebranych dowodów i trafność opracowanego projektu uczenia się. Przed zaliczeniem kontroli sprawdź, czy nie zaszły równoczesne zmiany, takie jak aktualizacja procesu lub nowe narzędzie.
Gdzie interaktywna dostawa pomaga
Formaty interaktywne pomagają uczestnikom w podjęciu decyzji, zanim zobaczą, co wybrali inni. Podczas powtórki na żywo prowadzący może poprosić każdego członka zespołu o wpisanie odpowiedzi na pytanie dotyczące zwrotu, a następnie pokazać rozkładówkę przed dyskusją. Tempo prowadzenia zajęć dostosowane jest do rozłożonych w czasie pytań między sesjami. AhaSlides, kompleksowa platforma do współpracy zespołów i klas, obsługuje interaktywną naukę oraz zajęcia na żywo i w tempie własnym. Sprawdź, jak wykorzystasz harmonogram w swoim własnym procesie pracy, zanim zaczniesz na nim polegać.
Czego nie naprawią kontrole retencji
- Zadanie, którego nikt się nie podejmuje. Próbowanie czegoś, czego praca nigdy nie wymaga, jest stratą czasu.
- Zmieniony proces. Lepsze zapamiętanie starej zasady jest gorsze niż jej brak.
- Słabe pierwsze nauczanie. Odstępy pomagają ludziom zachować to, co zrozumieli, a nie to, czego nigdy nie pojęli.
- Ograniczenia dowodowe. Badania opierają się głównie na analizie laboratoryjnej. Zmierz własną populację.
PYTANIA I ODPOWIEDZI
Czym jest nauka rozłożona w czasie w szkoleniach w miejscu pracy?
Rozłożenie ćwiczeń i kontroli w czasie, zamiast przeprowadzenia wszystkiego na jednej sesji, dzięki czemu ludzie mogą zapamiętać to, czego się nauczyli.
Jak często należy przeprowadzać kontrole retencji?
Zależy to od częstotliwości wykonywania zadania, ryzyka popełnienia błędu i tego, co pokażą uczniowie. Zacznij od hipotezy i dostosuj ją, uwzględniając opóźnione wyniki.
Czy quiz wystarczy, aby sprawdzić, czy pamiętamy?
Test pokazuje skuteczność wycofania. Nie pokazuje, czy ktoś potrafi poradzić sobie z nowym przypadkiem. Oceń oddzielnie opóźnione wycofanie i opóźnioną wydajność.
Czy odstępy sprawdzają się zarówno w przypadku umiejętności, jak i faktów?
Najsilniejszy dowód dotyczy przypominania. W przypadku umiejętności, wykorzystaj nowe przypadki i obserwację nadzorowaną, a także przetestuj swój własny harmonogram.
Kto powinien dokonać przeglądu planu i kryteriów oceny?
Zanim ktokolwiek zostanie oceniony, musi się najpierw dowiedzieć się, kto pełni daną rolę, a także jaki jest projektant materiałów szkoleniowych lub menedżer ds. szkoleń.
Gdzie zacząć
Wybierz jedno szkolenie, które ludzie ukończą z powodzeniem, ale słabo wykorzystają. Wypisz jego fakty i umiejętności, ustal pierwszą kontrolę za kilka dni, drugą za kilka tygodni i zanotuj nowy przypadek w drugiej. Porównaj opóźnione przywołanie z opóźnioną wydajnością, a następnie dostosuj.
Aby zobaczyć, jak taki harmonogram może działać na żywo lub według własnego tempa, zapoznaj się z AhaSlides.
