Trzech asesorów obserwuje, jak ten sam kucharz smaży pierś z kurczaka i podaje ją na talerz. Jeden z nich przyznaje 9 na 10 punktów, ponieważ talerz wygląda pięknie. Drugi przyznaje 6 punktów, ponieważ patelnia była przepełniona, a kurczak stracił soki, ponieważ nie odpoczywał. Trzeci ocenia 7 punktów, ponieważ „był w porządku, trochę za wolny”. Nikt nie popełnił błędu. Każdy z nich użył innego, prywatnego standardu, a kucharz otrzymuje trzy różne komunikaty dotyczące tego samego rezultatu.
To przykładowy scenariusz, a nie udokumentowany incydent. To problem, który ma rozwiązać ocena kompetencji kulinarnych w przypadku franczyz z wieloma kuchniami i wieloma asesorami. Niniejszy przewodnik jest przeznaczony dla dyrektorów ds. szkoleń w branży hotelarskiej oraz kierowników ds. operacji w restauracjach i hotelach. Zawiera on informacje na temat definiowania zadania, wyboru reprezentatywnej próby zadań, tworzenia kryteriów z punktami odniesienia, kalibracji asesorów i wykorzystywania wyników do działań następczych.
Jedna granica na początku. Fizyczne umiejętności kulinarne wymagają bezpośredniej obserwacji przez wykwalifikowanego asesora. Quiz lub ćwiczenia ze slajdami mogą sprawdzić znajomość standardów i przygotować uczestników do oceny, ale nie zastąpią obserwacji kogoś gotującego.
Szybkie fakty
| Question | Krótka odpowiedź |
|---|---|
| Co jest oceniane? | Przygotowywanie przez kucharza określonego dania według standardów marki, obserwowane w kuchni. |
| Co idzie nie tak w różnych lokalizacjach? | Oceniający stosują różne prywatne standardy, dlatego wyników nie można porównywać. |
| Co to naprawia? | Kryteria obserwowalne, pisemne punkty odniesienia i kalibracja oceniającego przed użyciem w praktyce. |
| Czy rubryka gwarantuje spójność? | Nie. Badania nad rubrykami wskazują na ich związek z większą rzetelnością oceniania, szczególnie gdy są szczegółowe i powiązane z przykładami lub szkoleniem oceniających. |
| Czy narzędzie slajdów może zastąpić obserwację? | Nie. Obejmuje wyłącznie dyskusje dotyczące przygotowania, ćwiczeń i kalibracji. |
| Kto zatwierdza kryteria oceny? | Wykwalifikowany oceniający szefów kuchni i kierownik ds. operacyjnych restauracji lub hotelu. |
1. Zdefiniuj wydajność podlegającą ocenie
Zacznij od obserwowalnego zadania, a nie od słowa „mistrzostwo”. Na przykład: przygotuj firmowe danie z kurczaka z prędkością linii produkcyjnej, zgodnie z zatwierdzoną recepturą, porcją, temperaturą i sposobem podania, przestrzegając procedur bezpieczeństwa żywności.
Następnie określ granice. Które stanowisko? Które dania? Podczas cichej obsługi, podczas dużego ruchu, czy podczas praktycznego zestawu? Kto jest upoważniony do zatwierdzenia i co zatwierdza? „Kompetentny na stanowisku grillowym do menu lunchowego” to twierdzenie, które da się obronić. „Mistrz kuchni” to nie jest coś, co można pokazać jedną obserwacją.
Sprawdź również zapotrzebowanie poznawcze. Przypomnienie sobie temperatury to zadanie przypominania. Przygotowanie dania zgodnie ze standardem to „Zastosuj”. Diagnozowanie, dlaczego sos ciągle się rozwarstwia lub dlaczego dwa serwisy uzyskują różne wyniki dla tego samego przepisu, to „Analiza”. Ramowanie w stylu Blooma pomaga dopasować ocenę do zapotrzebowania, jak w tym przewodniku. dopasowywanie działań edukacyjnych do taksonomii Blooma.
2. Wybierz zadanie reprezentatywne
Nie da się zaobserwować wszystkiego, więc wybierz zadanie, które odzwierciedla rzeczywistą pracę. Dobre zadanie ma następujące cechy:
- Wykorzystuje umiejętności niezbędne kucharzowi na każdej zmianie, takie jak posługiwanie się nożem, kontrola temperatury, czas, przyprawianie, porcjowanie i układanie potraw na talerzu.
- W każdej lokalizacji serwowane jest to samo danie i ta sama specyfikacja, więc oceny są porównywalne.
- Ma wyraźnie określony początek i koniec, dzięki czemu osoba oceniająca może zobaczyć całą sekwencję.
- Już samo to, że kucharz nie przećwiczył po prostu przygotowania tej jednej potrawy w celu dokonania oceny, jest wystarczająco nietypowe.
Bądź szczery w kwestii tego, czego zadanie nie może pokazać. Jedno danie jednego dnia niewiele mówi o wynikach w piątkowym szczycie, z dostawą nowych składników lub na innym stanowisku. Zaplanuj kilka krótkich obserwacji w czasie, aby określić, co można by nazwać ogólną kompetencją.
3. Zapisz obserwowalne kryteria i punkty zaczepienia
Rubryka przekształca „wygląda dobrze” w rzeczy, na które oceniający może wskazać. Buduj kryteria na podstawie tego, co widzisz, czujesz, mierzysz lub słyszysz, a nie na podstawie wrażenia pewności siebie lub szybkości.
Oto przykładowy zestaw startowy do dania z kurczakiem. Oceń każde kryterium od 0 do 2 za pomocą punktów kotwicowych i dostosuj je do oceny przez wykwalifikowanego szefa kuchni.
| Kryterium | 0: słaby | 1: rozwijający się | 2: biegły |
|---|---|---|---|
| Mise en place i konfiguracja stanowiska | Brakujące przedmioty; zatrzymuje się w połowie zadania, aby je podnieść | Większość elementów jest gotowa, ale jedna lub dwie przerwy powodują przerwę | Wszystkie elementy gotowe i pod ręką przed rozpoczęciem |
| Przepis i przestrzeganie porcji | Odbiega od przepisu; porcja widocznie odbiega od przepisu | Zgodnie z przepisem, porcja nieznacznie poza tolerancją | Zgodnie z recepturą; porcja mieści się w podanej tolerancji, sprawdź na wadze |
| Technika i stopień wysmażenia | Przepełniona patelnia lub niewłaściwa temperatura; produkt niedogotowany lub przegotowany | Technika w większości prawidłowa; temperatura rdzenia osiągnięta, ale nie wypoczęta | Prawidłowe użycie ciepła i patelni; osiąga bezpieczną temperaturę i odpoczywa zgodnie ze specyfikacją |
| Bezpieczeństwo żywności | Zaniedbuje mycie rąk, powoduje zakażenia krzyżowe | W większości zgodny; jedno niedopatrzenie poprawione po otrzymaniu monitu | Uległy przez cały czas, bez żadnych podpowiedzi |
| Galwanizacja według specyfikacji | Nie pasuje do zdjęcia referencyjnego | Dopasowuje odniesienie z zauważalnymi różnicami | Zgadza się z odniesieniem w ramach podanej tolerancji |
Zdefiniuj błędy krytyczne osobno. Podanie kurczaka w temperaturze poniżej bezpiecznej temperatury wewnętrznej lub zignorowanie kontroli alergenów powinno skutkować niezaliczeniem zadania, niezależnie od wyniku ogólnego. Wynik ogólny nigdy nie może przesłaniać błędu krytycznego.
Aby uzyskać szerszy pogląd na temat oceniania prac opartych na osądach, zapoznaj się z tym przewodnikiem ocena osądu i rozwiązywania problemów w szkoleniuUnikaj kryteriów takich jak „wykazuje pewność siebie” lub „szybko pracuje” bez definicji. Szybkość może być kryterium, jeśli wyznaczysz dla niej mierzalny cel, na przykład podanie dania na talerzu w ciągu określonej liczby minut, ale nie pozwól, aby zastępowała ona jakość.
Ten sam problem pojawia się w innych dziedzinach, a ogólne wytyczne są nadal aktualne. Znany przegląd badań nad rubrykami przeprowadzony przez Jonssona i Svingby'ego wykazał, że rubryki mogą poprawić wiarygodność punktacji, zwłaszcza analityczne, tematyczne rubryki używane z przykładami lub w ramach szkolenia oceniających. Stwierdzono również, że sama rubryka nie gwarantuje trafności oceny wyników. Podsumowanie można przeczytać w Zapis ERIC do przegląduMówiąc wprost: napisz kotwice, a następnie przeszkol ludzi, którzy ich używają.
4. Skalibruj asesorów i przeprowadź pilotaż
Kalibracja to podstawa spójności. Zanim asesorzy ocenią prawdziwych kucharzy:
- Zdobądź niezależne punkty. Poproś każdego oceniającego o obejrzenie tego samego przykładu na żywo lub na nagraniu wideo i ocenienie go osobno w kontekście kryteriów.
- Porównuj dowody, nie tylko wyniki. Zapytaj każdą osobę, co zauważyła, co potwierdza każdą ocenę. Niezgodność między 1 a 2 zazwyczaj wskazuje na niejasny punkt odniesienia.
- Przejrzyj niejednoznaczne kryteria. Dodaj obserwowalny szczegół, taki jak tolerancja w gramach lub nazwany test stopnia wysmażenia, do każdego punktu zaczepienia, który ludzie odbierają inaczej.
- Powtórz z nowym przykładem Dopóki asesorzy nie uzgodnią zdecydowanej większości kryteriów i nie zgodzą się na weryfikację pozostałych. Wybierz poziom porozumienia, który zaakceptujesz ze swoim specjalistą, zamiast pożyczać kwotę.
- Pilotaż w dwóch lub trzech lokalizacjach. Sprawdź, czy różnice w wynikach zależą od kucharza, oceniającego lub sprzętu.
Utrzymuj na bieżąco kontakt z wykwalifikowanym asesorem szefa kuchni. To on weryfikuje rubrykę, talerz referencyjny, kontrole stopnia wysmażenia i błędy krytyczne, a także decyduje, kto jest upoważniony do oceny. Przeprowadzaj kalibrację za każdym razem, gdy menu lub standard ulegnie zmianie, oraz w ustalonych odstępach czasu, ponieważ asesorzy odbiegają od normy.
Sesja kalibracji to również dobry moment na zastosowanie interaktywnej aktywności. Pokaż każde zdjęcie referencyjne lub krótki klip, poproś asesorów o anonimowe głosowanie nad punktacją, a następnie ujawnij i omów rozkład. To ujawnia różnice zdań bez konieczności zabierania głosu. To wspiera kalibrację, ale sama obserwacja nadal odbywa się w kuchni.
5. Wykorzystaj wyniki do dalszych działań
Wynik jest przydatny tylko wtedy, gdy gdzieś prowadzi. Dopasuj kolejny krok do luki, którą zauważyłeś.
- Luka w wiedzy (kucharz nie potrafił określić reguły stopnia wysmażenia): ukierunkowana nauka we własnym tempie, a następnie szybkie sprawdzenie pamięci. Sprawdzenie pamięci potwierdza jedynie spełnienie wymagań wstępnych.
- Luka w osądzie (kucharz wykonał podane czynności, ale nie zauważył, że talerz został zdjęty): interaktywne ćwiczenie z informacją zwrotną, z wykorzystaniem zdjęć lub zarejestrowanych ciężarów uzyskanych w wyniku rzeczywistych zmian.
- Luka umiejętności (technika była błędna): ćwiczeniówka pod nadzorem osoby wykwalifikowanej, z bezpośrednim coachingiem na żywo.
- Luka kontekstowa (właściwa technika, ale na przeszkodzie stanął sprzęt, materiały lub personel): usuń przyczynę, nie kucharza.
Dokonaj ponownej oceny nowego, niewidzianego wcześniej zadania po odpowiednim okresie doświadczenia zawodowego. Śledź te same kryteria w czasie, z jasnym mianownikiem, takim jak liczba obserwacji na kucharza w kwartale. Sprawdź jednoczesne zmiany, takie jak nowy piekarnik, zmiana menu lub zmiana personelu, zanim uznasz szkolenie za jakiekolwiek zmiany.
Decyzja o gotowości ma swoje ograniczenia. Zaliczenie oznacza, że kucharz spełnił kryteria dotyczące obserwowanych zadań w danych warunkach. Nie oznacza to jednak, że jest gotowy na każde stanowisko lub każdą usługę.
Czego ocena nie naprawi
- Różny sprzęt. Jeśli grill na jednym stanowisku się przegrzeje, przy użyciu tych samych umiejętności można uzyskać różne rezultaty.
- Niejasne specyfikacje. Jeśli w specyfikacji jest napisane „gotuj, aż będzie gotowe”, asesorzy się nie zgodzą, ponieważ specyfikacja jest niejasna.
- Dostępność oceniającego. Rubryka, w której nie ma przeszkolonego oceniającego na miejscu, jest tylko dokumentem.
- Ograniczenia dowodowe. Jedna obserwacja pokazuje, co wydarzyło się tamtego dnia. Nie dowodzi jednak, dlaczego.
Nazwij je na początku właścicielom franczyz i ustal, kto je naprawi. Powiązany przewodnik na zmniejszenie zmienności receptur i niespójności porcji w różnych lokalizacjach franczyzowych omawia bardziej szczegółowo przepisy i narzędzia.
PYTANIA I ODPOWIEDZI
Czym jest ocena kompetencji kulinarnych?
To ustrukturyzowana obserwacja kucharza wykonującego określone zadania, oceniana na podstawie pisemnych kryteriów. Sprawdza, co dana osoba potrafi zrobić w kuchni, a nie tylko, co wie.
Jak zachować spójność wyników we wszystkich lokalizacjach?
Stosuj wszędzie te same obserwowalne kryteria i punkty odniesienia, a także kalibruj asesorów, nakazując im oceniać te same przykłady i porównywać dowody. Przeprowadź ponowną kalibrację, gdy standard ulegnie zmianie.
Czy można ocenić umiejętności kulinarne online?
Tylko częściowo. Sprawdziany wiedzy, pytania scenariuszowe i dyskusje kalibracyjne mogą odbywać się online lub na żywo, ale praktyczne umiejętności wymagają obecności wykwalifikowanego asesora, obserwującego rzeczywiste przygotowania, osobiście lub na nagraniu wideo.
Ile kryteriów powinna zawierać rubryka?
Na tyle mało, że asesor może je ocenić w jednej obserwacji. Kilka obserwowalnych kryteriów, z których każde ma wyraźne punkty zaczepienia, sprawdza się lepiej niż długa lista, którą ludzie pobieżnie przeglądają.
Gdzie zacząć
Wybierz jedno danie popisowe. Stwórz pięciokryterialną rubrykę z punktami odniesienia, a następnie poproś wykwalifikowanego asesora szefa kuchni o jej korektę. Przeprowadź sesję kalibracji z asesorami na podstawie dwóch nagranych przykładów, popraw punkty odniesienia, które wywołały rozbieżności, i przeprowadź pilotaż w dwóch lokalizacjach, zanim wdrożysz ją w życie.
Aby zobaczyć, jak sesja kalibracji lub kontrola wiedzy mogą być przeprowadzane na żywo i ponownie wykorzystywane w tempie własnym, zapoznaj się z AhaSlides.
