שלושה מעריכים צופים באותו טבח קו מטגן חזה עוף ומגיש אותו בצלחת. אחד נותן לו ציון 9 מתוך 10 כי הצלחת נראית נהדרת. אחד נותן לו ציון 6 כי המחבת הייתה צפופה והעוף איבד את הנוזלים שלו כי הוא לא נח. השלישי נותן לו ציון 7 כי "זה היה בסדר, קצת איטי". אף אחד לא עשה שום דבר רע. כל אחד מהם השתמש בסטנדרט פרטי שונה, והטבח מקבל שלוש מסרים שונים על אותה ביצועים.
זהו תרחיש להמחשה, לא אירוע מתועד. זוהי הבעיה שהערכה של כשירות קולינרית נועדה לפתור כאשר לזכיין יש מטבחים רבים ומעריכים רבים. מדריך זה מיועד למנהלי הכשרות בתחום האירוח ולראשי תפעול מסעדות או מלונות. הוא מכסה כיצד להגדיר את המשימה, לבחור מדגם מייצג של העבודה, לכתוב קריטריונים עם עוגנים, לכייל את המעריכים ולהשתמש בתוצאות לצורך מעקב.
גבול אחד מראש. מיומנות בישול פיזית דורשת צפייה ישירה של מעריך מוסמך. בוחן או פעילות שקופיות יכולים לבדוק את הידע בסטנדרטים ולהכין אנשים להערכה, אך הם לא יכולים להחליף את הצפייה בבישול.
עובדות מהירות
| שאלה | תשובה קצרה |
|---|---|
| מה מוערך? | הכנת מנה מוגדרת על ידי טבח קו, לפי תקן המותג, כפי שנצפה במטבח. |
| מה משתבש בין מיקומים שונים? | מעריכים מיישמים סטנדרטים פרטיים שונים, כך שהציונים אינם ניתנים להשוואה. |
| מה מתקן את זה? | קריטריונים נצפים, עוגנים כתובים וכיול מעריך לפני שימוש חי. |
| האם רובריקה מבטיחה עקביות? | לא. מחקרים על רובריקות מקשר אותן לאמינות טובה יותר של הציון, באופן הברור ביותר כאשר הן ספציפיות ומשולבות עם דוגמאות או הכשרת מעריכים. |
| האם כלי שקופיות יכול להחליף תצפית? | לא. הוא תומך רק בהכנה, תרגול וכיול. |
| מי מאשר את הרובריקה? | שף מעריך מוסמך ומנהל תפעול של מסעדה או מלון. |
1. הגדירו את הביצועים המוערכים
התחילו במשימה הנצפית, לא במילה "שליטה". לדוגמה: הכינו את מנת העוף הייחודית של המותג במהירות המזון, לפי המתכון, המנה, הטמפרטורה והצלחה שאושרו, תוך הקפדה על נהלי בטיחות המזון.
לאחר מכן, ציינו את הגבולות. איזו עמדה? אילו מנות? במהלך תפילה שקטה, תפילה עמוסה, או שיעור מעשי קבוע? מי מורשה לחתום, ועל מה הוא חותם? "מוכשר בעמדת הגריל לתפריט ארוחת הצהריים" היא טענה ניתנת להגנה. "טבח מומחה" אינו דבר שניתן להראות בתצפית אחת.
בדקו גם את הדרישה הקוגניטיבית. זכירת טמפרטורה היא משימת זכירה. הכנת מנה לתקן היא יישום. אבחון מדוע רוטב ממשיך להתפצל, או מדוע שני אתרים מקבלים תוצאות שונות מאותו מתכון, הוא ניתוח. מסגור בסגנון בלום עוזר לכם להתאים את ההערכה לדרישה, כמו במדריך זה ל... התאמת פעילויות למידה לטקסונומיה של בלום.
2. בחר משימה מייצגת
אי אפשר לצפות בכל דבר, אז בחרו משימה שמדגימה את העבודה האמיתית. משימה טובה כוללת את המאפיינים הבאים:
- היא משתמשת במיומנויות שהטבח זקוק להן בכל משמרת, כגון עבודת סכין, בקרת חום, תזמון, תיבול, חלוקה למנות וצלחות.
- זו אותה מנה ומפרט בכל מקום, כך שהציונים משתווים.
- יש לו התחלה וסיום ברורים, כך שהמעריך יכול לראות את הרצף כולו.
- זה מספיק לא מוכר שהטבח לא פשוט התאמן על הצלחת הזו לקראת ההערכה.
היו כנים לגבי מה שהמשימה לא יכולה להראות. מנה אחת ביום אחד אומרת מעט על ביצועים בעומס של יום שישי, עם משלוח מצרכים חדשים, או בתחנה אחרת. תכננו מספר תצפיות קצרות לאורך זמן עבור כל דבר שהייתם מכנים כשירות כוללת.
3. כתבו קריטריונים ועוגנים נצפים
רובריקה הופכת את המונח "נראה טוב" לדברים שמעריך יכול להצביע עליהם. בנו את הקריטריונים ממה שאתם יכולים לראות, להריח, למדוד או לשמוע, לא מרשמים של ביטחון או מהירות.
הנה ערכת התחלה לדוגמה למנת עוף. תנו ציון של 0 עד 2 לכל קריטריון באמצעות העוגנים, והתאימו אותה עם מעריך שף מוסמך.
| קריטריון | 0: חלש | 1: פיתוח | 2: מיומן |
|---|---|---|---|
| Mise en place והקמת תחנה | פריטים חסרים; עוצר באמצע משימה כדי לאחזר אותם | רוב הפריטים מוכנים; הפסקה אחת או שתיים גורמת להפסקה | כל הפריטים מוכנים ובהישג יד לפני תחילת העבודה |
| הקפדה על מתכון ומנות | סוטה מהמתכון; מנה נראית שונה באופן ניכר | פועל לפי המתכון; המנה קצת חורגת מהסבילות | פועל לפי המתכון; מנות בתוך הסבילות שצוינה בבדיקת משקל |
| טכניקה ורמת העשייה | מחבת צפופה מדי או חום שגוי; מוצר מבושל יתר על המידה או חסר | טכניקה נכונה ברובה; טמפרטורת הליבה הושגה אך לא נחה | חום ושימוש נכון במחבת; מגיע לטמפרטורה הבטוחה ומנוחה כמצוין |
| בטיחות מזון | דילוג על שטיפת ידיים, זיהום צולב | בעיקר תואם; טעות אחת תוקנה כשנדרשה | צייתנות לכל אורך הדרך ללא הנחיות |
| ציפוי לפי מפרט | לא תואם לתמונת ההתייחסות | תואם את ההפניה עם הבדלים ניכרים | תואם את ההפניה בתוך הסבילות המוצהרת |
הגדירו שגיאות קריטיות בנפרד. הגשת עוף מתחת לטמפרטורה הפנימית הבטוחה, או התעלמות מלוח זמנים לאלרגנים, אמורה להיכשל במשימה ללא קשר לציון הכולל. ציון כולל לעולם לא חייב להסתיר כשל קריטי.
לקבלת תמונה רחבה יותר של ציון עבודה המבוססת על שיפוט, עיינו במדריך זה הערכת שיקול דעת ופתרון בעיות באימוןהימנעו מקריטריונים כמו "מראה ביטחון" או "עובד מהר" ללא הגדרה. מהירות יכולה להיות קריטריון אם קובעים לה יעד מדיד, לדוגמה מנה מוגשת בצלחת תוך מספר דקות מוגדר, אך אל תתנו לה לבוא במקום האיכות.
אותה בעיה מופיעה בתחומים אחרים, וההנחיות הכלליות ממשיכות. סקירה ידועה של ג'ונסון וסווינגבי על מחקר רובריקות מצאה שרובריקות יכולות לשפר את מהימנות הניקוד, במיוחד רובריקות אנליטיות וספציפיות לנושא, המשמשות עם דוגמאות או הכשרת מעריכים. כמו כן, נמצא שרובריקה לבדה אינה מבטיחה שיפוטים תקפים של ביצועים. ניתן לקרוא את הסיכום ב רשומת ERIC לסקירהבמילים פשוטות: כתבו את העוגנים, ואז הכשירו את האנשים שמשתמשים בהם.
4. כיול מעריכים והפעלת פיילוט
כיול הוא המקום שבו בונים עקביות. לפני שמעריכים נותנים ציונים לטבחים אמיתיים:
- ציון באופן עצמאי. בקשו מכל מעריך לצפות באותה דוגמה, בשידור חי או בסרטון וידאו מוקלט, ולדרג אותה בנפרד מול הרובריקה.
- השוו ראיות, לא רק ציונים. שאלו כל אדם מה הוא ראה שתומך בכל ציון. חילוקי דעות בין 1 ל-2 בדרך כלל מצביעים על עוגן מעורפל.
- לשנות את הקריטריונים המעורפלים. הוסף פרט ניתן לצפייה, כגון סבילות בגרמים או בדיקת עשייה בשם, לכל עוגן שאנשים קוראים בצורה שונה.
- חזור על הפעולה עם דוגמה חדשה עד שהמעריכים יסכימו על הרוב המכריע של הקריטריונים, ויסכימו לבחון את השאר. בחרו את רמת ההסכמה שתקבלו עם המומחה שלכם, במקום לשאול מספר.
- פיילוט בשניים או שלושה אתרים. בדקו האם הציונים שונים בגלל הטבח או בגלל המעריך או הציוד.
עדכנו שף מוסמך שמעריך את המנות. הוא מאמת את הרובריקה, את צלחת הייחוס, את בדיקות העשייה ואת השגיאות הקריטיות, והוא מחליט מי מורשה להעריך. יש לכייל מחדש בכל פעם שהתפריט או הסטנדרט משתנים, ובמרווחי זמן קבועים, מכיוון שהמעריכים חורגים מהן.
מפגש כיול הוא גם מקום טוב להשתמש בפעילות אינטראקטיבית. הציגו כל תמונה או סרטון קצר, בקשו מהמעריכים להצביע על ציון באופן אנונימי, ולאחר מכן חשפו ודונו בפריסה. זה מעלה חילוקי דעות מבלי שאף אחד יצטרך לדבר קודם. זה תומך בכיול, אבל התצפית עצמה עדיין מתרחשת במטבח.
5. השתמשו בתוצאות למעקב
ציון שימושי רק אם הוא מוביל לאנשהו. התאם את השלב הבא לפער שראית.
- פער ידע (הטבח לא ידע לציין את כלל העשייה): לימוד עצמי ממוקד, לאחר מכן בדיקת זיכרון מהירה. בדיקת זיכרון מאשרת רק את הדרישות המוקדמות.
- פער שיפוט (הטבח ביצע את השלבים אך החמיץ את העובדה שהצלחת לא הייתה תקינה): תרגול מקרה אינטראקטיבי עם משוב, תוך שימוש בתמונות או משקלים מוקלטים ממשמרות אמיתיות.
- פער מיומנויות (הטכניקה הייתה שגויה): תרגול בפיקוח עם הדרכה חיה מאדם מוסמך.
- פער הקשר (הטכניקה הנכונה, אבל הציוד, האספקה או כוח האדם הפריעו): תקן את הסיבה, לא את הטבח.
יש לבצע הערכה מחודשת של משימה חדשה שלא נראתה לאחר תקופה מתאימה של חשיפה לעבודה. יש לעקוב אחר אותם קריטריונים לאורך זמן, עם מכנה ברור כגון תצפיות לכל טבח לרבעון. יש להתבונן בשינויים מקבילים, כגון תנור חדש, שינוי בתפריט או שינוי בצוות, לפני מתן קרדיט להכשרה עבור כל שינוי.
להחלטת מוכנות יש מגבלות. ציון "עבר" פירושו שהטבח עמד בקריטריונים במשימות שנצפו, בתנאים אלה. זה לא אומר שהוא מוכן לכל תחנה או לכל שירות.
איזו הערכה לא תתקן
- ציוד שונה. אם הגריל של אתר אחד מתחמם, תקבלו תוצאות שונות עם אותה מיומנות.
- מפרטים לא ברורים. אם המפרט אומר "לבשל עד מוכן", המעריכים לא יסכימו כי המפרט מעורפל.
- זמינות מעריך. רובריקה ללא מעריך מוסמך באתר היא רק מסמך.
- מגבלות הראיות. תצפית אחת מראה מה קרה באותו יום. היא לא מוכיחה מדוע.
ציינו את הציונים מראש לבעלי הזכיינות וסכמו מי מתקן כל אחד מהם. המדריך המקושר בנושא צמצום שונות במתכונים וחוסר עקביות במנות בין סניפי זכיינות מכסה את המתכון ואת צד הכלים ביתר עומק.
שאלות נפוצות
מהי הערכת יכולות קולינריות?
זוהי תצפית מובנית של טבח המבצע משימות מוגדרות, המדורגות על פי קריטריונים כתובים. היא בודקת מה האדם יכול לעשות במטבח, לא רק מה הוא יודע.
איך אתם שומרים על עקביות בניקוד בין מיקומים?
השתמשו באותם קריטריונים ועוגנים נצפים בכל מקום, וכיילו את המעריכים על ידי כך שיתנו להם ציון לאותן דוגמאות וישוו ראיות. כיילו מחדש כאשר הסטנדרט משתנה.
האם ניתן להעריך כישורי בישול באינטרנט?
רק באופן חלקי. בדיקות ידע, שאלות תרחישים ודיוני כיול יכולים להתקיים באינטרנט או בשידור חי, אך המיומנות המעשית דורשת מעריך מוסמך שיצפה בהכנה אמיתית, באופן אישי או באמצעות וידאו מוקלט.
כמה קריטריונים צריכים לכלול רובריקה?
מעטים מספיק כדי שמעריך יוכל לדרג אותם בתצפית אחת. קומץ קריטריונים נצפים, שלכל אחד מהם עוגנים ברורים, עובדים טוב יותר מרשימה ארוכה שאנשים מדלגים עליה.
איפה להתחיל
בחרו מנת דגל אחת. ניסחו רובריקה בת חמישה קריטריונים עם נקודות עוגן, ולאחר מכן בקשו מעריך שף מוסמך לתקן אותה. ערכו מפגש כיול עם המעריכים שלכם על שתי דוגמאות מוקלטות, עדכנו את נקודות העוגן שגרמו למחלוקת, ובדקו את הניסוי בשני אתרים לפני שאתם מפרסמים אותו.
כדי לראות כיצד ניתן להפעיל סשן כיול או בדיקת ידע בזמן אמת, ולבצע בהם שימוש חוזר בקצב אישי לאחר מכן, חקור AhaSlides.
