Как последовательно оценивать навыки поваров на линии раздачи в разных франчайзинговых заведениях с помощью стандартной оценочной шкалы?

Три эксперта наблюдают за тем, как один и тот же повар обжаривает куриную грудку и выкладывает её на тарелку. Один ставит 9 из 10, потому что блюдо выглядит восхитительно. Другой ставит 6, потому что сковорода была переполнена, и курица потеряла сочность, так как ей не дали отдохнуть. Третий ставит 7, потому что «было неплохо, но немного медленно». Никто ничего не сделал неправильно. Каждый из них использовал свой собственный стандарт, и повар получает три разных отзыва об одном и том же блюде.

Это иллюстративный сценарий, а не задокументированный случай. Это проблема, которую призвана решить оценка кулинарной компетентности, когда в франшизе много кухонь и много оценщиков. Это руководство предназначено для директоров по обучению персонала в сфере гостеприимства и руководителей ресторанного или гостиничного бизнеса. В нем рассматривается, как определить задачу, выбрать репрезентативную выборку работы, составить критерии с опорными точками, откалибровать оценщиков и использовать результаты для последующих действий.

Сразу оговорюсь об одном ограничении. Физические навыки приготовления пищи требуют непосредственного наблюдения со стороны квалифицированного эксперта. Тест или интерактивное задание могут проверить знание стандартов и подготовить участников к оценке, но они не могут заменить наблюдение за процессом приготовления пищи.

Интересные факты

1. Определите, какой вид деятельности оценивается.

Начните с наблюдаемой задачи, а не со слова «мастерство». Например: приготовить фирменное блюдо из курицы в соответствии с заявленными параметрами, рецептом, порцией, температурой и оформлением, соблюдая при этом правила безопасности пищевых продуктов.

Затем укажите границы. Какая станция? Какие блюда? Во время спокойной смены, оживленной или во время практического занятия? Кто уполномочен ставить свою подпись, и что именно он подписывает? «Компетентен на станции гриля для обеденного меню» — это вполне обоснованное утверждение. «Мастер-повар» — это не то, что можно доказать одним наблюдением.

Проверьте также когнитивные требования. Воспоминание о температуре — это задача на запоминание. Приготовление блюда по стандарту — это задача на применение. Диагностика причин, по которым соус постоянно расслаивается, или почему на двух разных сайтах получаются разные результаты при приготовлении одного и того же блюда, — это задача на анализ. Методика построения фреймов в стиле Блума помогает согласовать оценку с требованиями, как показано в этом руководстве. соответствие учебных мероприятий таксономии Блума.

2. Выберите репрезентативное задание.

Вы не можете наблюдать за всем, поэтому выберите задачу, которая позволит оценить реальный объем работы. Хорошая задача должна обладать следующими характеристиками:

1. В этой работе используются навыки, необходимые повару в каждую смену, такие как работа с ножом, контроль температуры, соблюдение тайминга, приправы, порционирование и сервировка.
2. В каждом заведении подают одно и то же блюдо по одному и тому же рецепту, поэтому оценки сравниваются.
3. У него четкое начало и конец, поэтому оценщик может видеть всю последовательность.
4. Это блюдо настолько непривычно, что повар не просто отрепетировал его приготовление для оценки.

Будьте честны в отношении того, что не может показать сама задача. Одно блюдо, приготовленное в один день, мало что говорит о работе в пятничный час пик, при доставке новых ингредиентов или на другом рабочем месте. Запланируйте несколько коротких наблюдений в течение определенного времени, чтобы оценить общую компетентность.

3. Сформулируйте наблюдаемые критерии и опорные точки.

Рубрика преобразует «хорошее впечатление» в то, на что оценщик может указать. Стройте критерии, основываясь на том, что вы можете увидеть, почувствовать запах, измерить или услышать, а не на впечатлениях об уверенности или скорости.

Вот примерный набор критериев для приготовления блюда из курицы. Оцените каждый критерий по шкале от 0 до 2, используя указанные значения, и адаптируйте его с помощью квалифицированного шеф-повара-эксперта.

Критические ошибки следует определять отдельно. Подача курицы при температуре ниже безопасной или игнорирование контроля за аллергенами должны считаться неудовлетворительными независимо от общего балла. Общий балл ни в коем случае не должен скрывать критическую ошибку.

Для более полного понимания процесса оценивания работ, основанных на экспертной оценке, см. это руководство. оценка способности к принятию решений и решению проблем в процессе обученияИзбегайте критериев типа «демонстрирует уверенность» или «работает быстро» без четкого определения. Скорость может быть критерием, если вы установите для нее измеримую цель, например, приготовление блюда за определенное количество минут, но не позволяйте ей заменять качество.

Та же проблема встречается и в других областях, и общие рекомендации остаются в силе. В известном обзоре исследований рубрик, проведенном Йонссоном и Свингби, было установлено, что рубрики могут повысить надежность оценки, особенно аналитические, тематические рубрики, используемые с примерами или обучением оценщиков. Также было обнаружено, что одна только рубрика не гарантирует достоверности оценок выполнения работы. Вы можете ознакомиться с кратким изложением в [ссылка на обзор]. Запись ERIC для обзораПроще говоря: сначала разработайте основные принципы, а затем обучите людей их использованию.

4. Провести калибровку экспертов и запустить пилотный проект.

Калибровка – это то, где достигается стабильность. Прежде чем эксперты оценят настоящих поваров:

1. Оценить самостоятельно. Пусть каждый эксперт посмотрит один и тот же пример, вживую или в записи, и оценит его отдельно по критериям.
2. Сравнивайте доказательства, а не только оценки. Спросите каждого человека, что он увидел, что подтверждает ту или иную оценку. Расхождение между 1 и 2 обычно указывает на нечеткую критерий оценки.
3. Пересмотрите неоднозначные критерии. Добавьте к любому якорю наблюдаемую деталь, например, допуск в граммах или именованный тест на готовность, чтобы люди могли по-разному его интерпретировать.
4. Повторите с новым примером. до тех пор, пока эксперты не придут к согласию по подавляющему большинству критериев и не согласятся пересмотреть остальные. Выберите тот уровень согласия, который вы готовы принять со специалистом, вместо того чтобы заимствовать готовую цифру.
5. Провести пилотный проект на двух или трех площадках. Проверьте, отличаются ли оценки из-за повара, оценщика или используемого оборудования.

Держите в курсе квалифицированного шеф-повара-оценщика. Он проверяет критерии оценки, эталонную тарелку, степень готовности и выявляет критические ошибки, а также определяет, кто имеет право оценивать блюда. Пересматривайте критерии оценки всякий раз, когда меняется меню или стандарт, и через определенные интервалы, поскольку квалификация оценщиков может меняться.

Сессия калибровки также является хорошим местом для использования интерактивных заданий. Покажите каждое эталонное фото или короткий видеоролик, предложите оценщикам анонимно проголосовать за результат, а затем объявите и обсудите разброс оценок. Это позволяет выявить разногласия без необходимости кому-либо высказываться первым. Это способствует калибровке, но само наблюдение по-прежнему происходит на кухне.

5. Используйте результаты для дальнейших действий.

Результат полезен только в том случае, если он к чему-то приводит. Сопоставьте следующий шаг с обнаруженным вами пробелом.

• Пробел в знаниях (повар не смог назвать правило степени готовности): целенаправленное самостоятельное изучение материала, затем быстрая проверка знаний. Проверка знаний подтверждает только необходимые предварительные знания.
• Разрыв в суждениях (Повар следовал инструкциям, но не заметил, что тарелка была не на месте): интерактивная практика с обратной связью, с использованием фотографий или записанных данных о весе за реальные смены.
• Разрыв в навыках (методика была неправильной): контролируемая практика с живым наставничеством квалифицированного специалиста.
• Контекстный разрыв (правильный метод, но оборудование, запасы или персонал помешали): устраните причину, а не повара.

Переоцените ситуацию, выполнив новую, ранее не встречавшуюся задачу, после соответствующего периода работы. Отслеживайте те же критерии с течением времени, используя четкий знаменатель, например, количество наблюдений на одного повара за квартал. Прежде чем учитывать обучение как причину каких-либо изменений, рассмотрите сопутствующие изменения, такие как новая печь, изменение меню или кадровые перестановки.

Решение о готовности имеет свои ограничения. «Пройдено» означает, что повар выполнил критерии по наблюдаемым задачам в данных условиях. Это не означает, что он готов к работе на каждой станции или к каждому обслуживанию.

Что оценка не исправит

• Разное оборудование. Если гриль на одном из участков сильно нагревается, то при одинаковом уровне мастерства вы получите разные результаты.
• Технические характеристики неясны. Если в спецификации указано «готовить до готовности», эксперты не согласятся, потому что спецификация расплывчата.
• Доступность оценщика. Рубрика, в которой отсутствует квалифицированный оценщик, — это просто документ.
• Ограничения по количеству доказательств. Одно наблюдение показывает, что произошло в тот день. Оно не доказывает, почему.

Назовите эти проблемы владельцам франшизы на раннем этапе и договоритесь, кто будет их устранять. Прикрепленное руководство находится по адресу... сокращение вариативности рецептов и несоответствия размеров порций в разных точках сети. Рассматриваются более подробно рецептура и оснастка.

Часто задаваемые вопросы

Что такое оценка кулинарной компетентности?

Это структурированное наблюдение за работой повара при выполнении определенных задач, оцениваемое по письменным критериям. Оно проверяет не только знания, но и умения человека работать на кухне.

Как обеспечить единообразие результатов в разных местах?

Используйте одни и те же наблюдаемые критерии и опорные точки повсюду, а также калибруйте экспертов, предлагая им оценивать одни и те же примеры и сравнивать доказательства. Повторно калибруйте критерии при изменении стандарта.

Можно ли оценить кулинарные навыки онлайн?

Только частично. Проверки знаний, ситуационные вопросы и калибровочные обсуждения могут проводиться онлайн или в режиме реального времени, но для отработки практических навыков необходим квалифицированный оценщик, наблюдающий за реальной подготовкой лично или в записи.

Сколько критериев должна содержать рубрика?

Достаточно мало критериев, чтобы эксперт мог оценить их за одно наблюдение. Несколько наблюдаемых критериев, каждый с четкими ориентирами, работают лучше, чем длинный список, который люди просматривают бегло.

Когда начать

Выберите одно фирменное блюдо. Составьте пятикритериальную рубрику с ключевыми критериями, затем попросите квалифицированного шеф-повара-эксперта проверить её. Проведите калибровочную сессию с вашими экспертами на двух записанных примерах, пересмотрите ключевые критерии, вызвавшие разногласия, и протестируйте её на двух площадках, прежде чем внедрять в практику.

Чтобы увидеть, как можно провести калибровочную сессию или проверку знаний в режиме реального времени и затем использовать их в удобном для вас темпе, изучите информацию по ссылке. AhaSlides.