Kolme arvioijaa katsoo, kuinka sama rivi paistaa kananrintaa ja nostaa sen lautaselle. Yksi antaa sille arvosanan 9/10, koska lautanen näyttää ihanalta. Yksi antaa sille arvosanan 6, koska pannu oli täynnä ja kana menetti mehunsa, koska sitä ei ollut levätty. Kolmas antaa sille arvosanan 7, koska "se oli ihan ok, vähän hidas". Kukaan ei tehnyt mitään väärin. He kaikki käyttivät eri yksityistä standardia, ja kokki saa kolme eri viestiä samasta suorituksesta.
Tämä on havainnollistava skenaario, ei dokumentoitu tapaus. Se on ongelma, jonka kulinaarisen osaamisen arvioinnin on tarkoitus ratkaista, kun franchising-yrityksessä on useita keittiöitä ja useita arvioijia. Tämä opas on tarkoitettu ravitsemisalan koulutusjohtajille ja ravintola- tai hotellitoiminnan johtajille. Se kattaa tehtävän määrittelemisen, edustavan otoksen valitsemisen työstä, kriteerien laatimisen ankkuripisteineen, arvioijien kalibroinnin ja tulosten käytön seurannassa.
Yksi raja heti alkuun. Fyysinen ruoanlaittotaito vaatii pätevän arvioijan suoraa havainnointia. Tietovisa tai diaesitys voi tarkistaa standardien tuntemusta ja valmistaa ihmisiä arviointiin, mutta se ei voi korvata jonkun ruoanlaiton seuraamista.
Nopeita faktoja
| Kysymys | Lyhyt vastaus |
|---|---|
| Mitä arvioidaan? | Linjakokin valmistama määritelty ruokalaji tuotemerkin standardin mukaisesti, keittiössä havaittu. |
| Mikä menee pieleen eri paikoissa? | Arvioijat käyttävät erilaisia yksityisiä standardeja, joten pisteet eivät ole vertailukelpoisia. |
| Mikä sen korjaa? | Havainnoitavissa olevat kriteerit, kirjalliset ankkurit ja arvioijan kalibrointi ennen käyttöä. |
| Takaako arviointiperuste johdonmukaisuuden? | Ei. Arviointimatriiseja koskeva tutkimus yhdistää ne parempaan pisteytyksen luotettavuuteen, selkeimmin silloin, kun ne ovat täsmällisiä ja yhdistetty esimerkkeihin tai arvioijien koulutukseen. |
| Voiko diatyökalu korvata havainnoinnin? | Ei. Se tukee vain valmistelu-, harjoittelu- ja kalibrointikeskusteluja. |
| Kuka vahvistaa arviointiperusteet? | Pätevä kokkiarvioija ja ravintola- tai hotellitoiminnan johtaja. |
1. Määrittele arvioitava suoritus
Aloita havaittavasta tehtävästä, älä sanasta "mestaruus". Esimerkiksi: valmista brändin nimikkokanaruoka linjanopeudella, hyväksytyn reseptin, annoksen, lämpötilan ja tarjoilutavan mukaisesti noudattaen elintarviketurvallisuusmenettelyjä.
Sitten aseta rajat. Mikä asema? Mitkä ruoat? Hiljaisen tarjoilun aikana, kiireisenä vai valmiina pöytäseurueena? Kenellä on valtuudet allekirjoittaa, ja mitä he allekirjoittavat? "Pätevä grilliasemalla lounasmenun osalta" on perusteltavissa oleva väite. "Mestarikokki" ei ole asia, jonka voi osoittaa yhdellä havainnolla.
Tarkista myös kognitiivinen vaatimus. Lämpötilan muistaminen on muistamistehtävä. Ruoan valmistaminen standardin mukaisesti on soveltamista. Sen diagnosointi, miksi kastike hajoaa jatkuvasti tai miksi kaksi toimipistettä saa erilaisia tuloksia samasta reseptistä, on analysointia. Bloomin tyylinen kehystys auttaa sinua sovittamaan arvioinnin vaatimukseen, kuten tässä oppaassa... oppimistoimintojen yhdistäminen Bloomin taksonomiaan.
2. Valitse edustava tehtävä
Et voi tarkkailla kaikkea, joten valitse tehtävä, joka antaa otoksen oikeasta työstä. Hyvässä tehtävässä on seuraavat ominaisuudet:
- Se hyödyntää taitoja, joita kokki tarvitsee jokaisessa vuorossa, kuten veitsenkäyttöä, lämmön hallintaa, ajoitusta, maustamista, annostelua ja tarjoilua.
- Se on sama ruokalaji ja erikoisuus joka paikassa, joten pisteet vertautuvat.
- Sillä on selkeä alku ja loppu, joten arvioija näkee koko tapahtumasarjan.
- On tarpeeksi epätavallista, ettei kokki ole vain harjoitellut tuota yhtä lautasta arviointia varten.
Ole rehellinen siitä, mitä tehtävä ei pysty osoittamaan. Yksi annos yhtenä päivänä kertoo vain vähän suorituskyvystä perjantairuuhkan aikana, uuden ainesosan toimituksen yhteydessä tai eri työpisteellä. Suunnittele useita lyhyitä havaintoja ajan kuluessa kaikesta, mitä kutsuisit kokonaisvaltaiseksi pätevyydeksi.
3. Kirjoita havaittavat kriteerit ja ankkurit
Arviointikriteerit muuttavat "näyttää hyvältä" asioiksi, joihin arvioija voi viitata. Rakenna kriteerit sen perusteella, mitä näet, haistat, mittaat tai kuulet, äläkä itsevarmuuden tai nopeuden vaikutelmien perusteella.
Tässä on havainnollistava lähtökohta kanaruoalle. Arvioi jokainen kriteeri asteikolla 0–2 ankkureita käyttäen ja mukauta se pätevän kokkiarvioijan kanssa.
| Kriteeri | 0: heikko | 1: kehittymässä | 2: taitava |
|---|---|---|---|
| Asettelu ja aseman pystytys | Puuttuvia kohteita; pysähtyy kesken tehtävän hakeakseen ne | Useimmat tuotteet ovat valmiita; yksi tai kaksi taukoa aiheuttaa tauon | Kaikki tavarat valmiina ja käden ulottuvilla ennen aloittamista |
| Reseptin ja annosten noudattaminen | Poikkeaa reseptistä; annos on näkyvästi pielessä | Noudattaa reseptiä; annos on hieman toleranssin ulkopuolella | Noudattaa reseptiä; annos ilmoitetun toleranssin sisällä vaa'alla |
| Tekniikka ja kypsyysaste | Ylitäytetty pannu tai väärä lämpö; tuote ali- tai ylikypsä | Suurimmaksi osaksi oikea tekniikka; ydinlämpötila saavutettu, mutta ei lepotilassa | Oikea lämmön ja pannun käyttö; saavuttaa turvallisen lämpötilan ja lepää ohjeiden mukaisesti |
| Elintarviketurvallisuus | Ohittaa käsienpesun, ristikontaminaatio | Suurimmaksi osaksi vaatimusten mukainen; yksi puute korjattu pyydettäessä | Noudattaa ohjeita koko ajan ilman kehotusta |
| Pinnoitus eritelmien mukaan | Ei vastaa referenssikuvaa | Vastaa viittausta huomattavin eroin | Vastaa referenssiä ilmoitetun toleranssin rajoissa |
Määrittele kriittiset virheet erikseen. Kanan tarjoilu turvallisen sisälämpötilan alapuolella tai allergeenikontrollin laiminlyönti johtaa tehtävän hylkäämiseen kokonaispistemäärästä riippumatta. Kokonaispistemäärä ei saa koskaan peittää kriittistä epäonnistumista.
Laajemman kuvan harkintaan perustuvan työn pisteytyksestä saat tästä oppaasta harkintakyvyn ja ongelmanratkaisun arviointi koulutuksessaVältä määrittelemättömiä kriteerejä, kuten "osoittaa luottamusta" tai "toimii nopeasti". Nopeus voi olla kriteeri, jos asetat sille mitattavan tavoitteen, esimerkiksi lautaselle asetetun annoksen tietyn minuutin kuluessa, mutta älä anna sen olla laadun korvike.
Sama ongelma esiintyy muillakin aloilla, ja yleiset ohjeet jatkuvat. Jonssonin ja Svingbyn tunnettu arviointimatriisitutkimusten katsaus osoitti, että arviointimatriisit voivat parantaa pisteytyksen luotettavuutta, erityisesti analyyttisten, aihekohtaisten arviointimatriisien, joita käytetään esimerkkien tai arvioijien koulutuksen kanssa, avulla. Siinä havaittiin myös, että pelkkä arviointimatriisi ei takaa päteviä suoritusarvioita. Voit lukea yhteenvedon ERIC-tietue tarkistusta vartenYksinkertaisesti sanottuna: kirjoita ankkurit ja kouluta sitten niitä käyttävät ihmiset.
4. Kalibroi arvioijat ja suorita pilottihanke
Kalibrointi on johdonmukaisuuden rakentamisen perusta. Ennen kuin arvioijat pisteyttävät oikeita kokkeja:
- Pisteytä itsenäisesti. Pyydä jokaista arvioijaa katsomaan sama esimerkki suorana tai videonauhoitteelta ja pisteyttämään se yksin arviointimatriisia vasten.
- Vertaile todisteita, älä vain pisteitä. Kysy jokaiselta henkilöltä, mitä he näkivät sellaista, mikä tukee kutakin pisteytystä. Eroavaisuus ykkösen ja kakkosen välillä viittaa yleensä epämääräiseen ankkuriin.
- Tarkista epäselvät kriteerit. Lisää havaittavissa oleva yksityiskohta, kuten toleranssi grammoina tai nimetty kypsyystesti, kaikkiin ankkurihenkilöiden eri tavalla tulkitsemiin tietoihin.
- Toista uudella esimerkillä kunnes arvioijat ovat yhtä mieltä suurimmasta osasta kriteerejä ja sopivat tarkistavansa loputkin. Valitse asiantuntijasi kanssa hyväksymäsi sopimustaso sen sijaan, että lainaisit numeroa.
- Pilottikokeilu kahdessa tai kolmessa kohteessa. Tarkista, eroavatko pisteet kokin, arvioijan tai laitteiden vuoksi.
Pidä pätevä kokkiarvioija ajan tasalla. He vahvistavat arviointimatriisin, vertailulautasen, kypsyystarkastukset ja kriittiset virheet ja päättävät, kenellä on valtuudet arvioida. Kalibroi uudelleen aina, kun ruokalista tai standardi muuttuu, ja tietyin väliajoin, koska arvioijat vaihtelevat.
Kalibrointisessio on myös hyvä paikka käyttää interaktiivista aktiviteettia. Näytä jokaiselle referenssikuva tai lyhyt klippi, anna arvioijien äänestää pisteytyksestä nimettömästi ja paljasta ja keskustele sitten leviämisestä. Tämä tuo esiin erimielisyyksiä ilman, että kenenkään tarvitsee ensin puhua. Se tukee kalibrointia, mutta itse havainnointi tapahtuu silti keittiössä.
5. Käytä tuloksia jatkotoimissa
Pisteet ovat hyödyllisiä vain, jos ne johtavat jonnekin. Yhdistä seuraava askel näkemääsi kuiluun.
- Tietokuilu (kokki ei osannut sanoa kypsyysastetta): kohdennettu omaan tahtiin opiskelu, sitten nopea kertaustarkistus. Kertaustarkistus vahvistaa vain esitietovaatimusten täyttymisen.
- Arviointikuilu (kokki noudatti ohjeita, mutta ei huomannut, että lautanen oli irti): interaktiivinen tapausharjoitus palautteen avulla, valokuvien tai oikeiden työvuorojen tallennettujen painojen avulla.
- Osaamisvaje (tekniikka oli väärä): pätevän henkilön ohjaamaa live-valmennusta.
- Kontekstiero (oikea tekniikka, mutta laitteet, tarvikkeet tai henkilöstö tulivat tielle): korjaa syy, älä kokkia.
Arvioi uudelleen uutta, aiemmin tuntematonta tehtävää sopivan työkokemusjakson jälkeen. Seuraa samoja kriteerejä ajan kuluessa selkeällä nimittäjällä, kuten havainnoilla kokkia kohden neljännesvuosittain. Tarkastele samanaikaisia muutoksia, kuten uutta uunia, ruokalistan muutoksia tai henkilöstömuutoksia, ennen kuin kirjaat koulutuksen hyväksi mistä tahansa muutoksesta.
Valmiuspäätöksellä on rajansa. Läpäisy tarkoittaa, että kokki täytti havaituissa tehtävissä asetetut kriteerit kyseisissä olosuhteissa. Se ei tarkoita, että he ovat valmiita jokaiselle asemalle tai jokaiseen palveluun.
Mitä arviointi ei korjaa
- Erilaiset varusteet. Jos yhden paikan grilli kuumenee, saat samalla taidolla erilaisia tuloksia.
- Epäselvät eritelmät. Jos spesifikaatiossa sanotaan "kypsennä kypsäksi", arvioijat ovat eri mieltä, koska spesifikaatio on epämääräinen.
- Arvioijan saatavuus. Rubriikki, jolla ei ole koulutettua arvioijaa työmaalla, on vain dokumentti.
- Todisteiden rajat. Yksi havainto osoittaa, mitä sinä päivänä tapahtui. Se ei todista miksi.
Nimeä nämä franchising-omistajille ajoissa ja sovi, kuka korjaa kunkin. Linkitetty opas osoitteessa reseptivaihteluiden ja annosten epäjohdonmukaisuuden vähentäminen franchising-toimipisteiden välillä käsittelee reseptiä ja työkalupuolta syvällisemmin.
Usein kysyttyjä kysymyksiä
Mitä on kulinaarinen osaamisen arviointi?
Se on kokin suorittamien määriteltyjen tehtävien strukturoitua havainnointia, jota pisteytetään kirjallisten kriteerien perusteella. Se tarkistaa, mitä henkilö osaa tehdä keittiössä, ei vain mitä hän tietää.
Miten pidätte pisteytyksen yhdenmukaisena eri paikoissa?
Käytä samoja havaittavia kriteerejä ja ankkureita kaikkialla ja kalibroi arvioijia pyytämällä heitä pisteyttämään samat esimerkit ja vertailemaan näyttöä. Kalibroi uudelleen, kun standardi muuttuu.
Voiko ruoanlaittotaitoja arvioida netissä?
Vain osittain. Tiedon tarkistukset, skenaariokysymykset ja kalibrointikeskustelut voidaan järjestää verkossa tai reaaliajassa, mutta käytännön taitojen arviointiin tarvitaan pätevä arvioija, joka seuraa todellista valmistautumista joko henkilökohtaisesti tai tallennetun videon välityksellä.
Kuinka monta kriteeriä rubriikilla tulisi olla?
Niin vähän, että arvioija voi pisteyttää ne yhdellä havainnolla. Kourallinen havaittavissa olevia kriteerejä, joilla kullakin on selkeät perusteet, toimii paremmin kuin pitkä lista, jota ihmiset silmäilevät.
Mistä aloittaa
Valitse yksi nimikkoruokalaji. Laadi viiden kriteerin arviointimatriisi, jossa on ankkurit, ja pyydä sitten pätevää kokkiarvioijaa korjaamaan se. Suorita kalibrointisessio arvioijiesi kanssa kahdella tallennetulla esimerkillä, tarkista erimielisyyttä aiheuttaneet ankkurit ja kokeile sitä kahdessa toimipisteessä ennen käyttöönottoa.
Jos haluat nähdä, miten kalibrointisessio tai tietämyksen tarkistus voitaisiin suorittaa reaaliajassa ja miten sitä voitaisiin käyttää uudelleen omaan tahtiin jälkikäteen, tutustu aiheeseen AhaSlides.
