Hvordan strukturere etterundersøkelser (AAR-er) for å fremme psykologisk trygghet, ærlig selvkritikk og læring fra roten av årsakene

En etterundersøkelse (AAR) er en strukturert samtale som holdes kort tid etter en treningsøvelse eller en reell hendelse, for å fastslå hva som var ment å skje, hva som skjedde, hvorfor og hva man skulle gjøre videre. Det høres enkelt ut. I praksis går mange AAR-er galt på de samme to måtene: folk forsvarer avgjørelsene sine, og bakgrunnen for hendelsen er tynn. Begge deler gjør det vanskelig å lære noe som helst.

Denne veiledningen er skrevet for opplæringsledere og opplæringsansvarlige innen offentlig sikkerhet som tilrettelegger årlige rapporter om hendelser (AAR). Den fokuserer på deeskalering og koordinering av hendelser, alltid innenfor den myndigheten dine ansatte har fått delegert. Den viser hvordan man skiller et kompetansegap fra et klimaproblem, hvordan man legger til rette for ærlige diskusjoner, hvordan man kjører et gjennomført scenario, og hvordan man kan se om gjennomgangen har endret noe.

Start med oppførselen, ikke forelesningen

Se for deg dette illustrerende scenarioet (ikke et reelt tilfelle). Et team avslutter en bordøvelse på en anspent hendelse med flere etater. I gjennomgangen sier én offiser at radiooverleveringen «gikk fint». En annen sier at tidslinjen var «omtrent» som planlagt. Ingen nevner at to personer var uenige om hvem som hadde den neste avgjørelsen. Den skriftlige hendelsesrapporten har hull, og samtalen går over til hva øvelsesdesignerne gjorde feil.

Før du planlegger et svar, spør hva som egentlig ligger bak denne stillheten. Det finnes minst fire forskjellige forklaringer, og de trenger forskjellige løsninger:

1. En manglende ferdighet. Folk vet ikke hvordan de skal beskrive en avgjørelse, sitere hva de visste på det tidspunktet og si hva som var uklart. Dette er et læringsbehov.
2. En autoritetsgradient. Junioransatte vil ikke utfordre en seniorkollegas beretning foran rommet. Det hjelper ikke å øve på ferdigheten før gradienten endrer seg.
3. Incentiver. Hvis funn fra gjennomgang gir grunnlag for vurdering eller disiplinærarbeid, er ærlig selvkritikk en risiko, uansett hvor godt den tilrettelegges.
4. Historie. Hvis den siste personen som tok ordet ble ignorert eller satt på sidelinjen, har rommet lært noe, og et nytt format vil ikke gjøre det ugjort.

Psykologisk trygghet er begrepet forskere bruker for dette klimaet. Amy Edmondsons studie av 51 arbeidsteam i en produksjonsbedrift definerte det som en felles oppfatning av at teamet er trygt for mellommenneskelig risikotaking, og fant at det var assosiert med teamlæringsatferd (Edmondson, 1999, Administrative Science Quarterly). Det er en assosiasjon i én setting, ikke bevis på at et bestemt AAR-format vil skape trygghet i din setting. Behandle det som en grunn til å undersøke klimaet, ikke som et løfte.

Den praktiske konsekvensen: en tilretteleggingsteknikk kan bare gjøre så mye. Psykologisk trygghet avhenger også av hvordan ledere oppfører seg utenfor økten, så planlegg å se på begge deler.

Sett betingelsene før noen snakker

Den amerikanske hærens treningsrundskriv om AAR-er (TC 25–20, En leders guide til evalueringer etter handling, 1993) beskriver en årlig årlig evaluering (AAR) som en profesjonell diskusjon av en hendelse, fokusert på ytelsesstandarder, som lar deltakerne selv oppdage hva som skjedde, hvorfor det skjedde og hvordan de kan opprettholde styrker og forbedre svakheter. Merk uttrykket «oppdage selv». En gjennomgang som blir til en dom avsagt av den mest erfarne personen i rommet, er en debriefing av et annet slag.

Avtal disse vilkårene skriftlig med deltakernes veiledere på forhånd:

• Formål og grense. Angi om denne gjennomgangen kun er for læring, eller om noe av det som er sagt kan gi grunnlag for en separat formell prosess. Hvis det ærlige svaret er «det kommer an på», si det rett ut. Folk vil ikke være ærlige basert på en vag forsikring.
• Godkjente ansvarsområder. Vær tydelig på hva hver rolle hadde fullmakt til å bestemme under øvelsen eller arrangementet. Ansatte kan bare reflektere ærlig over en beslutning hvis de vet om det var deres ansvar å ta den. Der informasjon eller myndighet ikke var tilstrekkelig, er riktig oppførsel å si ifra og eskalere, og evalueringen bør behandle dette som god praksis.
• Hvordan lederne vil reagere. Å øve på å snakke med de ansatte er bare halve jobben. Ledere trenger en tilsvarende respons: takke personen, stille et oppfølgingsspørsmål og ikke kommentere personen. Informer dem først, og be dem snakke sist.
• Bevis først. Samle inn hendelsesrapporten, tidslinjen, radio- eller loggutdrag og eventuelle øvelsesinnsprøytninger før økten. Defensivt spill fyller ofte hullet som manglende bevis etterlater.

Design en atferdsbasert læringsreise

Ansatte blir ikke flinke til ærlig evaluering av å delta på en. God design starter med den atferden du ønsker, og matcher deretter forberedelse, praksis og tilbakemeldinger til den. Carnegie Mellon Eberly Centers veiledning om samkjøre vurderinger, mål og undervisningsstrategier illustrerer poenget godt: hvis du vil at folk skal analysere, øve på og vurdere analyser, ikke bare huske. Det er designveiledning for å samkjøre læringsaktiviteter, ikke bevis på noe sektorresultat eller noen plattform.

For denne oppgaven er oppførselen: analysere hva som skjedde og bli enige om et læringstiltak. Med Blooms ord står det på «anvende» og «evaluere». Disse etikettene beskriver den nødvendige tenkningen, ikke et leveringsformat, og de forklarer ikke motivasjon. Hvis noen ikke vil snakke, vil ikke Bloom fortelle deg hvorfor.

En gjennomførbar reise har tre faser:

Forberedelse i eget tempo frigjør live-sesjonen til den delen som trenger folk i rommet: tvetydighet. Fakta kan læres alene. Hvorvidt en avgjørelse tatt med delvis informasjon var rimelig, er en samtale.

Et gjennomført scenario og debriefing

Her er casestudiet å bygge øvingsfasen rundt. Det er illustrerende, og en kvalifisert sikkerhetspersonell bør validere casestudiet og svarkriteriene før du bruker det.

Saken. I en deeskaleringsøvelse ble et innsatsteam sendt til et anspent og overfylt offentlig rom. Teamlederen ba et yngre medlem om å holde muntlig kontakt med en opprørt person mens resten av teamet koordinerte med en annen instans via radio. Etterpå viser den skriftlige rapporten et gap på 6 minutter og ingen notat om hvem som bekreftet overleveringen. I gjennomgangen forsvarer teamet sekvensen, og rapporten diskuteres ikke.

Hva fasilitatoren ber deltakeren om å gjøre. Forklar avgjørelsen, siter relevante bevis og identifiser hvilken ytterligere informasjon eller støtte som var nødvendig.

En sterk respons høres slik ut.

• Hva jeg gjorde: «Jeg fortsatte å snakke med personen fordi jeg var den eneste som hadde muntlig kontakt. Jeg stoppet ikke for å logge overleveringen.»
• Bevisene jeg hadde: «Jeg kunne høre radioen, men ikke bekreftelsen. Tidslinjen viser den siste tonen min før pausen.»
• Det jeg ikke visste og det jeg trengte: «Jeg var usikker på om jeg hadde tillatelse til å be den andre etaten om å gjenta overleveringen. En tydeligere instruksjon om det ville ha hjulpet.»

Hvordan mottakeren reagerer. Tilretteleggeren verken korrigerer eller dømmer. De spør: «Hva gjorde det vanskelig å gjøre den gangen?» og «Hva ville gjort det enklere neste gang?» Teamlederen legger deretter til sin egen beretning, inkludert hva de kunne ha gjort tydeligere. Det er ofte det at en seniorperson erkjenner et gap som gjør det andre og tredje bidraget mulig.

Overføringsspørsmålet. Avslutt med én fremoverrettet oppgave: «Hva ville gjort det lettere å gjenta denne oppførselen på jobb?» Svarene er ofte prosesspunkter (en bekreftelseslinje for overlevering i loggen, en tydeligere erklæring om hvem som kan be om gjentakelse) snarere enn individuelle mangler. Det er dine underliggende årsaker.

Tilretteleggingsbevegelser som beskytter ærlighet

Noen vaner utgjør forskjellen mellom en evaluering og et avhør:

• Still åpne spørsmål om «hva» og «hvordan» før et «hvorfor». «Hvorfor gjorde du det?» inviterer til et forsvar. «Hva så du på det tidspunktet?» inviterer til en redegjørelse.
• Spør først tilretteleggeren og den mest erfarne personen om de svakeste punktene. Det går raskere å vise selvkritikk enn å be om det.
• Chase-årsaker forbi det første svaret. Hvis forklaringen stopper ved «noen gjorde en feil», fortsett å spørre hva i prosessen som gjorde at feilen fikk betydning. Individuelle feil er sjelden den underliggende årsaken.
• Avslutt med navngitte handlinger, eiere og datoer. En anmeldelse som avsluttes uten en læringshandling lærer folk at anmeldelser er teater.

Mål atferd og følg opp

Hvordan vet du at elevene nå kan analysere hva som skjedde og bli enige om en læringshandling? Se etter bevis, ikke oppmøte eller glede:

1. Kvaliteten på refleksjonen. Bruk en rubrikk til å vurdere usett case eller reelle vurderinger basert på om deltakerne oppgir avgjørelsen, siterer bevis, nevner usikkerhet og foreslår en spesifikk handling.
2. Kvalitet på oppfølgingstiltak. Er de avtalte handlingene spesifikke, eierskapsbestemte og fullførte? Spor dem.
3. Overføring på jobb. Sammenlign en grunnleggende gjennomgang med en senere usett sak, etter nok tid i jobben til å øve.

Her er et eksempel på en rubrikk. Gi hvert kriterium en poengsum fra 0 til 2, og tilpass kriteriene sammen med en kvalifisert spesialist. Dette er et foreslått rubrikk, ikke en validert beredskapsstandard.

Ankere: 0 = fraværende eller ikke støttet; 1 = delvis, med relevante utelatelser; 2 = fullstendig og begrunnet mot avtalte kriterier. Definer kritiske feil separat, slik at en samlet poengsum aldri skjuler en kritisk feil.

Vær spesielt forsiktig med ett tall: rapporteringsvolum. Hvis det reises flere bekymringer etter at du har endret vurderingene dine, kan det bety at folk føler seg tryggere, at mer går galt, eller at et nytt skjema er enklere å fylle ut. En økning i rapportering trenger tolkning, ikke feiring. Kombiner observasjon av vurderingsøkter med prosessendringer og oppfølgingstiltak, definer populasjon, nevner og tidspunkt før du starter, og sjekk for andre driftsendringer samtidig før du tilskriver noe til opplæringen. Måleveiledning, som CDCs ressurser for opplæringsevaluering, er nyttig for å ramme inn læring og overføring, men den forutsier ikke driftsforbedring.

Begrensninger som kan gjenstå

To spørsmål er verdt å ta med i planleggingen.

Hvilke begrensninger kan fortsatt være til stede selv etter at oppgaveytelsen forbedres? Autoritetsgradienter, koblinger til vurderinger, arbeidsmengde og måten ledere reagerer på i korridoren etterpå kan alle vedvare. Bedre tilrettelegging vil ikke endre et insentiv. Hvis folk fortsatt ikke har råd til å være ærlige, vil rubrikken din vise god refleksjon i opplæringsrommet og stillhet i felten.

Hvor dette passer inn, og hva man skal gjøre videre

Start med en oppgaverubrikk eller et reiselerret: velg én tilbakevendende øvelse, skriv ned vurderingsatferden du ønsker, og sjekk at hvert trinn i designet praktiserer og vurderer denne atferden. Test den deretter med en opplæringsansvarlig og en driftsspesialist før du kjører den.

AhaSlides støtter interaktiv læring, adaptiv læring og veksling mellom live og selvstudium. Hvis du vil se hvordan de ville håndtere en gjennomgang som den ovenfor, bestill en demonstrasjon av AhaSlides og be teamet om å gå gjennom det opp mot din egen sak. Bekreft de spesifikke funksjonene for redigering, tilbakemelding og rapportering du trenger under demonstrasjonen, og behandle AI, VR, simulatorer og integrasjoner som eksterne eller ubekreftede inntil du har sett dem fungere.