제조 교육 효과 측정: 문제 해결 교육을 가동 중지 시간 및 생산량과 함께 측정하는 방법

한 공장에서 3월에 기계 조작원을 대상으로 문제 해결 교육 과정을 운영했습니다. 같은 분기에 유지보수팀은 포장 라인의 공정 개선 작업을 완료했습니다. 6월이 되자 해당 라인의 계획 외 가동 중단 시간이 줄어들었습니다. 공장 관리자는 교육 담당자에게 당연한 질문을 던졌습니다. "교육 과정 덕분이었을까요?"

이것은 예시 시나리오일 뿐, 실제 고객 사례는 아닙니다. 하지만 이러한 문제는 흔히 발생합니다. 교육과 운영 변경 사항이 동시에 적용되면 수치만으로는 어떤 요인이 영향을 미쳤는지 알 수 없습니다. 이 가이드는 공장 교육 관리자와 그들과 협력하는 유지보수 또는 품질 관리 담당자를 위한 것입니다. 관찰된 문제 해결 능력과 운영 지표를 연결하는 방법, 그 연결 관계를 정확하게 해석하는 방법, 그리고 보고해야 할 내용을 제시합니다. 사례, 점수 및 임계값은 장비 소유자가 검증해야 합니다.

제조 교육 효과 측정이란 무엇인가요?

이는 교육 프로그램이 작업 수행 능력에 변화를 가져왔는지, 그리고 그 변화가 가동 중지 시간이나 생산량과 같은 운영 데이터에 반영되었는지를 검증하는 방법입니다. 이때, 두 데이터 간의 연관성을 입증할 수 있는 비교 분석을 활용합니다. 이 방법은 작업 수행 능력(작업자가 고장을 진단할 수 있는가?)과 설비 지표(가동 중지 시간이나 불량률에 변화가 있는가?)라는 두 가지 유형의 증거를 결합합니다. 단, 한쪽의 향상을 다른 쪽의 증거로 간주하지는 않습니다.

빠른 사실

1. 결과와 비교 대상을 정의하십시오.

수업 시작 전에 세 가지를 적어 두세요.

1. 결정. 이 분석은 프로그램 확장, 수정 또는 중단과 같은 어떤 결정을 내리는 데 도움이 될까요? 결정이 수반되지 않은 측정 계획은 아무도 활용하지 않는 보고서를 만들어낼 뿐입니다.
2. 개입과 역할. 어떤 운영자, 기술자 및 교대조 책임자가 대상이며, 정확히 어떤 교육을 받았습니까? 운영자에게 경보 기록을 읽고 저렴하고 안전한 부품부터 점검하도록 가르치는 문제 해결 교육은 기술자에게 센서를 조정하도록 가르치는 교육과는 다른 유형의 교육입니다.
3. 비교. 무엇과 비교하는 건가요? 자기들 자신의 기준선, 아직 훈련되지 않은 라인, 아니면 전년도 같은 라인과 비교하는 건가요?

또한 별도의 비용을 고려해야 합니다. 납품 비용은 프로그램 운영에 소요되는 비용, 즉 설계 시간, 진행자 시간, 도구 비용입니다. 운영 비용은 공장에 미치는 비용, 즉 생산 라인에서 작업자가 자리를 비운 시간, 가동 중지된 설비 등에 대한 비용입니다. 투자 수익률을 논의하려면 이 두 가지 비용 모두 계산에 포함되어야 합니다. ROI 연구소는 자사의 ROI 방법론을 설명합니다.이는 결과를 금전적 이익으로 전환하기 전에 프로그램의 효과를 분리하는 단계를 추가합니다. 이 단계를 완전히 따를 필요는 없지만, 제기된 질문 자체는 타당합니다.

2. 실제 작업을 측정합니다.

완료율과 만족도 점수는 결과물의 성과를 나타내는 지표입니다. 이 수치들을 보관하되, '성과 지표'로 표시하고, 영향력의 증거로 제시하지 마십시오.

공장과 연관된 측정 기준은 과제 수행 능력입니다. 교육 과정에서 목표로 하는 기술에 대한 관찰 가능한 증거를 활용하십시오.

1. 기준선. 교육 전에, 경보 이력과 작업자가 요청할 수 있는 몇 가지 판독값이 있는 디지털 오류 사례와 같은 안전한 오류 사례를 바탕으로 각 작업자를 평가 기준표를 사용하여 평가하십시오.
2. 훈련 후 비교 평가. 난이도가 같은 다른 사례를 사용하여, 첫 번째 답을 암기하는 것이 아니라 실력을 측정하세요. 저희 가이드를 참고하세요. 시험 장비 조작자의 문제 해결 능력을 객관적으로 평가해 보세요. 사례 구성 방법과 정답지를 다룹니다.
3. 송금 수표. 적절한 기간이 지난 후 실제 업무에서 해당 행동이 나타나는지 질문하십시오. 예를 들어 유지보수 책임자가 최근 결함 판정 결과를 검토할 때 이를 확인할 수 있습니다.

The 커크패트릭 모델 반응, 학습, 행동, 결과라는 네 단계를 한눈에 파악할 수 있는 유용한 지도입니다. 저희 경험상, 프로그램들은 흔히 처음 두 단계에 대한 보고만 하고 네 번째 단계인 행동에 대해서는 언급하지 않는 경우가 많습니다. 이 네 단계를 연결하는 과정, 즉 직무 행동에 대한 근거는 부족한 경향이 있습니다. 일반적인 사례는 저희 가이드를 참조하십시오. 교육 과정 수료 이후의 교육 성과 측정.

인지적 부담에 대해 말씀드리겠습니다. 여러 원인 중 어떤 원인이 증상에 부합하는지 진단하는 것이 분석이고, 어떤 조치가 정당한지 판단하는 것이 평가입니다. 저희 가이드에서는 다음과 같이 설명합니다. 학습 활동을 블룸의 분류 체계에 맞추기 테스트를 이러한 요구 사항에 맞추는 방법을 설명합니다. Bloom을 사용하여 작업을 설계하십시오. 가동 중지 시간을 예측하는 데 사용하지 마십시오. 테스트의 상위 레벨은 작업이 요구하는 바를 설명하는 것이지, 공장에서 실제로 발생할 상황을 예측하는 것이 아닙니다.

3. 작업 증거를 운영 데이터와 연결합니다.

이제 두 가지 유형의 증거를 나란히 비교해 보세요. 두 가지 수치가 가장 중요한 역할을 합니다. 바로 작업 점수의 변화와 유사한 가동 중지 시간 비율의 변화입니다.

각 식물 측정 항목에 대해 결과를 살펴보기 전에 네 가지 사항을 정의하십시오.

1. 인구. 어떤 생산 라인, 교대 근무, 어떤 기계를 사용해야 할까요? 전체 사업장의 가동 중지 시간 수치는 숙련된 특정 팀의 상황에 대해서는 거의 알려주지 않습니다.
2. 분모. 계획된 가동 시간당 정지 시간(분) 또는 1,000회 주기당 정지 횟수를 기준으로 계산해야 하며, 총 정지 횟수를 기준으로 계산해서는 안 됩니다. 가동 시간이 두 배로 늘어난 라인은 숙련도에 변화가 없더라도 정지 시간이 더 길어질 것입니다.
3. 기간. 훈련 전후 기간은 동일하며, 훈련 후 첫 몇 주는 사람들이 적응하는 기간이므로 별도로 관리합니다.
4. 출처. 해당 수치가 어디에서 나온 것인지(예: 유지보수 기록, 기계 자체의 정지 기록 또는 품질 시스템) 그리고 누가 소유하고 있는지를 명시해야 합니다.

해당 기술과 유사한 측정값을 선택하세요. OEE(전체 설비 효율) OEE(종합설비효율)는 가용성, 성능, 품질을 종합적으로 고려합니다. 가용성 요소는 계획된 생산을 중단시키는 이벤트를 집계하고, 품질 요소는 재작업을 포함하여 표준을 충족하지 못하는 부품을 집계합니다. 이러한 요소들은 이 가이드에서 중점적으로 다루는 두 가지 요소인 가동 중지 시간과 수율(양품 비율)과 밀접하게 연관됩니다. 단일 OEE 수치보다는 구성 요소를 살펴보는 것이 좋습니다. 문제 해결 과정은 계획된 교체 작업보다 계획되지 않은 가동 중지를 줄일 가능성이 더 높으며, 이러한 요소들을 평균화하면 그 차이를 파악하기 어렵기 때문입니다. 또한 성능 요소는 가용성 데이터에서 간헐적으로 발생하는 작은 가동 중지나 저속 운전과 같은 사소한 문제까지 포착합니다.

그다음에는 논리적으로 뒷받침할 수 있는 문장으로 타당한 연관성을 설명하세요. 예를 들어, "점수가 낮은 항목부터 높은 항목 순으로 점검하는 작업자는 사소한 문제 발생 시 더 빨리 해결할 수 있으므로, 포장 라인의 계획되지 않은 가동 중지 시간이 단축될 것으로 예상합니다."와 같이 설명할 수 있습니다. 이는 메커니즘을 제시하는 가설입니다. "점수가 올라가고 가동 중지 시간이 줄어들었다"는 것은 상관관계이며, 다른 설명들을 배제하기 전까지는 유효한 상관관계로 남습니다.

4. 다른 설명 가능성을 고려하십시오.

비교 기간 동안 변경된 다른 사항들을 살펴보세요. 다음 목록부터 시작하세요.

• 공정 또는 장비 변경. 우리 시나리오에서 유지 보수 업그레이드는 명백한 것입니다. 새로운 센서, 변경된 레시피, 새로운 필름이나 재료 등이 그 예입니다.
• 업무량 및 제품 구성. 조용한 분기 또는 단순한 제품은 기술 수준 변화 없이도 경기 중단 시간을 줄일 수 있습니다.
• 스태핑. 신규 입사자, 퇴사자, 초과 근무 및 교대 근무 패턴 변경은 모두 휴식 시간에 영향을 미칩니다.
• 정책과 권한. 만약 운영자에게 고장 원인 조사 권한이 부여된다면, 그것만으로도 운행 중단 시간을 단축할 수 있을 것입니다.
• 측정 방식이 변경되었습니다. 정차역 기록 방식의 변화로 수치가 하룻밤 사이에 바뀔 수 있습니다.

두 가지 디자인이 도움이 됩니다. A 단계적 출시 기차는 한 노선이나 교대 근무를 먼저 운행하고 나중에 비슷한 노선이나 교대 근무를 운행하므로 두 번째 운행은 기다리는 동안 비교 기준으로 사용됩니다. 일치 비교 숙련된 작업자와 미숙련 작업자를 유사한 기계와 제품에 짝지어 테스트합니다. 하지만 두 가지 방법 모두 항상 가능한 것은 아닙니다. 생산 라인이 다르고, 작업팀이 교대로 근무하며, 공장 측에서 테스트를 위해 교육을 미루고 싶어하지 않을 수도 있습니다. 두 가지 방법 모두 적합하지 않다면, 그 이유를 명시하고 결과를 효과 크기가 아닌 다른 변화들과 함께 타당한 기여 요인으로 보고해야 합니다.

기술자 교육에 대한 연구는 왜 이 작업이 중요한지 보여줍니다. Schaafstal, Schraagen 및 van Berlo는 일반적인 문제 해결 전략과 장비의 기능적 고장 분석을 결합한 교육 과정을 개발했습니다. 평가 결과, 이러한 방식으로 교육받은 기술자들은 기존 방식으로 교육받은 기술자들보다 더 짧은 시간에 약 두 배 더 많은 고장을 해결했습니다.샤프스탈과 동료들, 2000참가자들은 실제 현장에서 작업하는 운영자가 아니라 구조화된 평가에 참여한 기술자들이었으므로, 이는 작업 결과를 측정해야 하는 이유로 간주해야 하며, 기대치로 여겨서는 안 됩니다.

5. 결과를 보고하고 다음 조치를 선택합니다.

매 분기마다 동일한 방식으로 간단한 표를 작성하여 보고하십시오. 다음은 결과 필드가 비어 있는 표의 예시입니다. 셀을 비워둔 것은 의도적인 것입니다. 인위적으로 만들어낸 효과 크기는 아예 없는 것보다 나쁩니다.

그런 다음, 수치를 보기 전에 합의된 증거를 바탕으로 다음 조치를 선택하십시오.

• 규모 만약 이전에 보지 못했던 사례에서 작업 점수가 상승했다면, 전송 검사는 라인에서의 동작을 보여주고, 공장 측정값은 비교 대상이나 다른 설명들을 배제했을 때 예상 방향으로 움직인 것입니다.
• 개정 점수는 올랐지만 선의 행동은 변하지 않았다면, 이는 대개 수업 과정 자체보다는 권위, 도구 또는 시간적 압박을 시사합니다.
• 멈추거나 다시 생각해 보세요. 점수가 오르지 않거나, 작업 데이터에서 그 이유를 설명할 만한 단서 없이 식물 측정값이 변동된 경우.

0점에서 2점까지 점수를 매기는 간단한 3가지 기준의 평가표를 사용하면 과제 점수의 의미를 명확하게 파악할 수 있습니다.

평가 기준: 0은 부재 또는 미지원, 1은 관련 누락이 있는 부분적 지원, 2는 합의된 기준에 따라 완전하고 타당함을 의미합니다. 안전하지 않은 행동과 같은 중요한 오류는 별도로 정의하여, 좋은 총점에도 불구하고 오류가 숨겨지지 않도록 해야 합니다. 이는 제안된 출발점일 뿐, 검증된 준비 표준은 아닙니다. 저희 가이드를 참조하십시오. 훈련 과정에서 판단력과 문제 해결 능력 평가 평가자 교정 및 기준점 작성에 대한 내용을 다룹니다.

상호작용적 전달이 도움이 되는 경우

과제 점수는 그 과제를 수행하는 과정의 질에 따라 좌우됩니다. 진행자가 이끄는 세션에서는 경보 기록을 보여주고 각 운영자에게 가장 먼저 확인할 사항을 정하도록 요청한 다음, 그 결과를 보여주고 토론할 수 있습니다. 이후에는 동일한 사례를 자율 학습 방식으로 진행하고, 추론 과정에 대한 질문을 통해 두 명의 평가자가 점수를 매길 수 있습니다. AhaSlides 상호작용적인 학습과 실시간 학습과 자기주도 학습 간의 전환을 지원합니다. 사용하려는 저작, 피드백 또는 보고 기능이 자체 워크플로와 일치하는지 확인하고, 시뮬레이터, AI 및 시스템 통합은 작동 여부를 직접 확인하기 전까지는 외부 또는 미확인 기능으로 간주하십시오. 과정에 알림 기반 작업이 포함되는 경우, 관련 가이드를 참조하십시오. 예측 AI 경고를 해석하는 방법을 유지보수 기술자에게 교육합니다. 이 글은 동일한 작업 우선 접근 방식을 적용하는 방법을 보여줍니다.

이것으로는 해결되지 않을 문제

• 실력이 향상된 후에도 남아 있는 제약 조건. 예비 부품 부족, 조사 권한 부재, 진단보다는 생산량을 중시하는 생산 라인은 효과를 제한할 것입니다.
• 소량의 샘플. 한 분기에 걸쳐 있는 한 줄은 패턴을 보여줄 수는 있지만 원인을 밝혀내는 경우는 드뭅니다.
• 전송 속도가 느립니다. 숙련도가 실제 업무 데이터에 나타나려면 몇 주간의 현장 노출이 필요할 수 있습니다.
• 평가자의 판단이 빗나갔습니다. 평가자들이 비교를 중단하면 점수 차이는 다시 벌어집니다.
• 기준선이 누락되었습니다. 정차 기록이 일관되게 기록되지 않았다면 지금 바로 기록을 시작하고 그 결과를 바탕으로 측정하십시오.

이러한 사항들을 후원자들에게 미리 알리고 누가 각각을 해결할지 합의하십시오.

자주하는 질문

제조 교육 효과 측정이란 무엇인가요?

이는 훈련이 작업 수행 능력에 변화를 가져왔는지, 그리고 그 변화를 바탕으로 가동 중지 시간이나 수확량과 같은 공장 지표가 어떻게 변했는지를 비교를 통해 확인하는 것입니다.

테스트 점수로 시스템 다운 시간을 예측할 수 있을까요?

아니요. 점수는 작업자가 안전한 작업을 수행할 수 있는 능력을 보여주는 지표입니다. 가동 중지 시간은 다른 여러 요인에 따라 달라지므로, 점수는 하나의 증거로 활용하고 공장 데이터와 비교 분석해야 합니다.

어떤 운영 조치를 사용해야 할까요?

기술과 관련된 항목을 선택하고 모집단, 분모, 기간 및 출처를 정의하십시오. 시간당 계획되지 않은 정지 시간과 재작업률이 일반적인 시작점입니다.

교육과 프로세스 개선을 어떻게 구분할 수 있을까요?

아직 교육을 받지 않은 유사한 라인 또는 교대 근무조와 비교하거나 단계적으로 도입하십시오. 그것이 불가능한 경우, 결과 옆에 다른 변경 사항을 보고하고 그것이 타당한 기여 요인임을 설명하십시오.

어디서 시작하나요

예를 들어 시간당 계획되지 않은 정지 시간(분)과 같이 한 가지 항목과 측정 지표를 선택합니다. 다음 분기에 계획된 다른 변경 사항들을 기록합니다. 유지보수 책임자에게 기준 고장 사례와 이에 상응하는 후속 사례를 작성하도록 요청하고, 두 명의 평가자가 각각 5개의 답변을 독립적으로 평가하도록 합니다. 평가 기준에 의견 차이가 있는 부분을 수정하고, 위의 보고표를 빈칸으로 작성한 후 증거가 도착하는 대로 채워 넣습니다.

이러한 오류 사례를 실제 환경에서 실행하고 이후 사용자가 스스로 학습 속도를 조절하며 재사용하는 방법을 알아보려면 다음을 참조하세요. AhaSlides.