Các kỹ thuật viên sẽ xác nhận kết quả đầu ra tự động một cách hiệu quả khi họ được đào tạo để kiểm tra kết quả đó dựa trên bằng chứng, chứ không phải tin tưởng hay nghi ngờ nó theo thói quen. Hướng dẫn này dành cho các giám đốc dịch vụ chẩn đoán và các nhà giáo dục về phòng thí nghiệm hoặc X quang. Nó bao gồm năm bước: mô tả vấn đề về hiệu suất, chẩn đoán các thiếu sót, thiết kế quy trình thực hành, giải quyết một ví dụ và đánh giá khả năng chuyển giao kiến thức. Nó tập trung vào thiết kế đào tạo, chứ không phải về bất kỳ sản phẩm nào hoặc độ chính xác của nó. Các quy trình đã được phê duyệt của bạn sẽ quyết định điều gì xảy ra với một cảnh báo, và nhà giáo dục về phòng thí nghiệm hoặc X quang nên viết và xác nhận từng trường hợp trước khi sử dụng.
Nghiên cứu nói gì và không nói gì.
Một đánh giá có hệ thống do Goddard, Roudsari và Wyatt thực hiện đã xem xét... xu hướng tự động hóaXu hướng làm theo gợi ý tự động ngay cả khi bằng chứng khác chỉ ra điều ngược lại. Nghiên cứu cũng xem xét những yếu tố nào làm tăng hoặc giảm khả năng xảy ra thiên kiến, từ đó cung cấp cho các nhà thiết kế chương trình đào tạo những dữ liệu hữu ích.
Tài liệu này không hướng dẫn bạn cách đào tạo đội ngũ của mình, và cũng không đề cập đến công cụ cụ thể nào. Hãy sử dụng nó để định hình các trường hợp nghiên cứu, sau đó thử nghiệm quá trình đào tạo với nhân viên của chính bạn.
sự kiện nhanh chóng
| câu hỏi | Câu trả lời ngắn |
|---|---|
| Nhiệm vụ là gì? | Kiểm tra kết quả phân đoạn hình ảnh tự động hoặc các chỉ dẫn trong phòng thí nghiệm so với bằng chứng. |
| Rủi ro chính là gì? | Chấp nhận kết quả vì nó trông có vẻ tự tin, hoặc từ chối nó theo thói quen. |
| Điều gì làm cho việc luyện tập trở nên hữu ích? | Các trường hợp ẩn danh, câu trả lời có lý lẽ và phản hồi gắn liền với quyết định. |
| Điều gì làm cho điểm số đáng tin cậy? | Các chuyên gia chấm điểm độc lập, sau đó so sánh bằng chứng. |
| Bạn nên tránh ghi điểm ở những loại bàn thắng nào? | Sự đồng thuận với công cụ, theo bất kỳ hướng nào. |
| Nó không thể quyết định điều gì? | Liệu một công cụ có chính xác hay không? Chính quy trình kiểm định của bạn mới là yếu tố quyết định. |
1. Mô tả vấn đề về hiệu năng
Hãy bắt đầu bằng tình huống: một cảnh báo tự động mâu thuẫn với ngữ cảnh hình ảnh hoặc thông tin mẫu. Nêu rõ vai trò cần thực hiện: kiểm tra các cảnh báo phân đoạn hoặc cảnh báo trong phòng thí nghiệm so với bằng chứng và quyết định bước tiếp theo. Một kỹ thuật viên tuân theo mọi cảnh báo sẽ làm khác với người chỉ dựa vào phán đoán để bỏ qua cảnh báo. Hãy cho biết bộ phận dịch vụ của bạn nhận thấy trường hợp nào và khi nào.
2. Chẩn đoán những thiếu sót về kiến thức và bối cảnh.
So sánh nhiệm vụ được yêu cầu với các hoạt động và đánh giá hiện tại. Nếu nhân viên học cách sử dụng công cụ từ buổi trình diễn của nhà cung cấp và được đánh giá dựa trên vị trí các nút bấm, họ chỉ thực hành thao tác chứ không phải khả năng phán đoán khi kiểm tra kết quả. Hướng dẫn của chúng tôi về... Phù hợp các hoạt động học tập với phân loại Bloom. giúp bạn phân biệt hai trường hợp này. Trước khi đưa ra chỉ định đào tạo, hãy kiểm tra các nguyên nhân khác: khối lượng công việc, cách hiển thị kết quả, liệu nhân viên có được phép ghi đè lên chỉ số đó hay không, và liệu quy trình giải quyết vấn đề có rõ ràng hay không. Hướng dẫn của chúng tôi về phân biệt sản phẩm máy móc với phát hiện thực sự Bao gồm một kỹ năng liên quan.
3. Thiết kế quá trình chuẩn bị và luyện tập có mục đích.
Lên kế hoạch ba lớp:
- Sự chuẩn bị. Một bài kiểm tra ngắn tự thực hiện về các điều kiện tiên quyết: các điều khoản, quy tắc gắn cờ dịch vụ của bạn và các bước leo thang. Kiểm tra lại chỉ xác nhận các điều kiện tiên quyết.
- Diễn tập giải quyết tình huống giả định. Hiển thị hình ảnh hoặc kết quả kèm theo cờ, hỏi xem có chấp nhận hay không và tại sao, sau đó đưa ra phản hồi liên quan đến quyết định. Trộn lẫn các trường hợp cờ đúng và các trường hợp cờ sai, mà không nói rõ trường hợp nào đúng, trường hợp nào sai.
- Nhập dữ liệu trực tiếp tại những nơi nó tạo ra giá trị. Một đồng nghiệp cấp cao thảo luận về một trường hợp mơ hồ. Việc xem xét không đồng bộ là đủ đối với những trường hợp rõ ràng.
Một trường hợp đã được xử lý với phản hồi và thử lại.
Chỉ mang tính minh họa. Người phụ trách giảng dạy về xét nghiệm hoặc chẩn đoán hình ảnh cần soạn thảo và xác nhận trường hợp bệnh và các tiêu chí trả lời trước khi sử dụng.
Trường hợp. Một cờ tự động đánh dấu kết quả mẫu là bình thường. Thông tin mẫu ghi nhận sự thay đổi gần đây trong phác đồ điều trị của bệnh nhân, và kết quả trước đó của cùng bệnh nhân này nằm ngoài phạm vi bình thường.
Nhiệm vụ. Hãy quyết định xem bạn nên làm gì. Giải thích quyết định của bạn, đưa ra bằng chứng và cho biết bạn cần thêm thông tin gì.
Lần thử đầu tiên. "Hệ thống báo là bình thường, nên tôi sẽ cho phép công bố." Một người đánh giá hỏi về kết quả trước đó, sự thay đổi trong phương pháp điều trị và quy trình nói gì về kết quả khác với tiền sử bệnh. Người học không có câu trả lời cho bất kỳ câu hỏi nào.
Phản hồi và thử lại. Người đánh giá lưu ý rằng lá cờ được coi là bằng chứng, trong khi nó chỉ là một dữ liệu đầu vào. Người học được yêu cầu bắt đầu từ lịch sử.
Một nỗ lực mạnh mẽ hơn. Người học nêu ra sự mâu thuẫn giữa kết quả thực tế và lịch sử bệnh án, cho rằng sự thay đổi trong phương pháp điều trị có thể giải thích điều đó, và sẽ giữ nguyên kết quả cũng như tuân theo lộ trình leo thang đã được phê duyệt. Họ cho biết những gì họ vẫn cần: quy tắc của quy trình đối với các kết quả khác với lịch sử bệnh án và quan điểm của người đánh giá.
Tại sao mỗi câu trả lời lại có thể chấp nhận được hoặc chưa đầy đủ. Đánh giá dựa trên các tiêu chí đã được phê duyệt, chứ không phải sở thích cá nhân của người đánh giá. Lần thử đầu tiên chỉ đưa ra kết quả dựa trên cờ báo hiệu mà bỏ qua bằng chứng mâu thuẫn, đây là một lỗi nghiêm trọng. Lần thứ hai kiểm tra kết quả đầu ra so với bằng chứng và tuân thủ đúng vai trò đã đề ra.
Xây dựng bộ vỏ hộp
Việc luyện tập chỉ hiệu quả khi bạn sử dụng những trường hợp thực tế tốt. Ban đầu, hãy chọn số lượng trường hợp ít:
- Các trường hợp sử dụng từ chính dịch vụ của bạn. Những xung đột thực tế dạy cho chúng ta nhiều điều hơn những xung đột được dàn dựng gọn gàng trong sách giáo khoa.
- Bao gồm cả những trường hợp cờ được cắm đúng. Những nhân viên chỉ thấy thất bại sẽ dần dần mất lòng tin vào mọi thứ.
- Hãy nhờ chuyên gia viết câu trả lời. Ghi lại những gì bằng chứng cho thấy, những gì cần kiểm tra và câu trả lời được chấp thuận.
- Loại bỏ bất cứ thông tin nào xác định bệnh nhân hoặc cá nhân. Hãy tuân thủ các quy tắc dữ liệu của dịch vụ trước khi đưa một trường hợp vào giai đoạn huấn luyện.
- Loại bỏ những trường hợp mà nhân viên đã thuộc lòng. Một trường hợp được xem xét hai lần sẽ kiểm tra trí nhớ, chứ không phải khả năng phán đoán.
Hãy ghi chú lại những trường hợp mà nhân viên thường mắc lỗi nhất. Đó là những trường hợp cần thảo luận trực tiếp, và chúng có thể cho thấy quy trình nào chưa rõ ràng cũng như việc đào tạo còn thiếu sót ở đâu.
4. Đánh giá năng lực và lập kế hoạch chuyển giao
Sử dụng khả năng nhận diện lỗi và lý do đằng sau việc leo thang vấn đề trong một trường hợp mới. Chấm điểm mỗi tiêu chí từ 0 đến 2:
| Tiêu chí | 0: vắng mặt hoặc không được hỗ trợ | 1: một phần, có thiếu sót | 2: Hoàn chỉnh và có căn cứ |
|---|---|---|---|
| Thực thi nhiệm vụ | Chấp nhận hay từ chối chỉ dựa trên lá cờ. | Nhận diện xung đột nhưng không hành động theo đó. | Kiểm tra kết quả so với bằng chứng, chọn câu trả lời được chấp thuận và ghi lại. |
| lý luận | Không đưa ra lý do. | Đưa ra lý do mà không nêu rõ sự không chắc chắn. | Giải thích các phương án thay thế, những hạn chế và sự không chắc chắn. |
| Ranh giới | Hành động không đúng quy trình. | Tình hình leo thang mà không nêu rõ lý do. | Sử dụng quy trình đã được phê duyệt và tìm kiếm sự trợ giúp khi thông tin không đầy đủ. |
Hiệu chỉnh thang điểm: cho hai người chấm điểm cùng một câu trả lời một cách độc lập, so sánh bằng chứng của họ và sửa đổi bất kỳ tiêu chí nào mà họ không đồng ý. Bảng tiêu chí này chỉ là điểm khởi đầu được đề xuất, không phải là tiêu chuẩn sẵn sàng đã được xác nhận. Xác định riêng các lỗi nghiêm trọng, ví dụ như công bố kết quả mà quy trình yêu cầu phải giữ lại. Điểm tổng thể không bao giờ được che giấu một lỗi nghiêm trọng. Để biết các tiêu chí về lập luận, hãy xem hướng dẫn của chúng tôi về... Đánh giá khả năng phán đoán và giải quyết vấn đề trong quá trình đào tạo.
Thêm bước theo dõi tại nơi làm việc: đánh giá có giám sát các trường hợp ghi đè và leo thang thực tế sau vài tuần. So sánh các trường hợp cơ sở và các trường hợp theo dõi chưa từng thấy, xác định đối tượng, mẫu số và thời gian trước khi bắt đầu, và tìm kiếm các thay đổi đồng thời, chẳng hạn như cập nhật phần mềm hoặc cài đặt cờ mới, trước khi đánh giá hiệu quả của khóa đào tạo.
Trong trường hợp phương thức giao hàng tương tác giúp ích
Trong một buổi học trực tiếp, hãy trình bày một trường hợp và yêu cầu mỗi người đưa ra quyết định riêng tư, sau đó hiển thị kết quả trước khi thảo luận về lý do. Hình thức tự học phù hợp với việc kiểm tra kiến thức nền và xem xét lại lý do sau đó. AhaSlides, một nền tảng tương tác toàn diện dành cho các nhóm và lớp học, hỗ trợ học tập tương tác và cả hình thức giảng dạy trực tiếp lẫn tự học. Nó không phải là công cụ chẩn đoán và không chạy hoặc kiểm tra kết quả đầu ra của AI. Hãy kiểm tra cách bạn sẽ thực hiện các bài tập trong quy trình làm việc của riêng mình trước khi dựa vào nó.
Những điều mà huấn luyện không thể khắc phục được
- Một công cụ có kết quả đầu ra khó đọc. Việc đào tạo không thể khắc phục được lỗi màn hình.
- Không có lộ trình leo thang rõ ràng. Nhân viên không thể sử dụng tuyến đường không tồn tại.
- Những trường hợp không ai xem xét. Ví dụ sai sẽ dẫn đến bài học sai.
- Những hạn chế của bằng chứng. Nguồn thông tin trên mô tả một định kiến, chứ không phải kết quả đào tạo cho đội của bạn.
Các câu hỏi thường gặp
Thiên kiến tự động hóa là gì?
Xu hướng làm theo gợi ý tự động ngay cả khi các bằng chứng khác chỉ ra điều ngược lại.
Liệu nhân viên có nên thường xuyên can thiệp vào công cụ này hơn không?
Không phải là mục tiêu. Hãy huấn luyện họ kiểm tra kết quả so với bằng chứng và chấm điểm khả năng lập luận, chứ không phải tỷ lệ ghi đè.
Làm thế nào để kiểm tra xem các chuyên gia đánh giá có đồng ý với nhau hay không?
Hãy để họ tự chấm điểm cùng một câu trả lời, so sánh bằng chứng của họ và điều chỉnh bất kỳ tiêu chí nào mà họ có sự khác biệt.
Ai nên viết các trường hợp nghiên cứu?
Một người hướng dẫn hoặc chuyên gia cao cấp về kỹ thuật xét nghiệm hoặc chẩn đoán hình ảnh, trước khi bất kỳ ai được đào tạo hoặc chấm điểm về chúng.
Điều này có cho biết công cụ đó có chính xác hay không?
Không. Độ chính xác là dành cho quy trình xác thực của bạn.
Bắt đầu từ đâu
Chọn một loại cờ hiệu và thu thập năm trường hợp đã được xem xét, bao gồm hai trường hợp mà cờ hiệu đó là chính xác. Thực hiện một bài tập thực hành mù, so sánh điểm số của hai người đánh giá và điều chỉnh tiêu chí nếu điểm số khác nhau.
Để xem cách một bài tập có thể được thực hiện trực tiếp hoặc theo tốc độ riêng, hãy khám phá AhaSlides.








