결과 · 게시
비뇨의학과 분야 최고의 AI 스크라이브
Hanah는 배뇨 증상 진료에서 저희가 테스트한 AI 스크라이브 중 가장 우수했습니다. Lyrebird와 Heidi는 서로 근소한 차이로 2위와 3위를 차지했습니다.
테스트
이 진료는 PriMock57 세트에 포함된 일반의(GP) 화상 진료입니다. 항생제 알레르기가 있는 환자가 6일 동안 배뇨통, 악취 나는 소변, 혈뇨, 하복부 중앙 통증을 겪고 있습니다. 6개의 AI 스크라이브가 이 진료를 각각 5회씩 녹음했고, 모든 기록은 진료 중 언급된 42개의 임상 사실을 기준으로 블라인드 방식으로 채점되었습니다. 스크라이브 순위는 기록 확정까지 걸린 시간으로 매깁니다. 이는 중지 버튼을 누른 뒤의 대기 시간에 임상의가 기록을 검토하고 잘못된 부분을 수정하는 데 필요한 시간을 더한 값입니다. 녹음, 녹취록, 기록, 채점 근거는 테스트 페이지에서 확인할 수 있습니다.
결과
| 순위 | 스크라이브 | 기록 확정까지 걸린 시간 | 기록당 기록 오류 | 포괄률 | 기록당 환각 플래그 | 단어 오류율 |
|---|---|---|---|---|---|---|
| 1 | Hanah | 2분 25초 | 5.0 | 93% | 1.2 | 8.8% |
| 2 | Lyrebird | 3분 34초+1분 09초 | 10.4+5.4 | 88%−5% | 3.2+2.0 | 10.6%+1.8% |
| 3 | Heidi | 3분 39초+1분 14초 | 11.4+6.4 | 78%−16% | 0.8 | 10.4%+1.6% |
| 4 | CliniScripts | 4분 17초+1분 52초 | 12.2+7.2 | 75%−18% | 0.6 | 8.8% |
Hanah 기록은 진료가 끝난 뒤 평균 2분 25초 만에 확정할 수 있는 상태가 되었습니다. 사실의 93%를 포착했으며, 기록당 기록 오류는 5.0건이었습니다. 기록을 검토하고 수정하는 데 걸린 시간은 기록을 직접 작성하는 것보다 74% 짧았습니다.
Lyrebird는 평균 3분 34초, Heidi는 3분 39초였습니다. Heidi의 가장 빠른 회차(2분 52초)가 Hanah의 가장 느린 회차(2분 57초)보다 빨랐으므로, Heidi는 시간 면에서 오차 범위 이내에 있습니다. 평균적으로는 Hanah가 더 빨랐고, 기록 오류는 두 스크라이브 각각의 절반에도 미치지 않았습니다(Hanah 5.0건, Lyrebird 10.4건, Heidi 11.4건). 포괄률은 Lyrebird가 88%로 두 번째로 높았습니다.
이 진료에서 단어 오류율은 Hanah가 8.8%로 CliniScripts와 함께 가장 낮았습니다. Hanah의 녹취록에는 어느 회차에서도 임상적 의미를 바꾸는 오인식 단어가 없었습니다.
주요 발견
- 의사는 이 감염은 소변 검사 없이도 치료할 수 있다고 말했습니다. 6개 스크라이브가 작성한 30건의 기록 중 이를 기록한 것은 한 건도 없었습니다.
- 환자는 메베베린(mebeverine)을 복용합니다. 다른 모든 스크라이브는 최소 한 회차에서 이 약 이름을 잘못 들었고, 그중 한 스크라이브는 이를 "heparin"으로 듣고 항응고제인 헤파린을 모든 기록의 복용 약물 목록에 올렸습니다.
- 처방전은 환자가 지정한 약국으로 전송되었으며, 가능한 한 빨리 복용을 시작하도록 했습니다. Hanah는 모든 회차에서 이를 온전히 기록했고, Heidi는 모든 회차에서 일부만 기록했습니다.
Heidi 리뷰에서는 12건의 진료 전체에서 Heidi가 보인 결과를 영상 해설과 함께 다룹니다.
이 아티클의 수치는 ScribeStandard 벤치마크에서 가져왔습니다. 전체 결과, 테스트별 결과, 평가 방법을 참고하십시오.