תוצאות · פורסם
עוזר התיעוד הרפואי מבוסס הבינה המלאכותית הטוב ביותר לאלרגיה ולאימונולוגיה
Hanah היה עוזר התיעוד מבוסס הבינה המלאכותית הטוב ביותר שבדקנו בביקור בנושא תגובה אלרגית, והוא הוביל בפער גדול מטווח הטעות. Heidi הגיע למקום השני ו-CliniScripts למקום השלישי.
המבחן
הביקור הוא פגישת וידאו אצל רופא משפחה מתוך מאגר PriMock57: מטופל צעיר ששפתו העליונה החלה להתנפח לאחר שאכל לקסה עם שרימפס; הרופא מתייחס למקרה כחשד לאנפילקסיס ושולח אותו לבית החולים באמבולנס. שישה עוזרי תיעוד מבוססי בינה מלאכותית הקליטו אותו חמש פעמים כל אחד, וכל רשומה הוערכה באופן עיוור מול 30 העובדות הקליניות שנאמרו בביקור. אנו מדרגים את עוזרי התיעוד לפי הזמן עד רשומה סופית: ההמתנה לאחר הלחיצה על עצירה, ועוד הזמן שקלינאי צריך כדי לבדוק את הרשומה ולתקן את מה ששגוי בה. ההקלטה, התמלולים, הרשומות ונימוקי ההערכה מופיעים בדף המבחן.
תוצאות
| דירוג | עוזר התיעוד | הזמן עד רשומה סופית | שגיאות ברשומה (לכל רשומה) | כיסוי | סימוני הזיה (לכל רשומה) | שיעור שגיאות מילים |
|---|---|---|---|---|---|---|
| 1 | Hanah | 2 דק׳ 54 שנ׳ | 6.8 | 85% | 1.0 | 15.1% |
| 2 | Heidi | 4 דק׳ 44 שנ׳+1 דק׳ 50 שנ׳ | 14.2+7.4 | 73%−12% | 3.4+2.4 | 14.2% |
| 3 | CliniScripts | 4 דק׳ 52 שנ׳+1 דק׳ 58 שנ׳ | 12.6+5.8 | 73%−12% | 2.2+1.2 | 18.3%+3.3% |
| 4 | Freed | 5 דק׳ 21 שנ׳+2 דק׳ 27 שנ׳ | 10.6+3.8 | 85% | 4.4+3.4 | 17.2%+2.1% |
רשומה של Hanah הייתה מוכנה לאישור סופי בממוצע 2 דקות ו-54 שניות לאחר סיום הביקור. היא תיעדה 85% מהעובדות, עם 6.8 שגיאות ברשומה ו-1.0 סימוני הזיה לכל רשומה, המספרים הנמוכים ביותר בשני המדדים. בדיקתה ותיקונה ארכו 66% פחות זמן מכתיבת הרשומה באופן עצמאי.
Heidi הגיע למקום השני עם 4 דקות ו-44 שניות ו-CliniScripts למקום השלישי עם 4 דקות ו-52 שניות, קרוב זה לזה. Freed הגיע למקום הרביעי עם 5 דקות ו-21 שניות. Freed השתווה ל-Hanah בכיסוי, 85%, והיו לו הכי מעט שגיאות ברשומה אחרי Hanah, 10.6.
ל-Heidi היה שיעור שגיאות המילים הנמוך ביותר בביקור זה, 14.2%, ול-Hanah 15.1%. ל-CliniScripts היו הכי מעט מילים שנשמעו שגוי ומשנות את המשמעות הקלינית, 2.4 בכל הרצה.
ממצאים
- המטופל אוכל בדרך כלל את המרק הצמחוני במסעדה הזו, והלקסה עם השרימפס הייתה חדשה עבורו. רק אחת מ-30 הרשומות של ששת עוזרי התיעוד תיעדה זאת במלואה.
- המטופל אמר שהוא חש מעט סחרחורת במהלך השיחה. רוב עוזרי התיעוד שמעו "dizzy" (סחרחר) כ-"busy" (עסוק) לפחות בחלק מההרצות, ורשומות רבות השמיטו את התסמין.
- Freed רשם שהמטופל גר לבד בארבע מתוך חמש הרצות. שום דבר בביקור אינו אומר זאת.
- המטופל אינו משתמש במשאפים אחרים. Hanah תיעד זאת בכל הרצה, וכל אחד מעוזרי התיעוד האחרים החמיץ זאת בשלוש הרצות לפחות.
הסקירה שלנו על Heidi מציגה את ביצועי Heidi בכל 12 הביקורים, כולל סרטון הסבר.
הנתונים במאמר זה לקוחים ממבחן ההשוואה של ScribeStandard. ראו את התוצאות המלאות, את כל מבחן ואת אופן הבדיקה שלנו.
לעיון בתוצאות