תוצאות · פורסם
עוזר התיעוד הרפואי הטוב ביותר לגסטרואנטרולוגיה
Hanah היה עוזר התיעוד הרפואי מבוסס הבינה המלאכותית הטוב ביותר שבדקנו בביקור של דלקת קיבה ומעיים (גסטרואנטריטיס). Heidi דורג שני, קרוב מספיק כדי שהפער יהיה בתוך מרווח הטעות, ו-Lyrebird דורג שלישי.
המבחן
הביקור הוא פגישת וידאו אצל רופא משפחה מתוך מאגר PriMock57: שלושה ימים של שלשול מימי עם כאבי בטן תחתונה עוויתיים, לאחר מחלה בקרב בני הבית. שישה עוזרי תיעוד הקליטו אותו חמש פעמים כל אחד, וכל רשומה דורגה באופן עיוור מול 45 העובדות הקליניות שנאמרו בביקור. אנו מדרגים את עוזרי התיעוד לפי הזמן עד רשומה סופית, כלומר ההמתנה לאחר לחיצה על עצירה ועוד הזמן שהקלינאי צריך כדי לבדוק את הרשומה ולתקן את מה שגוי. ההקלטה, התמלולים, הרשומות ונימוקי הדירוג מופיעים בדף המבחן.
תוצאות
| דירוג | עוזר התיעוד | הזמן עד רשומה סופית | שגיאות ברשומה, לכל רשומה | כיסוי | סימוני הזיה לכל רשומה | שיעור שגיאות מילים |
|---|---|---|---|---|---|---|
| 1 | Hanah | 2 דק׳ 16 שנ׳ | 2.8 | 96% | 0.2 | 15.2% |
| 2 | Heidi | 3 דק׳ 19 שנ׳+1 דק׳ 03 שנ׳ | 9.6+6.8 | 83%−12% | 1.6+1.4 | 16.0%+0.8% |
| 3 | Lyrebird | 3 דק׳ 51 שנ׳+1 דק׳ 36 שנ׳ | 11.6+8.8 | 83%−12% | 3.4+3.2 | 20.0%+4.9% |
| 4 | Freed | 4 דק׳ 17 שנ׳+2 דק׳ 01 שנ׳ | 6.0+3.2 | 91%−5% | 0.8+0.6 | 21.4%+6.3% |
רשומת Hanah הייתה מוכנה לאישור סופי בממוצע 2 דקות ו-16 שניות לאחר סיום הביקור. היא כיסתה 96% מהעובדות, עם 2.8 שגיאות ברשומה ו-0.2 סימוני הזיה לרשומה. בדיקתה ותיקונה ארכו 77% פחות זמן מכתיבת הרשומה בעצמכם.
Heidi עמד על ממוצע של 3 דקות ו-19 שניות. ההרצה המהירה ביותר שלו, 2 דקות ו-9 שניות, הקדימה את ההרצה האיטית ביותר של Hanah, 2 דקות ו-30 שניות, ולכן השניים נמצאים בתוך מרווח הטעות מבחינת הזמן. Hanah היה מהיר יותר בממוצע, ונרשמו לו פחות משליש מהשגיאות ברשומה של Heidi, 2.8 לעומת 9.6.
Lyrebird דורג שלישי עם 3 דקות ו-51 שניות, ו-Freed רביעי עם 4 דקות ו-17 שניות. ל-Freed היה המספר השני הנמוך ביותר של שגיאות ברשומה, 6.0, והכיסוי השני הגבוה ביותר, 91%, אך נדרש לו זמן רב יותר להפיק את הרשומה.
ל-Hanah היה גם שיעור שגיאות המילים (WER) הנמוך ביותר בביקור הזה, 15.2%, ול-Heidi 16.0%.
ממצאים
- הרופא המליץ על שקיקי Dioralyte להחזרת נוזלים. Hanah איית את Dioralyte נכון בכל חמשת התמלולים, וכל עוזר תיעוד אחר טעה בו בכל הרצה.
- המטופל אמר שהשלשול "makes me feel weak" (גורם לי להרגיש חלש). Lyrebird תמלל זאת כ-"fainted for a week" (התעלף במשך שבוע) בכל חמש ההרצות, אם כי השגיאה לא הגיעה לרשומות שלו.
- הרופא המליץ על paracetamol, "שתי טבליות עד ארבע פעמים ביום", בלי לציין חוזק. Heidi ו-Lyrebird כתבו שניהם מינון במיליגרמים בחלק מהרשומות שלהם, וזה נספר כסימון הזיה.
- הרופא אמר שאין צורך באנטיביוטיקה. Hanah ו-Lyrebird תיעדו זאת בארבע מחמש הרצות, ו-Heidi החמיץ זאת בכל החמש.
סקירת Heidi שלנו מתארת כיצד Heidi תפקד בכל 12 הביקורים, כולל סרטון הדרכה.
הנתונים במאמר זה לקוחים ממבחן ההשוואה של ScribeStandard. ראו את התוצאות המלאות, את כל מבחן ואת אופן הבדיקה שלנו.
לעיון בתוצאות