תוצאות · פורסם
עוזר התיעוד הרפואי הטוב ביותר לדרמטולוגיה
Hanah היה עוזר התיעוד הרפואי מבוסס הבינה המלאכותית הטוב ביותר שבדקנו בביקור אקזמה. Heidi דורג שני, בתוך מרווח הטעות מבחינת הזמן, ו-Lyrebird דורג שלישי.
המבחן
הביקור הוא פגישת וידאו אצל רופא משפחה מתוך מאגר PriMock57: ארבעה ימים של פריחה אדומה, מגרדת וכואבת על החזה, הידיים והמרפקים הפנימיים, שמנעה מהמטופל לישון בלילה. שישה עוזרי תיעוד הקליטו אותו חמש פעמים כל אחד, וכל רשומה דורגה באופן עיוור מול 39 העובדות הקליניות שנאמרו בביקור. אנו מדרגים את עוזרי התיעוד לפי הזמן עד רשומה סופית, כלומר ההמתנה לאחר לחיצה על עצירה ועוד הזמן שהקלינאי צריך כדי לבדוק את הרשומה ולתקן את מה שגוי. ההקלטה, התמלולים, הרשומות ונימוקי הדירוג מופיעים בדף המבחן.
תוצאות
| דירוג | עוזר התיעוד | הזמן עד רשומה סופית | שגיאות ברשומה, לכל רשומה | כיסוי | סימוני הזיה לכל רשומה | שיעור שגיאות מילים |
|---|---|---|---|---|---|---|
| 1 | Hanah | 2 דק׳ 46 שנ׳ | 4.6 | 93% | 1.0 | 14.3% |
| 2 | Heidi | 3 דק׳ 17 שנ׳+32 שנ׳ | 8.0+3.4 | 84%−9% | 0.4 | 16.9%+2.5% |
| 3 | Lyrebird | 4 דק׳ 02 שנ׳+1 דק׳ 17 שנ׳ | 12.0+7.4 | 86%−7% | 3.8+2.8 | 18.7%+4.4% |
| 4 | Freed | 4 דק׳ 44 שנ׳+1 דק׳ 58 שנ׳ | 6.6+2.0 | 89%−4% | 0.6 | 20.3%+5.9% |
| 5 | CliniScripts | 4 דק׳ 58 שנ׳+2 דק׳ 12 שנ׳ | 12.8+8.2 | 74%−18% | 1.0 | 14.9%+0.6% |
רשומת Hanah הייתה מוכנה לאישור סופי בממוצע 2 דקות ו-46 שניות לאחר סיום הביקור. היא כיסתה 93% מהעובדות, עם 4.6 שגיאות ברשומה ו-1.0 סימוני הזיה לרשומה. בדיקתה ותיקונה ארכו 71% פחות זמן מכתיבת הרשומה בעצמכם.
Heidi עמד על ממוצע של 3 דקות ו-17 שניות. ההרצה המהירה ביותר שלו, 2 דקות ו-41 שניות, הייתה מהירה יותר מההרצה האיטית ביותר של Hanah, 2 דקות ו-59 שניות, ולכן השניים נמצאים בתוך מרווח הטעות מבחינת הזמן. Hanah היה מהיר יותר בממוצע, כיסה חלק גדול יותר מהביקור (93% לעומת 84%) ונרשמו לו פחות שגיאות ברשומה (4.6 לעומת 8.0). ל-Heidi היו הכי מעט סימוני הזיה בביקור הזה, 0.4 לרשומה.
Lyrebird דורג שלישי עם 4 דקות ו-2 שניות, ו-Freed רביעי עם 4 דקות ו-44 שניות. ל-Freed היה המספר השני הנמוך ביותר של שגיאות ברשומה, 6.6.
ל-Hanah היה גם שיעור שגיאות המילים (WER) הנמוך ביותר בביקור הזה, 14.3%, ו-CliniScripts קרוב אליו עם 14.9%.
ממצאים
- הפריחה הופיעה על החזה, הידיים והמרפקים הפנימיים. Lyrebird שמע את "elbows" (מרפקים) כ-"eyebrows" (גבות) בכל חמשת התמלולים.
- המטופל אמר שהפריחה לא הופיעה על הפנים. Hanah תיעד זאת בכל הרצה, Heidi באחת מחמש ו-Lyrebird באף אחת.
- המטופל לא יכול היה לצאת לטיולים רגליים בגלל הפריחה. Hanah ו-Lyrebird תיעדו זאת בכל הרצה, ו-Heidi מעולם לא תיעד זאת במלואו.
- רוב סימוני ההזיה של Hanah במבחן הזה היו ממצאים שליליים שגרתיים, כגון "פעולות מעיים תקינות", לשאלות שהרופא כלל לא שאל.
סקירת Heidi שלנו מתארת כיצד Heidi תפקד בכל 12 הביקורים, כולל סרטון הדרכה.
הנתונים במאמר זה לקוחים ממבחן ההשוואה של ScribeStandard. ראו את התוצאות המלאות, את כל מבחן ואת אופן הבדיקה שלנו.