ההשקה של MedGemma 1.5 ו-MedASR מבית Google העלתה שוב את השאלה: מה AI רפואי באמת יודע לעשות והאם אפשר להשתמש בו "מהקופסה"? מודלי LLM רגילים מקפיצים דיסקליימר של "פנו לרופא", ואי אפשר להעלות אליהם צילומי CT או MRI (בפורמט DICOM). עושים סדר במפה האמיתית בארבע רמות.
🏥 תוכנה מאושרת מהקופסה
פלטפורמות מסחריות מוכנות עם אישור FDA / CE-mark, שמתחברות ישירות ל-PACS.
🚑 Aidoc & Viz.ai — טריאז' דחוף בבדיקות CT: מזהים שבץ, דימומים, בתירת אבי העורקים ותסחיף ריאתי (PE), מקפיצים התראה למנתח ומעלים את המקרה לראש התור של הרדיולוג.
🫁 Qure.ai & Lunit — סקירה אוטומטית שוטפת של צילומי רנטגן חזה (שחפת, חזה אוויר, קשריות) וממוגרפיה לגילוי מוקדם של סרטן השד.
🔬 Paige.ai — AI קליני להיסטופתולוגיה (זיהוי סרטן הערמונית על גבי סליידים של ביופסיה).
👁 מודלים מולטימודליים פתוחים
כלים למפתחים ב-Hugging Face לעבודה עם תמונות וטקסט רפואי.
🧠 MedGemma 1.5 4B (Google) — ניתוח סדרות חתכים בתלת-ממד של CT/MRI, תמיכה טבעית ב-DICOM והיסטולוגיה על 16GB VRAM; דיוק "מהקופסה" של כ-61%–65%, לייצור (פרודקשן) נדרשת התאמה (LoRA).
📚 LLaVA-Med & Med-Flamingo (Stanford) — מודלים מולטימודליים שאומנו על מאמרי PubMed כדי לענות על שאלות לגבי צילומים רפואיים (VQA).
💬 HuatuoGPT-Vision — מודל מולטימודלי פתוח להדמיות ביו-רפואיות ולניהול דיאלוג רפואי.
🔍 אנקודרים ייעודיים
מודלים לסיווג Zero-shot ויצירת אמבדינגס בלי לאמן מאפס.
🩻 Rad-DINO (Microsoft) — טרנספורמר שממוקד כולו ברדיולוגיה: חיפוש פתולוגיות דומות בארכיון וסגמנטציה של איברים.
🏷 BiomedCLIP / MedCLIP — מסווגים פתולוגיות "מהקופסה": נותנים הסתברויות על בסיס צילום ורשימת אבחנות ללא אימון נוסף.
🧫 Virchow / UNI (Harvard & Paige) — מודלי בסיס (Foundation models) להיסטופתולוגיה, שאומנו מראש על סליידים של ביופסיה ברזולוציית גיגה-פיקסל.
📄 מודלי LLM קליניים לטקסט
מודלי שפה פתוחים שאומנו על מקורות רפואיים.
🏆 OpenBioLLM (מבוסס Llama 3) — גרסאות 8B ו-70B, אומן על PubMed ומבחני USMLE, מוביל במבחני הביצועים (בנצ'מרקים) הרפואיים.
📋 BioMistral & Meditron (EPFL) — מודלי LLM פתוחים על בסיס Mistral ו-Llama, שאומנו על פרוטוקולים והנחיות קליניות של ארגון הבריאות העולמי (WHO).
🎙 אוטומציה של המפגש הרפואי: מקול לתיק הרפואי
מערכות Ambient scribes לתיעוד מובנה של הפגישה בזמן אמת.
🗣 MedASR (Google) — זיהוי דיבור רפואי בקוד פתוח: 60%–80% פחות שגיאות במונחים לטיניים ובשמות תרופות בהשוואה ל-Whisper.
🎧 Nuance DAX Copilot (Microsoft) ו-AWS HealthScribe — שירותי אנטרפרייז: המיקרופון מאזין לשיחה בין הרופא למטופל ומייצר סיכום מוכן ישירות לתיק הרפואי.
💡 מודלים עם יכולות היסק עמוקות
💭 DeepSeek-R1 & OpenAI o1/o3-mini — בזכות ניתוח שלב-אחר-שלב, הם מתמודדים עם אבחנה מבדלת מורכבת וחישובי מינונים בצורה עמוקה בהרבה ממודלים מהשנים הקודמות, ודוחקים בהדרגה את ה-LLM הייעודיים לרפואה.
🧭 מה לבחור לאיזו משימה
🏥 הטמעה בקליניקה או בבית חולים ללא פיתוח → רק ספקים מאושרים (Aidoc, Viz.ai, Qure.ai).
🖥 שירות עצמאי לניתוח CT/MRI/רנטגן → MedGemma 1.5 + פיין-טיונינג (LoRA) או שילוב של Rad-DINO + LLM.
🔎 חיפוש צילומים דומים / סיווג Zero-shot → BiomedCLIP או Rad-DINO.
🎙 תמלול והכתבה רפואית → MedASR (קוד פתוח) או AWS HealthScribe (ממשק API מוכן).
📑 ניתוח טקסט קליני מורכב → DeepSeek-R1 / o3-mini או OpenBioLLM-70B בהתקנה מקומית.
🎯 למי ומה זה נותן: לקליניקות ולמרכזים רפואיים — תוכנה מאושרת מקצה לקצה. לחוקרים ולחברות מדטק — מודלים פתוחים ומוכנים בלי עלויות עתק על אימון מאפס.
🚀 מאיפה מתחילים: אפשר לעקוב אחרי הביצועים של מודלי LLM רפואיים פתוחים ב-Hugging Face Open Medical-LLM Leaderboard.