בינה מלאכותית עברה בהצלחה מבחן הלכה רבני
תורגם ותומצת מתוך NEWSru Israel על ידי baba
קבוצת חוקרים בחנה מודלים של בינה מלאכותית במבחן הלכה של הרבנות הראשית, במסגרת פרויקט "HalachaBench". המודל Claude Fable 5.1 השיג את הציון הגבוה ביותר, כ-80 מתוך 100, במבחן שכלל 60 שאלות בנושאים הלכתיים מגוונים. החוקרים ציינו כי למרות שהמודלים מפגינים ידע הלכתי נרחב, הם אינם יכולים לקבל החלטות הלכתיות באופן עצמאי, אך עשויים לשמש ככלי עזר בעתיד.
הידיעה ב-6 שורות · תקציר של baba
- מודל בינה מלאכותית Claude Fable 5.1 קיבל ציון של כ-80% במבחן הלכה של הרבנות הראשית.
- הפרויקט "HalachaBench" בחן 60 שאלות הלכתיות מורכבות ללא גישה לאינטרנט.
- מודלים נוספים כמו GPT-6 Astra ו-GPT-6.1 Sol השתתפו במבחן.
- הערכת התשובות נעשתה באמצעות בינה מלאכותית בשל היעדר מפתח תשובות רשמי.
- החוקרים הדגישו כי הבינה המלאכותית אינה יכולה לקבל החלטות הלכתיות עצמאיות.
- המודלים עשויים להפוך בעתיד לכלי עזר שימושי עבור אנשי הלכה.
קבוצת חוקרים בחנה את יכולתן של מודלים מתקדמים של בינה מלאכותית לענות על שאלות הלכתיות מורכבות, במסגרת פרויקט "HalachaBench". הפרויקט כלל 60 שאלות שנלקחו ממבחני הרבנות הראשית בנושאים כמו דיני טהרת המשפחה, חופה וקידושין, תפילות, ברכות ומצוות התלויות בארץ. המודלים נבחנו ללא גישה לאינטרנט או לספרי עזר, בדומה למבחן "סגור ספרים".
המודל Claude Fable 5.1 הציג את התוצאה הטובה ביותר, עם ציון של כ-80 מתוך 100. אחריו הגיעו GPT-6 Astra ו-GPT-6.1 Sol. חשוב לציין כי למבחני הרבנות הראשית אין מפתח תשובות רשמי, ולכן הערכת התשובות נעשתה גם היא באמצעות אלגוריתמים של בינה מלאכותית. בנוסף, המודל שזכה במקום הראשון היה שותף לקביעת קריטריוני ההערכה, מה שעשוי להשפיע על אובייקטיביות התוצאות.
החוקרים הדגישו כי הניסוי אינו מוכיח כי בינה מלאכותית יכולה לקבל החלטות הלכתיות באופן עצמאי. עם זאת, הוא מראה כי למודלים לשוניים קיימים ידע משמעותי בדיני ישראל, וכי הם עשויים להפוך בעתיד לכלי עזר שימושי עבור רבנים, מורים ותלמידים.