Harvey, אחת מפלטפורמות ה-AI המשפטיות הבולטות בשוק, הודיעה שהיא הופכת למערכת מרובת מודלים: לצד מודלי OpenAI שעליהם נבנתה, היא משלבת גם מודלים של Anthropic ושל Google. לפי החברה, המודלים יופעלו דרך ספקי הענן AWS Bedrock ו-Google Vertex, עם אותן התחייבויות אבטחה ופרטיות שחלות על הפלטפורמה היום.
מה משתנה למשתמשים
לפי ההודעה בבלוג של Harvey מ-13 במאי, ברירת המחדל תהיה ניתוב אוטומטי: המערכת תבחר עבור כל משימה את המודל שמתאים לה. מי שרוצה שליטה יקבל בורר מודלים, שבו אפשר לבחור מודל מסוים או להשאיר את הבחירה על "אוטומטי". החברה כתבה שייתכן שתוסיף ספקים נוספים בעתיד. ההודעה הגיעה יום אחרי שגוגל השיקה את AI Futures Fund, ו-Harvey נמנית עם המשתתפות הראשונות בה.
Harvey התחייבה גם לפרסם טבלת דירוג ציבורית של BigLaw Bench, מבחן הביצועים שלה למשימות משפטיות, ולפרסם תוצאות מתהליך הערכה שבו עורכי דין בכירים בוחנים את המודלים מעבר לציון מספרי יחיד.
מה מראים המבחנים של Harvey
את BigLaw Bench הציגה Harvey לראשונה באוגוסט 2024. המשימות במבחן נגזרו מרישומי שעות חיוב של עורכי דין והומרו לזוגות של הנחיה ומסמך, בחלוקה לליטיגציה ולעסקאות. הציון מעניק נקודות על כל רכיב נדרש בתשובה ומפחית נקודות על טעויות כמו הזיות. בתוצאות הראשונות דיווחה Harvey שהמערכת שלה עקפה את מודלי הבסיס המובילים.
בהודעה החדשה החברה מתארת תמונה אחרת. לדבריה, בתוך פחות משנה שבעה מודלים, ושלושה מהם אינם של OpenAI, עברו את ביצועי מערכת Harvey שנבחנה במקור. הגרפים בפוסט משווים בין Gemini 2.5 Pro, o3, GPT-4.1 ו-Claude 3.7 Sonnet. לפי Harvey, ל-Gemini 2.5 Pro יש יתרון בניסוח משפטי, אבל הוא מתקשה בהכנה למשפט ובטיעון בעל פה, משום שהוא מתקשה לנמק לפי כללי ראיות כמו הכלל נגד עדות שמיעה. מבחן של גורם חיצוני, הבנצ'מרק הראשון של Vals, השווה את Harvey ושלושה כלים נוספים לעורכי דין.
הנימוקים של החברה
Harvey מנמקת את המעבר בכמה טענות. מודלי הבסיס השתפרו בהנמקה משפטית בסיסית, ולכן שילוב מודל חדש דורש פחות עבודה והשיפור יכול להתמקד בביצוע משימות, בידע של המשרד ובשיתוף פעולה. למודלים שונים יש חוזקות וחולשות שונות במשימות משפטיות ספציפיות. גם ההעדפות של עורכי הדין שונות זו מזו, ונקבעות יותר ויותר לפי טון, סגנון ומבנה.
נימוק נוסף נוגע לסוכנים. Harvey מציינת שבתהליכים מרובי שלבים אין מקום רב לטעויות: אם כל שלב בתהליך של שלושה שלבים מושלם ב-80%, התוצאה הכוללת היא בערך חצי מהעבודה. "אין עוד מודל אחד שהוא 'הטוב ביותר', אלא מגוון של מודלים מובילים", כתבה החברה.
למה זה חשוב למשרדים
עד עכשיו הפלטפורמה של Harvey נשענה על מודלי OpenAI. המעבר למודלים מרובים מעביר את הדגש מהמודל עצמו אל השכבה שמעליו: הניתוב, זרימות העבודה, הידע של המשרד והממשק. למשרדים שבוחנים ספקים, השאלה הרלוונטית משתנה בהתאם. פחות "על איזה מודל זה רץ", ויותר איך הספק בוחר בין מודלים, איך הוא בודק אותם ומה הוא מפרסם על התוצאות.
עוד בנושא
- גוגל השיקה קרן להשקעה בסטארט-אפים שבונים על המודלים שלה, ו-Harvey ברשימת המשתתפות
- Thomson Reuters בודקת גרסה של CoCounsel על מודל מותאם שנבנה על OpenAI o1-mini
- הבנצ'מרק הראשון של Vals: ארבעה כלי AI משפטיים מול עורכי דין בשבע משימות