חברת הייעוץ המשפטי Legal Nodes הריצה מודל אחד, Claude Opus 4.8, בשלוש סביבות עבודה שונות על אותן משימות משפטיות. המסקנה שלה: את רוב ההבדל בביצועים יצרה המעטפת שסביב המודל, לא המודל עצמו.
מה נבדק
לפי דיווח באתר Artificial Lawyer מ-22 ביוני, המחקר השווה שלוש סביבות זמינות לציבור: Claude Chat הרגיל, Claude Cowork עם תוסף המשפט של Anthropic, ו-MikeOSS, פלטפורמת Legal AI בקוד פתוח. לפי הדיווח, המשימות, כ-40 במספר, נלקחו מתחומי הגנת המידע והחוסן התפעולי הדיגיטלי (DORA, הרגולציה האירופית לחוסן תפעולי במגזר הפיננסי). אלה תחומים ש-Legal Nodes עוסקת בהם בשוטף, וגם הבלוג שלה מוקדש ברובו לרגולציה אירופית כמו GDPR וחוק ה-AI האירופי.
"מעטפת" (Scaffold) היא כל מה שעוטף את המודל בכלי עצמו: הנחיות מערכת, Skills, תכנון המשימה, לולאות אג'נטיות, אחזור מסמכים וקריאה לכלים. המודל זהה, ומה שמשתנה הוא הדרך שבה הכלי מפרק את העבודה ומזין אותו.
מה עלה
הדיווח מציין שמדובר במחקר קטן, ושתוסף המשפט של Claude יצא ממנו טוב למדי. Will Chen, יוצר MikeOSS ועורך דין לשעבר ב-Latham & Watkins, טען לפי הדיווח ש-MikeOSS זול משמעותית להפעלה. הציונים המלאים לכל סביבה לא היו זמינים לנו לבדיקה. כדאי גם לזכור ש-MikeOSS היה חלק מהמחקר, כלומר אחד המשתתפים הוא גם אחד הכלים הנבחנים.
שלוש המעטפות
Claude for Legal הוא מאגר קוד פתוח של Anthropic ברישיון Apache 2.0, עם תוספים לפי תחומי עיסוק (מסחרי, פרטיות, ליטיגציה, ממשל AI ועוד) וכ-90 סוכנים, שמותקן ב-Cowork או ב-Claude Code. לפי ה-README, כל תוצר הוא טיוטה לבדיקת עורך דין, והאחריות המקצועית נשארת אצלו.
Mike פורסם ב-GitHub ברישיון AGPL v3. Chen בנה אותו בתוך כשבועיים וכיוון אותו למשרדים קטנים ובינוניים. הכלי אינו גובה דמי רישיון, אבל המשתמש מחבר מפתח API של ספק מודל (Anthropic, Gemini או OpenAI) ומשלם לו ישירות, או מריץ מודל מקומי דרך Ollama.
המשמעות למי שבוחר כלי
Opus 4.8 עצמו נכנס לשוק בסוף מאי, ו-Harvey הודיעה ב-28 במאי שהוא זמין אצלה ושהוא הגיע ל-10.4% בבנצ'מרק הסוכנים המשפטי שלה, לעומת 7.1% של Opus 4.7. נתונים כאלה נמדדים תמיד בתוך סביבה מסוימת. אם הממצא של Legal Nodes יחזיק גם בבדיקות רחבות יותר, השאלה המעשית למשרד תהיה פחות "איזה מודל" ויותר "באיזה כלי, עם אילו הנחיות וזרימות עבודה", ועדיף לבדוק את זה על משימות של המשרד עצמו.
עוד בנושא
- Mike: עורך דין לשעבר ב-Latham בנה בשבועיים פלטפורמת Legal AI פתוחה וחינמית
- Anthropic מרחיבה את Claude למשפטנים: 23 מחברים, 12 תוספים לפי תחום ועבודה בתוך Office
- Claude Opus 4.8 הושק: אותו מחיר, דגש על כנות ושיא בבנצ'מרק הסוכנים המשפטי
- ״משרד Claude-Native״: עורך הדין זאק שפירו מתאר פרקטיקה עסקאית שלמה על Claude