אנליסטים ברגולטור פיננסי לאומי צריכים לוודא, קרן אחר קרן, שכל קרן השקעות עומדת במגבלות שמסמך המדיניות שלה עצמה קובע. הובלתי את בניית המערכת: Claude קורא את נוסח המדיניות בעברית, כל מגבלה הופכת לכלל מובנה, והכלל נבדק מול דוח האחזקות החודשי של הקרן. המודל מתרגם ניסוח משפטי לפילטרים. כל סכימה וכל השוואה נעשות בקוד.
כל קרן מפרסמת מדיניות השקעה בטקסט חופשי בעברית: רצפה לאג״ח ממשלתיות, תקרה ל”אפיקים אחרים בהתאם להוראות הדין”, סף דירוג, טווח חשיפה למט״ח, איסור מוחלט על מניות. בכל חודש מנהל הקרן מגיש דוח אחזקות, שורה לכל נייר ערך, בין 64 ל־106 שורות לקרן בקבוצת הפיילוט. כדי לבדוק אחד מול השני היה צריך לקרוא את הניסוח המשפטי, להבין על אילו שורות הוא חל ולסכום חשיפות ידנית. ואז לעבור לקרן הבאה.
התרשים רחב מהמסך: החליקו הצידה לצפייה בכולו →
כל ריצה היא job עם סטטוס (התחלה, מעבר מקדים, מעבר ראשי, הושלם), זמן ריצה ולוג צעד־אחר־צעד במסד הנתונים. הטקסט של כל שלב (גולמי, מנוקה, פלט המודל) נכתב ל־S3, כך שאפשר להתחקות אחרי כל תוצאה עד המילים המדויקות שהמודל ראה.
בגרסה הראשונה Claude חילץ את המגבלות, חילץ את החשיפות בפועל והשווה ביניהן. 27 מתוך 72 בדיקות חזרו עם ”לא ניתן לקבוע”, ובשורה אחת 1.6% סומן ”בתוך” מינימום של 10%. היום המודל רק הופך סעיף לפילטר JSON מעל ערכים ידועים (סוגי נכסים, מקומות מסחר, מטבעות, טווח דירוג). קוד C# מפעיל אותו, סוכם חשיפה ומשווה למגבלות. המחיר: הסכמה צריכה לגדול עם כל סוג סעיף חדש (10 ממדים באב־הטיפוס, 12 ב־MVP).
חלק מהסעיפים תלויים בנתונים שאין בדוח האחזקות: מועד פדיון, זיקה מקומית, קבוצת סיכון אשראי. המודל מסמן את הפילטרים האלה, המנוע לא שומר הכרעה, והממשק מציג לא נבדק. המחיר: אחוז כיסוי נמוך יותר, אבל אף פעם לא ”תקין” שגוי.
המעבר הראשון מבודד ומנקה את פרק מדיניות ההשקעה מתוך הדיווח. המעבר השני מחזיר מגבלות מוקלדות: סעיף מקור, סוג (חשיפה, אחזקה, אפשרות אחזקה), מינימום, מקסימום וניסוח. המחיר: שתי קריאות מודל למסמך, בתמורה לקלט קטן ונקי בהרבה למעבר שבאמת קובע.
ההנחיות למודל וששת הפרמטרים שלהם (max tokens, temperature, top-k, top-p, מצב thinking ותקציב thinking) נשמרים במסד הנתונים, שורה לכל סוג prompt. כך המעבר מ־Claude 3.5 ל־3.7 עם extended thinking היה שינוי קונפיגורציה. כדי לתפוס סטיות, בדיקת ייחוס משווה כל חילוץ לסט מאומת: מספר מגבלות, מינימום, מקסימום, סעיף מקור, סוג ומילות מפתח נדרשות.
רוב התכנון נולד מדברים שנכשלו על דיווחים אמיתיים. מבחר:
מסמכי המדיניות הגיעו כ־PDF סרוקים, אז הרצנו OCR בעברית ב־300 dpi וביקשנו מהמודל לחלץ מגבלות, לחלץ חשיפות בפועל ולהשוות. 38% מהבדיקות הסתיימו ב”לא ניתן לקבוע”, וגם ההשוואות עצמן יצאו שגויות.
הוצאנו את כל החישובים מהמודל ובניתי מחדש סביב משימה צרה אחת: סעיף נכנס, פילטר יוצא.
סעיף כמו ”נכסים שאינם אג״ח ממשלתיות ו/או פיקדונות” לא ניתן לניסוח כפילטר יחיד.
הפילטרים הפכו למערך (איחוד), כל פילטר ניתן להיפוך, וגם המערך כולו ניתן להיפוך. המודל בוחר את המבנה, והקוד מחשב את הקבוצה.
החשיפה למניות ולמט״ח מגיעה משורות סיכום בדוח, לא מחיבור שורות ניירות הערך. הסכום יצא שגוי.
הוספתי פילטר ”סוג נכס בודד” שקורא את שורת הסיכום ישירות.
באחזקות מעורבבים דירוגים בסגנון S&P ובסגנון Moody's, ו”A ומעלה” חייב לכלול גם A- ו־A3.
מיפינו את שתי הסקאלות (26 דרגות כל אחת) לאינדקס סידורי אחד שמוחזק בקונפיגורציה. טווחי דירוג משווים אינדקסים, לא מחרוזות.
על 3 קרנות פיילוט ו־28 מגבלות, אב־הטיפוס רץ עם 0 שגיאות. 14 מתוך 21 החשיפות שהרגולטור מדד שוחזרו בסטייה של עד 0.05 נקודות אחוז.
איתרנו את הסיבה לכל פער. רובם דרשו נתוני פדיון, זיקה מקומית או סיכון אשראי שלא קיימים בדוח האחזקות, ובמקרה אחד ערך הייחוס עצמו סומן לבירור. מכאן נולד מסלול הלא נבדק, ורשימת מקורות נתונים חיצוניים לשלב הבא.
בפרודקשן המדיניות היא דיווח HTML, והטקסט יושב בשדה טופס בעל שם, ששמו השתנה בין גרסאות הטופס.
פענוח עם AngleSharp ונפילה בין שני שמות השדה. אם השדה חסר, מוחזר סטטוס מפורש ”אין טקסט מדיניות” ולא ניתוח ריק.
דוחות האחזקות מופרדים בטאבים, בקידוד עברי ישן, עם וריאציות בכותרות בין מנהלי קרנות. בשני סוגי נכסים, עמודה אחת נושאת משמעות אחרת.
שמונה כללי נרמול כותרות רצים לפני המיפוי המוקלד של ה־CSV, ועוד תיקון עמודה לפי סוג נכס. שורות שלא שייכות לקרן מוכרת מסוננות.
במעבר ל־Claude 3.7 עם extended thinking, Bedrock דחה בקשות שהגדירו temperature, top-k או top-p.
הספק שולח פרמטרי דגימה רק כש־thinking כבוי. כשהוא פעיל, נקבעים temperature 1 ותקציב טוקנים, לפי סוג ה־prompt במסד הנתונים.
אלה סעיפים ומספרים סינתטיים שנכתבו לעמוד הזה, בלי נתוני לקוח ובלי קוד לקוח. כל דוגמה מראה מה המודל מחזיר ומה הקוד עושה עם זה.
שיחת אבחון חינם · 30 דקות · ללא התחייבות
כתבו בכמה שורות: איזה תהליך או מערכת, מה כואב היום (זמן, טעויות, עלויות או פיילוט AI שנתקע) ומי עובד עם זה. אחרי שיחה קצרה מקבלים תוך כ־3 ימים תוכנית כתובה והצעת מחיר סגורה.
נפתח מייל מוכן מראש · מענה תוך יום עסקים
ה־AI קורא. הקוד סופר.
כל הפרויקטים