פלטפורמה רב־ארגונית לניהול מבצעי אבטחה עבור חברת שירותי אבטחה ישראלית. חדרי הבקרה רואים על מפה אחת את כל האתרים, המכשירים, הכוננים וההתראות הפתוחות. הם מטפלים בהתראה בלי לעזוב את המפה, ומגיעים לצוותים בשטח דרך אפליקציה, SMS, שיחה קולית וצ׳אט. הובלתי את הארכיטקטורה ואת עבודת הביצועים והאמינות הקשה בשבעה ריפוזיטורים, לאורך כמעט שלוש שנים.
הלקוח מאבטח יישובים, קמפוסים ואתרים נוספים, הרבה מהם במקביל. ההתראות מגיעות ממצלמות וממערכות ניהול וידאו, הכוננים בתנועה, ואת התושבים והצוותים צריך להשיג בטלפון, ב־SMS ובאפליקציות מסרים. כל אתר עבד עם כלים משלו, ואף מערכת לא הראתה את כל התמונה. מוקדן שמטפל בהתראה צריך לדעת בתוך שניות מי קרוב, מה הסטטוס שלו ומה אומר הנוהל. לרוב זה קורה בעברית, מול עמדה שפתוחה לאורך כל המשמרת.
התרשים רחב מהמסך: החליקו הצידה לצפייה בכולו →
כל בקשה נבדקת מול ההיררכיה ארגון ← אתר ← צוות ומול מודל תפקידים בארבע שכבות. שליחת הודעות וסנכרון מערכות הווידאו רצים ב־workers נפרדים, כך שספק איטי לא מעכב אף פעם לחיצה של מוקדן.
רשימת ההתראות החיה היא המסך הנקרא ביותר. במקום JOIN לשש טבלאות בכל בקשה, טבלה מנורמלת־לאחור מחזיקה רק התראות פתוחות ונכתבת באותה טרנזקציה של ההתראה. המחיר: לשמור על שני עותקים עקביים. היינו צריכים לסגור שני פערים עד שזה החזיק בכל התרחישים.
מסכי רשימה ומפה קוראים ל־endpoints רזים (10 מתוך 35 שדות אתר). פאנל התראה או אירוע טוען קודם רשומה רזה, ואת החלקים הכבדים רק כשפותחים אותם. יש יותר endpoints לתחזק, אבל כל טעינה ראשונה קלה.
שליחת SMS, שיחות קוליות ו־push לאתר שלם עברה לתור משימות RabbitMQ ול־worker נפרד. ה־API עונה מיד, והספקים יכולים להיות איטיים או לקבל ניסיון חוזר בלי לחסום את המוקדן. המחיר: עוד שירות לפרוס ולנטר.
למשתמש יכולים להיות טלפון, לשונית ווב ועמדת חדר בקרה. השרת קובע מי מהם פעיל, והלקוחות מטפלים בשלושה מצבים: פעיל, הועבר (הודעה בתוך האפליקציה) ומנותק. סשן נסגר רק על 401 או 403 אמיתיים, אף פעם לא על שגיאת רשת.
בכל ריפוזיטורי יש חוקי פרויקט, memory bank ו־skills לתבניות שלו: controllers, שכבת אחסון, קריאות API ב־Redux והרשאות. שינויים גדולים מתחילים ממפרט כתוב; באפליקציית הכוננים נסגרו 57 כאלה. ה־code review התקצר, ואנשים חדשים בצוות הגיעו לתפוקה מהר יותר. המחיר: לשמור את החוקים מעודכנים.
רוב השיפורים המדידים הגיעו מבעיות שצצו רק עם אתרים אמיתיים, נפח התראות אמיתי וטלפונים אמיתיים. מבחר:
ככל שהלקוחות גדלו, רשימות מסוננות ושורות שנמחקו במחיקה רכה נסרקו בכל בקשה.
הוספתי אינדקס לכל foreign key ולכל דגל מחיקה רכה, והמשכנו להוסיף אינדקסים מכסים לסינונים החמים (327 בסך הכול). job לילי מרענן עכשיו סטטיסטיקות במסד הראשי ובמסד הביקורת.
כל ריצת סנכרון משכה מכשירים והתראות לכל אתר, ואז סגרה התראות ישנות שורה אחרי שורה.
upsert בכמויות, ו־stored procedure אחת שסוגרת את כל ההתראות הישנות ומנקה את ה־cache בקריאה אחת. ה־worker נועל אתר אחד בכל פעם ומריץ במקביל מספר אתרים שאפשר להגדיר.
חלק מה־endpoints של רשימות עשו paging לפני המיון, ולכן המשתמשים קיבלו פרוסה שרירותית של הנתונים שרק נראתה ממוינת.
המיון עבר לפני ה־paging בתבנית הרשימות המשותפת, עם עוד שדות מיון ותיעוד, והתבנית הפכה ל־skill בריפו כדי ש־endpoints חדשים יעבדו לפיה.
שליחה לאתר שלם הריצה את ה־SMS, השיחות הקוליות וה־push בתוך בקשת ה־API.
שלושתם עוברים היום דרך תור המשימות ו־worker הודעות ייעודי.
היא טענה לכל שורה אתר, חדר בקרה, מכשיר, סוג, מצב כוננות ויוצר, בכל רענון.
הוספתי טבלת cache של התראות פתוחות בלבד, שנקראת בלי JOINים. מצאתי ותיקנתי שני פערי עקביות: נתיב עדכון אחד דילג על ה־cache, ושדה חדר הבקרה אף פעם לא התמלא.
שירות המיקום הנייטיב ברקע נכנס ל־deadlock על 401, שלח כפילויות ונעצר כשהאפליקציה נסגרה.
לשירותי המיקום הנייטיב ב־iOS וב־Android יש עכשיו אחסון טוקנים ותור שליחה משלהם. התור מתרוקן כשהאפליקציה נפתחת, ויש נתיב רענון אחד.
שכבת הרענון התייחסה לכשל DNS כמו לטוקן שנדחה, והכוננים נשלחו חזרה לכניסה עם OTP.
כשלים מסווגים היום במקום שבו הם קורים. הרענון מבצע 3 ניסיונות עם המתנה של 400 ואז 800 מילישניות, ורק 401 או 403 אמיתיים סוגרים את הסשן.
פתיחת פאנל התראה או אירוע הביאה הכול בבת אחת, ובדיקות ההרשאה עשו חיפוש לינארי במערכי הקונפיגורציה בכל שורה בטבלה.
הפאנל מביא קודם רשומה רזה וטוען את החלקים שלו בעצלות. חיפושים חמים עוברים דרך אינדקס id ← ישות עם cache לפי reference. מסכי המפה מפוצלים ל־chunks נפרדים.
טבלה אחת, בלי JOINים, רק התראות פתוחות
10 שדות לכל אתר; קריאה אחת לעד 1,000 אתרים
קריאה אחת ל־stored procedure בכל ריצה, אתרים במקביל
נכנסים לתור של worker; ה־API חוזר תוך כ־0.3 שניות
3 ניסיונות עם המתנה; הסשן נשמר ומוצג באנר אופליין
נשמרות מקומית (מיקום: עד 500 נקודות, תוקף 4 שעות) ונשלחות בבת אחת כשהקליטה חוזרת
push של תגית גרסה ← אימג׳ Docker ל־registry (4 שירותים), כ־10 דקות
מספרים שמסומנים ב״כ־" או ב־≈ הם הערכות. כל השאר נספרו מהקוד ומהיסטוריית הקומיטים.
שיחת אבחון חינם · 30 דקות · ללא התחייבות
כתבו בכמה שורות: איזה תהליך או מערכת, מה כואב היום (זמן, טעויות, עלויות או פיילוט AI שנתקע) ומי עובד עם זה. אחרי שיחה קצרה מקבלים תוך כ־3 ימים תוכנית כתובה והצעת מחיר סגורה.
נפתח מייל מוכן מראש · מענה תוך יום עסקים
ה־AI קורא. הקוד סופר.
כל הפרויקטים