מפילוט AI לייצור — רשימת 18 הבדיקות לפני העלייה לאוויר

התשובה הקצרה

פילוט הופך לייצור כשנסגרים שישה שערים: בעלות, הערכת איכות, דאטה והרשאות, טיפול בכשלים, עלות והטמעה. מאחוריהם שמונה־עשרה בדיקות קונקרטיות. אם יותר משתיים פתוחות — יש לכם דמו, לא מערכת, וכדאי לסגור אותן לפני שמרחיבים שימוש.

---

שער 1 — בעלות

1. בעל בית עסקי בשם, שנמדד על התוצאה ולא על ההשקה.
2. מתחזק טכני בשם בתוך הארגון, שיכול לשנות פרומפטים, אחזור ואינטגרציות בלי להתקשר לספק.
3. יומן החלטות מתועד — למה המודל הזה, הארכיטקטורה הזאת, הסקופ הזה. מי שיירש את זה צריך את ההיגיון, לא רק את הקוד.

שער 2 — הערכת איכות

4. סט מקרים אמיתיים, כולל המכוערים, עם תוצאה מצופה. עשרים דוגמאות טובות שוות יותר מתחושה ש"זה בדרך כלל עובד".
5. רף איכות במספרים שנקבע לפני ההשקה, בהתאם למחיר של טעות.
6. בדיקת רגרסיה שאפשר להריץ בכל שינוי של פרומפט, גרסת מודל או מקור דאטה — כי כל השלושה ישתנו.
7. שלב בקרה אנושי בכל מקום שטעות בו יקרה, עם כלל מפורש מה עובר בקרה.

שער 3 — דאטה והרשאות

8. הרשאות לפי משתמש נשמרות. אם העוזר יכול לאחזר מסמכים שהמשתמש לא יכול לפתוח — בניתם דליפת מידע עם ממשק נחמד.
9. בסיס חוקי לשימוש בדאטה, מאושר עם מי שאחראי על פרטיות אצלכם.
10. שמירת מידע ולוגים שהוחלטו: מה נשמר, לכמה זמן, ומי יכול לקרוא.
11. מקור אמת לאחזור עם מכניזם רענון מתועד, כדי שהתשובות לא יתיישנו בשקט.

שער 4 — טיפול בכשלים

12. התנהגות מוגדרת כשהמודל לא בטוח — להסלים, לשאול או לסרב. שתיקה וניחוש בטוח הם שניהם לא מקובלים.
13. התדרדרות מבוקרת כשה-API למטה או מוגבל, כך שהתהליך עצמו ממשיך לעבוד.
14. עקבות ביקורת של מה נשלח, מה אוחזר ומה הוחזר — הכרחי ברגע שמישהו חולק על פלט.

שער 5 — עלות

15. עלות מדודה למשימה, ותחזית בנפח פי עשרה מהנוכחי.
16. התראה או תקרה על שימוש חריג, עדיף לפי משתמש או לפי תהליך.

שער 6 — הטמעה

17. הכשרה לאנשים שהעבודה שלהם משתנה, בשפת העבודה שלהם ועל מקרים אמיתיים שלהם.
18. מדד שימוש שנבחן שבועית בחודשיים הראשונים, עם ערוץ פידבק שמישהו באמת קורא.

איך משתמשים בצ'קליסט

מריצים אותו כדיון go/no-go עם בעל הבית העסקי והמתחזק הטכני באותו חדר. כל סעיף מסומן פתוח או סגור — בלי חצי נקודה. ואז אחת משלוש החלטות:

• הכול סגור: מרחיבים לקבוצת המשתמשים הבאה.
• אחד או שניים פתוחים: משיקים לקבוצה מוגבלת עם תאריך לסגירה.
• שלושה ומעלה: נשארים בפילוט. הרחבת מערכת בלי בעלות ובלי מדידה היא הדרך שבה תוכניות AI מקבלות שם רע בארגון.

שני הסעיפים שהכי מדלגים עליהם

הרשאות (סעיף 8) והטמעה (סעיף 17). שניהם מרגישים כמו עבודה של מישהו אחר, ושניהם אלה שסוגרים תוכניות — האחד בבדיקת אבטחה, השני באי-שימוש שקט.

איך עוברים את השערים

העברת פילוט לייצור היא בדיוק מה ששלבי הבנייה וההרחבה שלנו קיימים בשבילו: לסגור את השערים האלה עם הצוות שלכם, על הסטאק שלכם, כך שהאנשים שלכם מחזיקים את התוצאה. דברו איתנו: info@braightwave.com.