איך בודקים תוצר מחקר של בוט לפני שמסתמכים עליו
דוח מסודר, טבלה נקייה, וסוגריים עם מקור לכל שורה. הכול נראה אמין, ובדיוק כאן מתחיל הסיכון: תוצר מסודר נראה נכון גם כשהוא לא. מי שמסתמך על ממצא של בוט בלי לבדוק אותו מקבל החלטה על בסיס מראה, ולא על בסיס מידע.
איך בודקים תוצר מחקר של בוט?
בודקים תוצר של בוט מחקר בשלוש שכבות: בדיקה מהירה של 30 שניות לכל תוצר, דגימה של כמה פריטים מול המקור המקורי, והצלבה עם מקור שני לכל ממצא שמשפיע על החלטה. ככל שהסיכון גבוה יותר, כך העומק גדל. תוצר שלא נבדק נחשב טיוטה, ולא ממצא.
בדיקת תוצר ב־30 שניות היא שיעור בפרק "להריץ בבטחה" בקורס גרוק בוט, והשיטה מותאמת כאן למחקר.
מה בודקים ב־30 שניות?
דוגמה: מנהלת אסטרטגיה מקבלת טבלה של חבילות ומחירים של מתחרה. היא פותחת שני קישורים, מוודאת שהמחיר שמופיע בטבלה זהה למה שבאתר ושהתאריך עדכני, ורק אז מעבירה את הטבלה הלאה. זה לוקח פחות מדקה, ומשנה את רמת האמון בכל המסמך.
שלוש מהבדיקות האלה אפשר לבצע בלי לצאת מהמסמך, והשאר דורשות פתיחה של קישור או שניים.
תנו לבוט לאסוף, ואתם תחליטו
52 שיעורי וידאו, 157 דקות, תשלום חד פעמי של 297 ש״ח ועוד מע״מ וגישה לכל החיים. שלושת השיעורים הראשונים פתוחים לכולם.
כמה לבדוק, לפי רמת סיכון?
| מה ההחלטה | רמת בדיקה | מה נעשה |
|---|---|---|
| עדכון פנימי לצוות | בסיסית | 30 שניות, קישורים ותאריכים |
| מצגת להנהלה | בינונית | דגימה של פריטים מול המקור |
| החלטה על תמחור או מוצר | גבוהה | הצלבה עם מקור שני, ואישור של אדם בכיר |
| מסמך שיוצא מחוץ לארגון | גבוהה מאוד | בדיקה מלאה, וייעוץ משפטי אם צריך |
הטבלה אינה חוק, אלא דרך לחשוב: ככל שהמחיר של טעות גבוה יותר, כך מוסיפים שכבות. זו גם הסיבה לשער האישור שמתואר בקורס, שעומד לפני כל פעולה שאי אפשר לבטל.
איך מעודדים את הבוט להיות כן?
רוב הבעיות נפתרות בכתב המינוי. כותבים לבוט שמותר, ואף רצוי, לכתוב "לא נמצא", שחובה לצרף מקור, ושחייבים להבדיל בין עובדה, הערכה והשערה. מבקשים ממנו לפתוח כל תוצר בסעיף "מה לא הצלחתי לבדוק". מקבלים תוצר פחות מרשים ויותר אמין, וזה בדיוק מה שחשוב.
- עובדה: נאמרה במקור, עם קישור.
- הערכה: הסקה סבירה, מסומנת.
- השערה: אפשרות שדורשת בדיקה, ולכן לא נכנסת למסקנות.
כשהבריף כתוב היטב, כפי שמוסבר במדריך על כתיבת בריף, הבדיקה קלה בהרבה.
מה עושים כשמוצאים טעות?
לא רק מתקנים את השורה. שואלים מאיפה הטעות הגיעה: מקור שגוי, הוראה עמומה או חוסר בקובץ הידע. מתקנים שם, ומריצים בדיקה על אותה משימה. ביומן הריצות אפשר לראות מה הבוט עשה בדיוק, והמעקב הזה הופך כל טעות לשיפור. מי שרוצה ללמוד את התהליך המלא ימצא אותו בקורס וידאו גרוק בוט, ואת ההמשך הטבעי, הכנת סיכום שבועי, במדריך הבא.
שאלות נפוצות
האם בוט יכול להמציא מקור?
כן, זה סיכון ידוע של כלי AI. לכן חובה לפתוח קישור אחד לפחות לכל תוצר, ולבקש מהבוט לסמן "לא נמצא" כשאין מקור.
האם צריך לבדוק כל שורה?
לא תמיד. בסיכון נמוך מספיקה דגימה, ובסיכון גבוה מצליבים כל ממצא שמשפיע על החלטה.
מי צריך לבדוק, האנליסט או המנהל?
מי שמכיר את התחום וקורא את המקורות. את האישור הסופי נותן מי שמקבל את ההחלטה.
האם אפשר לתת לבוט לבדוק את עצמו?
אפשר לבקש ממנו בדיקה שנייה, והיא יכולה לתפוס טעויות, אבל היא לא מחליפה בדיקה אנושית של פריטים חשובים.
שלושה שיעורים בחינם, בלי הרשמה
52 שיעורי וידאו, 157 דקות, תשלום חד פעמי של 297 ש״ח ועוד מע״מ וגישה לכל החיים. שלושת השיעורים הראשונים פתוחים לכולם.