פתחו את הדוח וקראו את ההיקף לפני המספרים. איזו תקופה, אילו מוצרים, אילו מנגנונים משפטיים ואילו קטגוריות של בקשות — הכול מצוין אי שם סמוך להתחלה. מספר כולל בכותרת בלי אותם סייגים הוא חפץ שיווקי עם ציטוט. ארבעה שלבים הופכים אותו שוב לראיה.

החלק המעניין בדוח שקיפות הוא בדרך כלל ההגדרות, לא הטבלה.

קראו קודם את שורת ההיקף

בדקו את התקופה, את המוצרים המכוסים ואת הקטגוריות המשפטיות. דוח עשוי לכסות את שירות הצרכנים ולא את המוצר העסקי, או להפך. גם תחומי שיפוט חשובים, כי בקשה לפי מנגנון משפטי אחד אינה זהה לאחרת. אם ההיקף מעורפל, אי אפשר להשוות את הסכומים לסכומים של שום מפעיל אחר, והגרף בפוסט בלוג שמשווה ביניהם הוא קישוט.

היעדר אירועים מדווחים אינו ראיה להיעדר תיעוד. הוא אומר שלא דווח דבר בקטגוריות שצוינו, וזו טענה צרה בהרבה.

היחידות אינן ניתנות להחלפה

בקשה, חשבון, תקרית ורשומה שנחשפה הם ארבע יחידות שונות. דוח עשוי לספור בקשות ובמקביל לחשוף חשבונות, או לאחד אירועים מטעמי פרטיות. השוואה בין נתון לכל בקשה אצל מפעיל אחד לנתון לכל חשבון אצל אחר יוצרת גרף שאינו אומר דבר. שמרו על היחידה צמודה למספר, בהערות ובמסקנות.

אם המתודולוגיה לא ברורה, שמרו על אי-הוודאות במקום לפתור אותה בהנחה. "לא ניתן להשוות" כנה שימושי יותר מטבלה מסודרת שנבנתה על השערה.

מי באמת מפרסם

זהו את הארגון שמפרסם את המסמך ואת המערכות שהוא מפעיל. פרויקט לקוח, אתר מדריך ונקודת קצה שמתארחת באופן עצמאי יכולים להיות שלושה צדדים שונים, ודוח של אחד אינו אומר דבר על האחרים. שותפי תשתית ושרתי מתנדבים נמצאים לעתים קרובות מחוץ להיקף לגמרי. זו עובדה על המערכת האקולוגית ולא ביקורת על הדוח.

גם המשכיות שווה בדיקה. ארכיון ברור, הגדרות יציבות והסברים לשינויים מהותיים הם מה שמאפשר קריאה משנה לשנה. פרסום בודד בלי היסטוריה קשה יותר לפרשנות מפרסום צנוע עם תיעוד.

הציבו אותו לצד הביקורת, לא במקומה

ביקורת טכנית בוחנת רכיבים ובקרות, עם הצהרת היקף משל עצמה ועם גבולות משלה. היא תמונת מצב של תקופה, לא תכונה קבועה של המפעיל. היא יכולה לספר על התצורה והתהליכים של מערכת; היא לא יכולה לומר כמה בקשות הגיעו. השתמשו בשניהם, וקראו את ההיקף של כל אחד במקום להניח שהשני מכסה את הפער. ביקורת שמחריגה את התשתית הרלוונטית אינה עונה דבר עליה.

השאלה המעשית היא אם המפעיל נותן תשובות קונקרטיות לדאגה האמיתית שלכם. אם הדאגה היא שימור, חפשו הצהרת שימור ואת הראיות התשתיתיות שמאחוריה; טבלת ספירת בקשות אינה זה.

קראו את ההיקף, את היחידות, את המפרסם ואת גבולות הביקורת. אחר כך החליטו אם המסמך אומר משהו על השאלה שלכם.

מאמרים קשורים