שיעור 6: מדידה והערכה
מבוא למדידה והערכה
מדידה והערכה אינן רק פעולות טכניות, אלא כלי ניהולי אסטרטגי קריטי. לפי מסמך הסטנדרטיזציה של 'עתודות לישראל', זהו הקריטריון השישי המבטיח את אפקטיביות התוכנית לאורך זמן.
ברוכים הבאים לשיעור השישי. לאחר שבנינו ליווי ורישות, עלינו לוודא שהתוכנית באמת משיגה את יעדיה. מדידה והערכה, כפי שמוסבר בסטנדרטיזציה של עתודות לישראל, היא המצפן הניהולי שלנו לתיקון טעויות ושיפור המחזורים הבאים.
- מדידה ככלי לשיפור מתמיד
- חיבור לסטנדרטים של עתודות לישראל
- מעקב לאורך כל מחזור חיי התוכנית
תיאוריית השינוי והמודל הלוגי
כדי לדעת מה למדוד, עלינו להבין את תיאוריית השינוי (Theory of Change). זהו המודל המקשר בין המשאבים שאנו משקיעים לבין האימפקט המערכתי שאנו שואפים לייצר.
המודל הלוגי מתחיל בתשומות - המשאבים שהשקענו. לאחר מכן מגיעות הפעולות, כמו סמינרים ומיון. התפוקות הן התוצרים הישירים, למשל מספר הבוגרים. התוצאות הן השינוי בטווח הקצר, כמו רכישת ידע. ולבסוף, האימפקט - השינוי המערכתי ארוך הטווח במגזר הציבורי.
- תשומות ופעולות
- תפוקות ותוצאות
- השפעה (Impact) ארוכת טווח
הצלחה מול השפעה
חשוב להבחין בין מדדי הצלחה בטווח הקצר לבין מדדי השפעה בטווח הארוך. תוכנית טובה מודדת את שניהם.
בואו נבחין בין שני סוגי המדדים. מדדי הצלחה בוחנים את 'כאן ועכשיו' - האם המשתתפים מרוצים? האם הם רכשו ידע? לעומתם, מדדי השפעה בוחנים את הבוגרים כעבור שנים - האם הם מקדמים רפורמות? האם הם מאיישים משרות מטרה קריטיות?
- מדדי הצלחה: ביצועים ומשתתפים
- מדדי השפעה: תרומה למערכת ושינוי מדיניות
- מניעת התמקדות יתר בשביעות רצון
תרחיש יישומי: תוכנית 'מקום'
בואו נבחן את מערך המדידה של תוכנית 'מקום' (צוערים לשלטון המקומי) כמודל לתוכנית חדשה.
בתוכנית 'מקום', המדידה מלווה כל שלב. בשלב המיון, שואפים ליחס של אחד לעשרה ובודקים גיוון אוכלוסייה. בהכשרה, בוחנים ידע מקצועי בשלטון המקומי. ובהשמה? עוקבים אחר קליטה ברשויות בדירוג סוציו-אקונומי נמוך.
- מדידת יחסי מיון (1:10)
- בדיקת ייצוגיות ומגוון
- מעקב השמה ברשויות מוחלשות
צעדים מעשיים לבניית מערך מדידה
כדי להקים מערך מדידה לתוכנית החדשה שלכם, פעלו לפי ארבעת הצעדים הבאים:
ראשית, גבשו את המודל הלוגי שלכם. שנית, בחרו כלים: משאלונים ועד מערכות CRM למעקב בוגרים. שלישית, קבעו שגרות - מתי בדיוק אוספים נתונים? ולבסוף, כל סבב חייב להסתיים בדוח אופרטיבי שישפר את המחזור הבא.
- גיבוש מודל לוגי
- בחירת כלי מדידה (שאלונים, 360, CRM)
- קביעת שגרות איסוף נתונים
- הפקת דוח מסקנות אופרטיבי
זיהוי כשלים במדידה
לפניכם תיאור של מערך מדידה. האם תוכלו לזהות את הטעות הנפוצה המסתתרת בו?
בתוכנית עתודה חדשה, המנהלים החליטו למדוד רק את שביעות הרצון של המשתתפים בסוף כל סמינר. מה לדעתכם חסר כאן? הקליקו על התשובה הנכונה. נכון מאוד! שביעות רצון היא חשובה, אך היא לא מעידה על למידה או על שינוי במשרת המטרה. חובה למדוד גם יישום ואימפקט ארוך טווח.
- הימנעות מהתמקדות רק בשביעות רצון
- חשיבות מדידה מוקדמת כבר בשלב האיתור
- הצורך במעקב בוגרים ארוך טווח
תרגיל: הגדרת מדד השפעה
חשבו על תוכנית העתודה שאתם מקימים. נסחו מדד השפעה אחד (טווח ארוך) שהייתם רוצים לבחון כעבור 5 שנים.
עכשיו תורכם. כתבו מדד השפעה אחד לטווח ארוך עבור התוכנית שלכם. זכרו - המדד צריך לבחון שינוי במערכת ולא רק בפרט.
- ניסוח מדד מדיד
- חיבור למשרות מטרה
- מיקוד באימפקט מערכתי
סיכום: מדידה כדרך חיים
מדידה והערכה הן הלב הפועם של השיפור המתמיד. בלי נתונים, אנחנו פועלים בחשיכה.
לסיכום, זכרו: המדידה מתחילה כבר בשלב האיתור וממשיכה שנים לתוך רשת הבוגרים. השתמשו בנתונים כדי לשפר את המחזור הבא ולהבטיח שהתוכנית שלכם באמת יוצרת שינוי במגזר הציבורי. ניפגש בשיעור הבא על כוח אדם לניהול התוכנית.
- מדידה לאורך כל שרשרת הערך
- שימוש בנתונים לקבלת החלטות
- הבטחת הקיימות של עתודות לישראל