חיזויי-על: מה מתכנני מגפה יכולים ללמוד מהמנבאים הטובים בעולםמומחים טעו בכך בצורה קטסטרופלית, לדברי דומיניק קאמינגס, יועצו הראשי של ראש ממשלת בריטניה בוריס ג'ונסון. קאמינגס טען שהייעוץ המדעי הרשמי של ממשלת בריטניה במארס 2020 לא הבין מאוד את האופן שבו המגפה תפעל, מה שהוביל לעיכוב בנעילה שעלה לאלפי נפשות.

לפי קאמינגס, היו מומחים מסוימים עם פחות ידע במגפות או ברפואה - כמו מדען הנתונים בן וורנר, חוקר הבינה המלאכותית דמיס חסביס מ- DeepMind, והמתמטיקאי טים גאוורס - שנתנו תחזיות מדויקות יותר בשלב זה.

קאמינגס ידוע גם כ- אוהד of חזית על מאת פיליפ טטלוק, ספר על אנשים המנבאים אירועים עתידיים בצורה מהימנה יותר מרובם. כמה חזאי-על זכו לשבחים על התחזיות שלהם לגבי המגיפה, בעוד שאחרים היו גם כן ביקורתית כלפי המומחים תקליט.

אז האם על הממשלות לעשות שימוש רב יותר בחזאי-על במקום להסתמך על מומחים מדעיים? הראיות אינן כל כך ברורות. אבל בהחלט נראה שיש דברים שממשלות יכולות ללמוד מחיזוי-על.

ב מחקר אמריקאי מפורסם בחזאי-על שפורסמו בשנת 2014 הם היו צוות מובחר. רק 2% מהמתמודדים הראשונים ביצעו מספיק טוב בטורניר חיזוי גיאופוליטי כדי לזכות בתואר. משימתם הייתה להקצות הסתברויות לתשובות אפשריות לעשרות שאלות.


גרפיקת מנוי פנימית


החוקרים מספקים כמה דוגמאות להמחשה. מי יהיה נשיא רוסיה בשנת 2012? האם צפון קוריאה תפוצץ נשק גרעיני נוסף בשלושת החודשים הקרובים? כמה פליטים יברחו מסוריה בשנה הבאה?

כמובן, רק בגלל שמישהו עושה טוב שנה אחת לא מוכיח שהוא מיומן יותר מכל אחד אחר. אולי פשוט התמזל מזלם. עלינו לבדוק עד כמה הם הצליחו בשנים הבאות כדי להעריך עד כמה הם "סופר".

באופן מרשים, חזאי העל הללו שמרו על יתרון כאשר הטורניר נמשך שלוש שנים נוספות. למעשה, לאחר ששולבו ל"צוותי חיזוי-על "המכילים רק שחקנים מובילים אחרים, הביצועים שלהם גדלו בפער ניכר. החוקרים מצאו גם שעבודה בצוותים ולקיחת אימונים רלוונטיים שיפרה את הביצועים לחזאים אחרים, בהשוואה לחזאים במצב בקרה.

צוותים ואימונים

בין אם ניקח את קאמינגס לדבריו כי תכנון הפנדמיה בבריטניה סבל מ"בועת חשיבה קבוצתית קלאסית "או לא, אנו יודעים שצוותים לא תמיד מקבלים החלטות נבונות. מה היה זה שהצליח את הצוותים במחקר האמריקני?

קשה לומר בוודאות, אך החוקרים עודדו במיוחד את הצוותים לשאול שאלות מדויקות כדי לעודד חשיבה ברורה יותר לגבי הראיות התומכות בתחזית מסוימת, כדי "לחפש ראיות הסותרות את התחזית הנוכחית שלך" ולהכניס באופן קונסטרוקטיבי נקודות מבט חלופיות. .

דיון כזה עשוי בהחלט לשפר את השיפוט הקולקטיבי ו לשמור מפני חשיבה קבוצתית. גם חברי הצוות לא נדרשו להגיע להסכמה. למרות שהם חלקו מידע ודעות, הם עדיין ניבאו תחזיות בודדות ששולבו על ידי אלגוריתם. במיוחד צוותי חזאי העל היו מאורסת מאוד, לעתים קרובות חולק מידע עם ושואל שאלות של חברי צוות אחרים.

מחקר נוסף בדק מקרוב אילו טכניקות אימון ספציפיות נראו עוזרות ביותר. שלוש טכניקות נקשרו במיוחד לדיוק גבוה יותר. הראשון היה השימוש במה שמכונה שיעורי השוואה.

לדוגמא, אם אני מנסה לחזות את ההסתברות שבנדיקט קמברבאץ 'וסופי האנטר עדיין יהיו יחד בעוד חמש שנים, זה יכול להיות מועיל לחשוב על "שיעורים" אחרים שרלוונטיים - למשל, מעמד הנישואין המפורסמים, או אפילו נישואין באופן כללי. זה מאפשר לי להסתכל על ההיסטוריה כדי ליידע את התחזיות שלי: כמה אחוזים של נישואין מפורסמים מסתיימים בתקופה נתונה של חמש שנים?

השנייה הייתה שימוש במודלים מתמטיים וסטטיסטיים, כאשר הם זמינים, בכדי לסייע בהבנת דעותיו. השלישי היה "לבחור את השאלות הנכונות" - המלצה להקדיש זמן רב יותר לחיזוי תשובות לשאלות בהן אתה יודע יותר מאחרים על הנושא, או שעליו מחקר נוסף עשוי להשתלם. עם זאת, החוקרים הדגישו כי כל המרכיבים של האימון אולי תרם באופן הוליסטי לביצועים טובים יותר.

מחקרים הראו זאת הדיוק משתפר כאשר אנו עוקבים אחר ביצועי העבר שלנו - אבל סוג המשוב חשוב. האם תוצאות שחשבתם שיקרה 20% מהמקרים אכן קרו 20% מהמקרים? מה לגבי תוצאות שחשבת שיקרה 90% מהמקרים? הביצועים משתפרים עבור מי שמקבל מידע מסוג זה.

האם ממשלות יכולות לעשות טוב יותר?

האם ממשלת בריטניה הייתה יכולה לעשות טוב יותר ב- COVID-19 על ידי בקשת תשומות מצוותי חיזוי-על? זה אפשרי. חזאי-על ב שיפוט טוב פתוח ותרגלו חיזויים ב מטאקולוס (בהשתתפותי) נראה כי כל אחד מהם הצליח היטב ב- COVID-19, כאשר מטאקולוס טוען כי היה מומחים עברו ביצועים טובים יותר ביוני 2020. עם זאת, בא הסדרה האחרונה מתוך התחזיות הקשורות ל- COVID-19, חיזויים מאומנים לא תמיד היו מדויקים יותר ממומחים. החוקרים שעומדים מאחורי הסקר מתנסים בדרכים לשלב תחזיות של מומחי תחום וחזאים מאומנים ל"תחזית קונצנזוס ".

נראה גם מתקבל על הדעת שאפילו ההדרכה שעזרה לאנשים שאינם מחזיקים בתחזיות טובות יותר הייתה מועילה. לדוגמא, קאמינגס טען כי למרות שהייתה תשומת לב רבה למודלים אפידמיולוגיים, התעלמו מראיות הסותרות את הנחות המודלים - כגון נתונים המדווחים על ידי יחידות טיפול נמרץ. זה בהחלט נראה סביר שמישהו שאומן "לחפש ראיות הסותרות את התחזית הנוכחית שלך" אולי הבחין בכך קודם.

כמובן, לא כל ההמלצות מהספרות הן מעשיות במסגרות ממשלתיות. בתיאוריה, ממשלות יכלו לבדוק המלצות כאלה בעצמם, לאמץ כל מה שנראה מועיל. למרבה הצער, אתה לא יכול לשפר את מה שאתה לא מודד.

In חזית על, טטלוק מדגיש כי כל ארגון הרציני בשיפור תחזיותיו חייב לצרף אליהם מספרים קונקרטיים, לפחות באופן פנימי. ביטוי כמו "אפשרות רצינית" עשוי להיות 20% סיכוי לאדם אחד ו 80% סיכוי לאחר.

זה כמעט בוודאות מה שהתייחס אליו קאמינגס כשאמר: "בחור בשם פיל טטלוק כתב ספר ובאותו ספר הוא אמר שאסור להשתמש במילים כמו סבירות וסבירות, כי זה מבלבל את כולם." אולי זה לא צריך להפתיע אותנו אם ארגונים שאינם עורכים תחזיות באופן שניתן יהיה להעריך אותם אינם מצוידים ללמוד כיצד לשפר אותם. כדי לשפר, ראשית עליך לנסות.

על המחבר

גבריאל רקיה, עמית מחקר, מרכז ווינטון לתקשורת סיכונים וראיות, אוניברסיטת קיימברידג '

ספרים קשורים:

הגוף שומר על הציון: מוח וגוף בריפוי טראומה

מאת בסל ואן דר קולק

ספר זה בוחן את הקשרים בין טראומה לבריאות גופנית ונפשית, ומציע תובנות ואסטרטגיות לריפוי והחלמה.

לחץ למידע נוסף או להזמנה

נשימה: המדע החדש של אמנות אבודה

מאת ג'יימס נסטור

ספר זה חוקר את המדע והפרקטיקה של הנשימה, ומציע תובנות וטכניקות לשיפור הבריאות הגופנית והנפשית.

לחץ למידע נוסף או להזמנה

פרדוקס הצמח: הסכנות הנסתרות במזונות "בריאים" הגורמים למחלות ולעלייה במשקל

מאת סטיבן ר. גונדרי

ספר זה בוחן את הקשרים בין תזונה, בריאות ומחלות, ומציע תובנות ואסטרטגיות לשיפור הבריאות והרווחה הכללית.

לחץ למידע נוסף או להזמנה

קוד החסינות: הפרדיגמה החדשה לבריאות אמיתית ואנטי אייג'ינג רדיקלי

מאת ג'ואל גרין

ספר זה מציע נקודת מבט חדשה על בריאות וחסינות, תוך הסתמכות על עקרונות של אפיגנטיקה ומציע תובנות ואסטרטגיות לייעול בריאות והזדקנות.

לחץ למידע נוסף או להזמנה

המדריך המלא לצום: רפא את גופך באמצעות צום לסירוגין, יום חלופי וארוך

מאת ד"ר ג'ייסון פונג וג'ימי מור

ספר זה חוקר את המדע והפרקטיקה של צום ומציע תובנות ואסטרטגיות לשיפור הבריאות והרווחה הכללית.

לחץ למידע נוסף או להזמנה

מאמר זה הופיע במקור שיחה