בתשובה לעוזי ו., 04/09/03 17:24
קראתי. 168320
נפלא! אני מת על דוגמאות כאלה. יש לי תחושה שדברים כאלה קורים הרבה פעמים במדעים ה-"רכים", וכשאני דן בכך חשוב לי שיהיה לי ארסנל של דוגמאות. תמיד אני מבטיח לעצמי לשבת פעם ולסרוק מאמרים בסוציולוגיה, נגיד, אבל אף פעם לא הגעתי לזה.

אתה מכיר במקרה מקומות בהם דנים בבעייה הזו? יש לי זכרון עמום על מאמר שקראתי פעם (ב-Scientific American?) שתיאר הרבה מקרים כאלה.
קראתי. 168438
פעם ראיתי ידעה בעיתון <מזיכרון>:
אנשים הפורשים מעבודתם בשל בעיות בריאות חולים יותר מאנשים הפורשים מסיבות אחרות.
קראתי. 168519
מכיר את הסיפור של קישון על פקח מס-ההכנסה, פישבאום יד הזהב?

איך אפשר יהיה להסיק מסקנות אופרטיביות מן המחקר, אילולא היו הנבדקים חרוזים המושחלים על עקומות הרגרסיה?
קראתי. 168855
את פישבאום יד-הזהב אני זוכר, לצערי, ממש במעורפל, מה שמראה שוב שאני מזדקן. אבל אם לא בא לך להזכיר לי, אני אבין.

את המשפט השני בתגובתך לא הבנתי... (מזדקן אמרנו?)
קראתי. 168891
פישבאום מעביר את אצבעו מעל ספר הטלפונים, ופתאום רוטטת יד-הזהב, עד שהיא מצביעה על אחד השמות. אצים-רצים פקידי המס לבדוק את החשוד, וראה זה פלא, מתברר שהוא מעלים מס.
כך הוא לוכד פושעים בזה אחר זה, ואינו טועה אפילו פעם אחת.

(הבדיחה שאני נאלץ להרוס: כולם מעלימים מס, ולכן כל חשוד - אשם).

(הנמשל, למזדקנים: בכל פעם שמסיקים מסקנות אופרטיביות ממחקר סטטיסטי, יש כשלים מתודולוגיים).

ובעצם, מה הפלא. אילולא היו הנבדקים חרוזים המושחלים על עקומות הרגרסיה, איך אפשר יהיה להשפיע על התוצאות בציר Y על-ידי תנועה בציר X? והרי תנועה בציר X היא כל מה שביכולנו לעשות (ישירות). מבחינת מיישם-המחקר-בשטח, יש לאמץ את מודל החרוזים (המופרך), או לחדול. רק לעתים נדירות הם בוחרים לחדול.
קראתי. 170099
"בכל פעם שמסיקים מסקנות אופרטיביות ממחקר סטטיסטי, יש כשלים מתודולוגיים": אני מתאר לי שלא *בכל* פעם. אפשר לעשות מחקר סטטיסטי, לגלות איזו קורלציה שמצביעה אולי על קשר סיבתי, לבחון את ההשערה הסיבתית (לשחק עם ציר X ולראות שבאמת קורה משהו) ולהוכיח שאכן חרוזים. ברור שבמקרה דנן השלב של "בחינת ההשערה הסיבתית" לא בוצע, וגם אין טעם לבצע אותו כי ההשערה ממש לא משכנעת, כפי שהסברת.

כמובן שיש לי בראש דוגמאות לא ממדעי החברה, אלא נניח מביולוגיה מולקולרית (ניתוח תוצאות של ניסויי צ'יפים, למשל - הרבה השערות של מי-משפיע-על-מי על-סמך קורלציות סטטיסטיות). אין לי מושג באיזו תכיפות, אם בכלל, עושים במדעי החברה ניסויים מבוקרים כאלה (ברור שזה די קשה).

לגבי המשפט האחרון שלך - החוקר מפרסם המאמר לא חייב להיות המיישם בשטח, נכון? ומבחינתו לפרסם שיש קורלציה וזהו זה לא "לחדול", זה סתם לדווח על מה שיש לדווח ולא לקפוץ למסקנות מיותרות. אז למה הם מתעקשים להסיק מסקנות אופרטיביות? כנראה שעורכי העיתונים מעדיפים מסקנות סנסציוניות מניתוח זהיר והצבעה על כל המסקנות האפשריות. עצוב.
קראתי. 170291
הקורלציה כשלעצמה בדרך-כלל לא מספיק מעניינת כדי להגיע לעיתון. הרבה יותר מושך את העין לקרוא ששתיית כוסית יין נוספת ביום תקטין את הסיכון להתקפי לב, גם אם במציאות אין שום אפשרות לבודד את ההרגל הזה מפרמטרים אחרים, שעשויים להיות משמעותיים בהרבה.
והמסקנה האולטימטיבת (מוכחת מדעית) 168562
זבוב בלי כנפיים ובלי רגליים לא שומע.
והמסקנה האולטימטיבת (מוכחת מדעית) 168568
תראו מי חזר מנמיביה.
והמסקנה האולטימטיבת (מוכחת מדעית) 168578
ביאפרה, אבל אין דבר.
קראתי. 168705
כן, כותבים על זה הרבה: תגובה 165116, תגובה 135911 וכל הדיון הארוך שאחריה, ובמיוחד מתגובה 136335 והלאה.

בזמנו השתתפתי בקורס באוניברסיטה שהיה מעין "מבוא לשיטות מחקר לדוקטורנטים" או משהו כזה. כל שבוע קראנו ספר שנחשב לספר מרכזי בסוציולוגיה, ובילינו שלוש שעות בלבקר את המתודולוגיה בספר. תמיד, בלי יוצא מן הכלל, אפשר להעביר ביקורת על מתודולוגיה של חוקר, ודי בקלות - למה הוא עשה כך ולא אחרת, מה הייתי אני עושה במקומו וכיו"ב.
קראתי. 168861
תודה. אני סבור שהטעות שעוזי הצביע עליה בתגובה 168194 איננה מצויה במתודולוגיה של הניסוי, אלא בהסקת המסקנות (ואם זה חלק מהמתודולוגיה, אז אני טועה בקריאת התגובות שהזכרת).

כלומר, אפשר לערוך ניסוי המצביע על קשר מפתיע בין שני נתונים סטטיסטיים, ולעצור כאן - או אפילו לנסות לתת פרשנות סיבתית לקשר, אבל בזהירות ועם מניית כל האפשרויות. אם מישהו עורך את *אותו* הניסוי בדיוק, אבל *מסיק* ממנו מסקנה מופרכת, האם המתודולוגיה שלו שגויה?

אני אומר כל זאת פשוט כי נדמה לי שהקורס שהזכרת ניסה לגשת לבעייה קצת שונה מזו שאני מדבר עליה, שהיא עריכת ניסויים מוצלחים מבחינה סטטיסטית, עם מסקנות סטטיסטיות מובהקות, אבל שגיאה בפרשנות.
קראתי. 168900
כן, זה חלק מהמתודולוגיה וגם לזה התכוונתי.
Correlation Is Not Causation 168983
ואידך זיל גמור

חזרה לעמוד הראשי המאמר המלא

מערכת האייל הקורא אינה אחראית לתוכן תגובות שנכתבו בידי קוראים