מערכי מחקר שגויים

Question 1

הגדר מערך מחקר

Answer 1

תכנית פעולה לבדיקת קשרים בין משתנים. תכנית פעולה זו מאפשרת בחינת שאלות המחקר.

Question 2

הגדר ניסוי

Answer 2

מערך מחקר שבו החוקר קובע את רמת המשתנה (או משתנים) הב.ת של כל נבדק.

Question 3

למה רק בניסוי ניתן להסיק סיבתיות?

Answer 3

כי רק בניסוי מה שגרם לרמות השונות של המשתנה הבלתי-תלוי של כל נבדק זו החלטתה של החוקרת. לכן, לא יתכן שהמשתנה התלוי או משתנה שלישי השפיעו על ערך המשתנה הבלתי-תלוי של כל נבדק.

Question 4

נעסוק בארבעה מערכי מחקר שגויים

מהם?

Answer 4

1. ניתוח מקרה
2. מערך לפני-אחרי עם קבוצה בודדת
3. מערך אחרי ללא הקצאה מקרית
4. מערך לפני-אחרי ללא הקצאה מקרית

Question 5

הגדר
ניתוח מקרה (case study)

Answer 5

במערך זה מודדים פעם אחת בלבד לאחר טיפול כלשהו. קרה דבר מה, אני מודד מה קרה לאחריו, ומסיק מכך מסקנות.

Question 6

מה הבעיה המרכזית של ניתוח מקרה?

Answer 6

אין עם מה להשוות את המדידה.

משווים את המדידה למה שהיה יכול לקרות, כלומר למדידה היפותטית.

Question 7

היה מי שחשב שמערך ניתוח מקרה מאפיין את המחקרים של מי?

Answer 7

פרויד

Question 8

הגדר
מערך לפני-אחרי עם קבוצה בודדת

Answer 8

מערך שגוי נפוץ הוא מקרה שבו מודדים את הציונים של הנבדקים לפני ואחרי טיפול

Question 9

מהם האיומים העיקריים על מערך לפני-אחרי עם קבוצה בודדת?

Answer 9

1. איומי חלוף הזמן: היסטוריה ובשילה
2. איום השפעה של המדידה
3. איום שינויים במדידה (מכשור)
4. איום רגרסיה לממוצע

Question 10

הגדר איומי חלוף הזמן: היסטוריה

Answer 10

האיום שדבר חיצוני אולי קרה בין שתי המדידות

Question 11

הגדר איומי חלוף הזמן: בשילה

Answer 11

משהו פנימי שקרה בין המדידות

Question 12

איומי חלוף הזמן מאיימים על איזה סוג תוקף?

Answer 12

תוקף פנימי

Question 13

הגדר איום השפעה של המדידה

Answer 13

יתכן שהמדידה הראשונה אימנה את הנבדקים בפתרון

כלומר, המדידה היא משתנה חיצוני, אלטרנטיבי לטיפול, ויתכן שמשתנה חיצוני זה, ולא הטיפול, השפיע על המשתנה התלוי.

Question 14

איום השפעה של המדידה מאיים על איזה סוג תוקף?

Answer 14

תוקף פנימי

Question 15

הגדר מדדים תגובתיים

Answer 15

מדדים שיש סיכוי גבוה יותר שישפיעו על הנבדקים.

Question 16

הגדר מדדים לא תגובתיים

Answer 16

מדדים שלא משפיעים על הנמדד.

Question 17

גם במערך תקין לפעמים עדיף להשתמש במדד לא תגובתי

נכון או לא נכון?

Answer 17

נכון

Question 18

הגדר איום שינויים במדידה (מכשור)

Answer 18

השתנה משהו במכשור שאנחנו עושים בו שימוש כדי למדוד את המשתנה התלוי. יתכן שהשינוי במכשור אחראי לשינוי בציוני הנבדקים, ולא הטיפול

Question 19

הגדר מכשור

Answer 19

המכשור הוא כל דבר שאנחנו עושים בו שימוש לשם מדידה, כולל שופטים

Question 20

איום שינויים במדידה (מכשור) מאיים על איזה סוג תוקף?

Answer 20

תוקף פנימי

Question 21

הגדר תופעת הרגרסיה לממוצע

Answer 21

הציונים מתקרבים לממוצע במדידה השנייה

Question 22

למה צפויה רגרסיה לממוצע?

Answer 22

בכל מדידה יש טעות מקרית. לפעמים הטעות היא כלפי מעלה, ולפעמים הטעות היא כלפי מטה

מרבית הסיכויים שהציונים הנמדדים הקיצוניים הם תוצאה של טעות לכיוון הקיצוני, והציון האמיתי שלהם קרוב יותר לממוצע ממה שהם קיבלו.

Question 23

הגדר ציון אמיתי

Answer 23

הציון המדויק של הנבדק במדד

Question 24

הגדר ציון נמדד

Answer 24

הציון שנרשם במדידת הנבדק

Question 25

הגדר טעות מדידה

Answer 25

ההפרש בין הציון האמיתי לציון הנמדד. ברוב המדדים יש טעות מדידה

Question 26

הגדר טעות מדידה אקראית

Answer 26

אותו הסיכוי שהטעות תהיה שלילית או חיובית.

Question 27

תופעת הרגרסיה לממוצע היא איום על איזה סוג תוקף?

Answer 27

תוקף פנימי

Question 28

שני גורמים מביאים לכך שהמספרים במדד השני יהיו גבוהים בד”כ מהמספרים במדידה השנייה
(רגרסיה לממוצע)

באילו גורמים מדובר?

Answer 28

המדד הראשון העריך הערכת-חסר את המשתנה הנמדד של הנבדקים, ובמדד השני הטעויות שוב מתפלגות באקראי ולכן המדד השני לא מעריך הערכת-חסר את אותו משתנה.

Question 29

מה יש לעשות כדי למנוע את בעיית הרגרסיה לממוצע?

Answer 29

יש להימנע משימוש במדד שנעשה כדי לבחור את הנבדקים כמדד ה-“לפני” במחקר שלנו.

כלומר, אחרי שבחרנו נבדקים, עלינו למדוד אותם שוב במדד התלוי המעניין אותנו. אין שום סיבה ששוב טעות המדידה תהיה שלילית וקיצונית.

Question 30

מהו הפתרון הכי טוב למרבית הבעיות שאנחנו מציגים בשיעור הזה, כולל בעיית הרגרסיה לממוצע?

Answer 30

שימוש בקבוצת ביקורת

Question 31

אחד הפתרונות האפשריים לרגרסיה לממוצע: להשתמש במדידה אחת כדי לבחור את הנבדקים, ובמדידה נוספת כמדידה הראשונה (O1).

האם פתרון זה הופך את מערך המחקר
לפני-אחרי עם קבוצה בודדת
למערך מחקר תקין?

Answer 31

לא

מערך המחקר עדיין שגוי
הוא עדיין סובל משלל איומים אחרים

Question 32

רגרסיה מסכנת כל קבוצה בעלת ציונים קיצוניים

נכון או לא נכון?

Answer 32

לא נכון

היא מסכנת כל קבוצה שנבחרה על סמך ציונים קיצוניים, כאשר אותם ציונים מהווים את המדידה הראשונה שאליה משווים בסוף.

Question 33

אם הקבוצה נבחרה על סמך מדדים אחרים כלשהם ולאחר הבחירה נמצא כי הקבוצה מתאפיינת על ידי ממוצע ציונים קיצוני (נמוך מאוד או גבוה מאוד) האם החשש לתופעת הרגרסיה יהיה גבוה או נמוך יותר?

Answer 33

נמוך יותר

Question 34

הגדר מערך אחרי ללא הקצאה מקרית

Answer 34

מערך שבו יש שתי קבוצות, אבל לא הקצֵנו אליו נבדקים באופן מקרי.

Question 35

אילו איומים מאיימים על מערך אחרי ללא הקצאה מקרית?

Answer 35

1. איום ברירה
2. איומים של אינטרקציה

Question 36

מהו האיום המשמעותי ביותר למערך אחרי ללא הקצאה מקרית?
(מתוך אלה שכבר אמרנו)

Answer 36

איום ברירה

Question 37

הגדר איום ברירה

Answer 37

יתכן שההבדל בין שתי הקבוצות אינו רק שאחת מהן עברה טיפול והשנייה לא, אלא גם איך שנבחרו נבדקים לכל קבוצה.

לכן, יתכן שהדרך שבה נבחרו הנבדקים לכל קבוצה היא שאחראית להבדל במשתנה התלוי בין שתי הקבוצות.

Question 38

על איזה סוג תוקף מאיים איום ברירה?

Answer 38

תוקף פנימי

Question 39

הגדר איומים של אינטראקציה

Answer 39

איומים שמקורם הוא אינטראקציה בין ההקצאה הלא-מקרית לאיומים אחרים

Question 40

הגדר מערך לפני-אחרי ללא הקצאה מקרית

Answer 40

בהשוואה למערך אחרי ללא הקצאה מקרית, במערך זה יש מדידה גם לפני המניפולציה

Question 41

מה היתרון המרכזי של מערך לפני-אחרי ללא הקצאה מקרית לעומת מערך אחרי ללא הקצאה מקרית?

Answer 41

ניתן למצוא הבדלים מראש

Question 42

מה הבעיה במערך לפני-אחרי ללא הקצאה מקרית?

Answer 42

הבעיה היא שעדיין יתכן שההבדלים בין הנבדקים נובעים ממשתנה שלישי, משום שלא הוקצו אקראית

Question 43

האיומים על מערך לפני-אחרי ללא הקצאה מקרית דומים לאיומים על איזה סוג מערך?

Answer 43

מערך אחרי ללא הקצאה מקרית

Question 44

הגדר
baseline

Answer 44

במערך לפני-אחרי ללא הקצאה מקרית
המדידה הראשונה לפני שהנבדקים עברו מניפולציה

Question 45

איזה איומים מאיימים על מערך לפני-אחרי ללא הקצאה מקרית?

Answer 45

מערך זה מאויים על ידי איום ברירה, כולל אינטראקציה בין ברירה לבשילה\היסטוריה\רגרסיה\מדידה.

Question 46

לסטודנטים נדמה לפעמים שתוספת מדידה בהתחלה היא חשובה מאוד ופותרת הרבה בעיות.

האם הסטודנטים צודקים וזוהי תמיד דרך בטוחה לתקן כל ניסוי?

Answer 46

לא

צריך להבין שאפילו אם אנחנו מגלים הבדלים בהתחלה, הרי שהדבר לא ממש תיקן את הניסוי—רק מנע מאתנו להסיק מסקנות נמהרות.

שנית, אפילו אם מצאנו שאין הבדל בהתחלה בין הקבוצות, עדיין יתכן שההבדלים ביניהן יבואו לידי ביטוי בהמשך.

Question 47

מדוע האיומים בהם עסקנו מאיימים על התוקף הפנימי?

Answer 47

כי הם מציעים משתנה אלטרנטיבי למשתנה הב”ת, בחשד שהמשתנה האלטרנטיבי השפיע על המשתנה התלוי. זאת, משום שלמשתנה הב”ת הוצמד משתנה נוסף.

Question 48

הגדר ארטיפקט

Answer 48

הסבר חלופי שנובע מאיום על התוקף הפנימי (ולא על תוקף המבנה) והופך את הממצאים ללא מעניינים (כי הוא נובע מסיבות ידועות זה מכבר)

Question 49

לעיתים, הסבר חלופי לפיו המשתנה האופרציונלי מייצג למעשה משתנה תיאורטי אחר מזה שהחוקרת התכוונה לו, לא בהכרח אומר שהמחקר חסר תועלת.

נכון או לא נכון?

Answer 49

נכון

יתכן שהמחקר פשוט מלמד אותנו דבר שונה ממה שהחוקר חשב (מוסיף לנו ידע על משתנה תיאורטי אלטרנטיבי).

Question 50

מתי פחות מקובל להשתמש במושג ארטיפקט (בעיקר בקרב פסיכולוגים ישראלים)?

Answer 50

כאשר המשתנה האופרציונלי מייצג למעשה משתנה תיאורטי אחר מזה שהחוקרת התכוונה לו

Question 51

השלם את המשפט:

אם קשה לדעת אם הממצאים רלבנטיים למשתנה תיאורטי אחד או אחר, אז יש לנו כאן איום על תוקף____________

Answer 51

מבנה

Question 52

באיזה מקרה חוקרים בישראל יעדיפו לרוב להשתמש בביטוי “קונפאונד” על פני ארטיפקט?

Answer 52

כאשר יש איום על תוקף המבנה

Question 53

מה נכון לגבי המערך המחקרי הבא:
O1 X O2 O3

יש לבחור תשובה אחת:

יש שלוש קבוצות ניסוי ומדידה אחת

כפל השימוש באות O מייצג הקצאה מקרית

יש מדידה אחת לפני מניפולציה ושתיים אחריה

המערך לא אפשרי מאחר וחסר X נוסף

Answer 53

יש מדידה אחת לפני מניפולציה ושתיים אחריה

Question 54

מורה לחשבון רצה לבדוק האם לימוד באמצעות טאבלטים משפר את ההבנה של תלמידיו את החומר. לצורך הבדיקה הוא נתן לכל תלמידיו בתחילת השנה מבחן על כל החומר שילמד במהלך השנה, בו קיבלו בממוצע 40 נקודות בלבד. במהלך השנה הביאו התלמידים טאבלטים ולמדו מהם. בסוף השנה נתן המורה את אותו המבחן ולהפתעתו גילה שהציון במבחן עמד בממוצע על 80. מכך הסיק המורה שהוראה באמצעות טאבלטים משפרת באופן משמעותי את ההבנה המתמטית של תלמידי יסודי.

אילו מן הבאים מאיימים על מסקנת המורה?

איום של בשילה

איום של ברירה

איום של רגרסיה

איום של מדידה

Answer 54

איום של בשילה

איום של מדידה

Question 55

איום של אינטראקציה בין ברירה להיסטוריה מאיים על איזה מהמערכים הבאים?

מערך אחרי ללא הקצאה מקרית

מערך לפני ללא הקצאה מקרית

מערך לפני-אחרי ללא הקצאה מקרית

מערך לפני-אחרי עם קבוצה בודדת

Answer 55

מערך אחרי ללא הקצאה מקרית

מערך לפני-אחרי ללא הקצאה מקרית

Question 56

איזה מבין הבאים מהווה דוגמה לאיום מסוג רגרסיה לממוצע?

יש לבחור תשובה אחת:

קורס חדש שהיו מרוצים ממנו מאוד בשנה הראשונה קיבל הערכה נמוכה יותר בשנה העוקבת

שביעות הרצון שנמדדה בשאלון לפני ואחרי טיסה שבה חולקו פנקייקים עלתה

בין המדידה הראשונה לשניה בנושא לחץ התרחשה רעידת אדמה

ניסוי שבחן קשב לגירויים התחיל בבוקר עם קבוצת הניסוי ובערב עם קבוצת הביקורת

Answer 56

קורס חדש שהיו מרוצים ממנו מאוד בשנה הראשונה קיבל הערכה נמוכה יותר בשנה העוקבת