מהימנות המדידה Flashcards
1
Q
מדידה צריכה לענות על שני קריטריונים
מהם?
A
- מהימנות
- תוקף
2
Q
הגדר מדידה מהימנה
reliable
A
מדידה עם כמה שפחות טעויות מקריות.
3
Q
הגדר מדידה תקפה
valid
A
מייצגת את המשתנה שאנחנו מעוניינים למדוד.
4
Q
כאשר אנו מדברים על מדידה תקפה, על איזה סוג תוקף אנו מדברים?
A
תוקף מבנה של המשתנה הנמדד – עד כמה המדד (המשתנה האופרציונלי) מתאים למשתנה התיאורטי שרצינו למדוד.
5
Q
התוקף מוגבל על-ידי המהימנות.
נכון או לא נכון?
A
נכון
6
Q
המיהמנות והתוקף תלויים בשני סוגים של שונויות שמתקבלות במדידות
מהם?
A
- שונות מקרית
- שונות שיטתית
7
Q
הגדר שונות מקרית
A
ההבדלים בין מדידה למדידה הם מקריים. כלומר, טעויות מקריות גורמות לשונות מקרית.
8
Q
הגדר שונות שיטתית
A
ההבדלים בין מדידה למדידה אינם מקריים ומושפעים על-ידי גורם כלשהו.
9
Q
מדוע מהימנות מגבילה את תוקף המדידה?
A
אם המדידה אינה מהימנה, אזי יש בה הרבה טעויות (שונות מקרית גבוהה). טעויות מקריות לא יכולות לייצג שום משתנה.
10
Q
מה מהימנות בוחנת?
A
אם יש גורם שיטתי כלשהו שמשפיע על המדידה
11
Q
מה תוקף בוחן?
A
אם הגורם השיטתי הוא הגורם שאנחנו רוצים שהמדידה תמדוד.
12
Q
הגדר תיאוריית המבחנים הקלאסית
A
הציון הנצפה = ציון אמיתי + טעות מדידה
זוהי תיאוריית המדידה השולטת כיום בפסיכולוגיה
13
Q
הגדר טעות שיטתית
A
אנחנו אף פעם לא פוגעים במטרה (כלומר, בציון האמיתי של הנבדק), אבל הטעות היא תמיד זהה.
14
Q
הגדר טעות קבועה
A
טעות קבועה היא מספר קבוע שנוסף או יורד מהמדד.
סוג של טעות שיטתית
15
Q
מדובר בטעות שיטתית גם אם השינוי במדידה אינו מספר קבוע
נכון או לא נכון?
הסבר
A
נכון
כי היא מביאה לטעות מדידה שאינה מקרית
16
Q
אם טעות המדידה היא מקרית, הציון הממוצע לא נשאר זהה
נכון או לא נכון?
A
לא נכון
אם טעות המדידה היא מקרית, הציון הממוצע נשאר זהה
17
Q
הגדר טעות מקרית
A
טעות מקרית גורמת לסטיות מערך כלשהו לכל הכיוונים
הן אינן ניתנות לניבוי ואינן נגרמות על ידי גורם קבוע אחד.
18
Q
ממה נגרמת הטעות המקרית?
A
- שינויים זמניים במצבו של האובייקט הנמדד
- טעויות כתוצאה מהפרעות סביבתיות
- טעויות במתן הציון או קריאת מכשיר המדידה
מה שמשותף לכל הגורמים האלה הוא היותם מקריים, לא קבועים.
19
Q
אם גורם מסוים (למשל עייפות) משפיע על כל הנבדקים באופן דומה ולא מקרי בכל מדידה ומדידה האם הוא מייצר טעות מקרית או שיטתית?
A
טעות שיטתית
במקרה כזה, הוא לא פוגע במהימנות אלא בתוקף, כי המדידה שלנו מודדת גם עייפות
20
Q
הטעויות המקריות והטעויות השיטתיות הן תלויות זו בזו.
נכון או לא נכון?
A
לא נכון
הטעויות המקריות והטעויות השיטתיות הן בלתי-תלויות זו בזו. הן יכולות להתרחש ביחד או לחוד, אין ביניהן קשר
21
Q
על פי תורת המבחנים הקלאסית,
מה הממוצע של הטעות המקרית?
A
אפס
22
Q
על פי תורת המבחנים הקלאסית,
מה השונות של הטעות המקרית?
A
גדולה מאפס
23
Q
האם טעויות מקריות הן בעיה של מהימנות או של תוקף?
A
מהימנות
24
Q
האם טעויות שיטתיות הן בעיה של מהימנות או של תוקף?
A
תוקף
25
פיזור רחב של ציונים או שונות גדולה מעידים על מה?
מידה רבה של טעות מקרית
26
תיאוריית המבחנים הקלאסית מניחה שהתפלגות הטעויות המקריות היא מה?
התפלגות נורמלית
27
הגדר טעות התקן של המדידה
כפי שנראה בשרטוט,
השונות של הציונים יכולה לשמש מדד למידת הטעות המיוצגת במדידה שלפנינו. סטית תקן זו מכונה טעות התקן של המדידה וגודלה הוא מדד ישיר של הטעות המעורבת בשימוש במכשיר המדידה בו מדובר. כלומר, במדידה מהימנה יותר, ההתפלגות הזו תהיה צרה יותר.
28
ככל שהמדידה מהימנה יותר, ההתפלגות תהיה רחבה יותר
נכון או לא נכון?
לא נכון
במדידה מהימנה יותר, ההתפלגות הזו תהיה צרה יותר.
29
הגדר מדידה עם מהימנות מושלמת
במדידה מושלמת, אין אף פעם טעות, ולכן התפלגות המדידה של אדם אחד היא ההתפלגות הצרה ביותר האפשרית.
30
מהן תכונות הטעות המקרית?
1. תוחלת הטעויות היא אפס.
2. שונות הטעויות אינה אפס
3. המתאם בין הטעויות לבין כל משתנה אחר הוא אפס
31
מתי שונות הטעות המקרית תהיה אפס?
כאשר אין כלל טעות מקרית
32
ברגע שישנה טעות מקרית, יש שונות לטעות המקרית.
נכון או לא נכון?
נכון
33
למה המתאם בין הטעויות המקריות לבין כל משתנה אחר הוא אפס?
משום שלא ניתן לנבא אותן.
34
השונות של התפלגות הציונים הנצפים מבוססת על שני רכיבים
מהם?
1. שונות הציון האמיתי
2. שונות הטעויות
35
הנחות היסוד של תיאוריית המבחנים הקלאסית נועדו למען מה?
כדי לאפשר להסביר כיצד מחשבים מהימנות.
הרעיון הבסיסי הוא שמחשבים מהימנות באמצעות קורלציה בין מדידות שעושות שימוש באותו המדד. זה הגיוני כי במדד מושלם נקבל את אותם הציונים שוב ושוב, בעוד שבמדד גרוע נקבל ציונים מקריים לחלוטין.
36
מהי דרך מקובלת לבחון את מהימנותו של מדד?
מדידה חוזרת
37
ניתן למדוד את כל המדגם שלי פעמיים, ולבחון עד כמה שתי המדידות דומות זו לזו.
מה נסיק ככל שהמתאם בין שתי המדידות האלו גבוה יותר?
ככל שהמתאם בין שתי המדידות האלו גבוה יותר, כך המדידה תהיה מהימנה יותר (כלומר, שיעור הטעויות המקריות שלה יהיה קטן יותר).
זאת תחת ההנחה שהמשתנה שאנחנו מודדים
נשאר יציב בין מדידה למדידה. כלומר, שלא צפוי שינוי בציון האמיתי של הנבדקים ממדידה אחת לשנייה
38
האם תמיד ניתן לחזור על אותה המדידה?
לא
39
מה יש לעשות כאשר לא ניתן לחזור על אותה המדידה?
יש לייצר מבחנים מקבילים
40
הגדר מבחנים מקבילים
מבחנים מקבילים אמורים למדוד את אותה התכונה התיאורטית, אבל בעזרת תוכן אופרציונלי שונה
41
תנו דוגמא למבחנים מקבילים
מועד א ומועד ב
42
מהימנות היא היחס בין מה למה?
מהימנות היא היחס בין שונות שיטתית לשונות מקרית
43
כאשר מחשבים מהימנות כמתאם בין שתי מדידות, כמה פעמים נמדד כל נבדק?
פעמיים
44
כאשר מחשבים מהימנות כמתאם בין שתי מדידות יש שונות למדידות האלו
ממה שונות זו נובעת?
1. מהבדלים בינאישיים במשתנה שאנחנו מודדים
(הבדלים בינאישיים בציון האמיתי)
2. מטעויות מקריות
(המקור לשונות הטעות)
45
אם המדד אקראי לחלוטין מה תהיה השונות של הציון האמיתי?
אפס
כל השונות הנצפית תהיה שונות מקרית
46
כיצד נחשב מהימנות?
המהימנות שווה לשיעור שונות הציון האמיתי מתוך כלל שונות המדידה.
(שונות הציון האמיתי חלקי כלל השונות)
47
הגדר שונות מוסברת
מתוך כלל השונות במדד, ישנה שונות שנגרמה מגורם כלשהו (זה שתורם את הציון האמיתי) וישנה שונות שנגרמה כתוצאה מטעות.
48
מהימנות = מתאם בין שתי מדידות
נכון או לא נכון?
נכון
49
הגדר מתאם
שונות המשותפת של שני הציונים (קובריאנס) חלקי מכפלת סטיות התקן של שני המדדים
הקשר בין שני משתנים
50
בחישוב המתאם, למה מחלקים את השונות המשותפת במכפלת סטיות התקן של שני המשתנים?
כי אנחנו צריכים סטנדרטיזציה (ולא להיות תלויים ביחידות שבהן נעשה שימוש במדד – למשל, אם נמדד הגובה בס"מ או במטרים).
51
הגדר ציוני סטייה
לגבי ציון של כל נבדק במדידה מסוימת, נדבר על ההבדל שלו מהממוצע של המדגם
52
מהי השונות המשותפת של הציון האמיתי של כל נבדק וגורם הטעות של המדידה הראשונה של כל נבדק?
היא חייבת להיות אפס כי מדובר בטעות מקרית.
53
השונות המשותפת של טעות המדידה עם כל משתנה אחר היא אפס
נכון או לא נכון?
נכון
54
כיצד נחשב מהימנות בתור מתאם בין שתי מדידות?
שונות הציונים האמיתיים חלקי מכפלת סטיות התקן בשתי המדידות.
או
שונות הציונים האמיתיים חלקי השונות של המדד כולו
55
מדוע במבחנים מקבילים מניחים שונות טעות זהה?
מבחנים מקבילים נחשבים למעשה לשתי גרסאות של אותו מדד. לכן, לפחות תיאורטית, שונות הטעות שלהם זהה
56
הגדר מקדם המהימנות
למתאם בין שתי מדידות חוזרות (או מבחן מקבילים) קוראים מקדם המהימנות.
57
מקדם המהימנות הוא תמיד אומדן למהימנות, ולא המהימנות עצמה.
נכון או לא נכון?
נכון
58
למה מקדם המהימנות הוא רק אומדן?
כי כל הנוסחאות שהצגנו נכונות מעבר לאינסוף מתאמים בין שתי מדידות חוזרות.
59
המהימנות מגבילה את הקשר בין המדד למדידות של משתנים אחרים
נכון או לא נכון?
הסבר
נכון
כי לשונות הטעות אין קשר (=קורלציה) עם שום מדידה אחרת. לכן, רק שונות הציון האמיתי יכולה להיות קשורה למשתנה אחר.
כלומר, ככל שהמדידה פחות מהימנה, כך נהיה מוגבלים יותר במציאת מתאם בין המדידה הזו לבין מדדים אחרים.
60
האם יכול להיות למדד מתאם עם מדד של משתנה אחר שיהיה גבוה יותר מהמהימנות?
הסבר מדוע
כן זה ייתכן
כי יכול להיות שלמדידה של המשתנה האחר יש מהימנות טובה יותר.
61
המתאם של המדידה שלנו עם כל מדידה של משתנה אחר שהמהימנות שלה מושלמת יהיה גבוה מהמהימנות של המדידה שלנו.
נכון או לא נכון?
הסבר
לא נכון
יתכן שכלל אין קשר בין שני המשתנים (כלומר, בין הציונים האמיתיים של שתי המדידות).
62
כיצד נחשב מתאם מקסימלי בהינתן מהימנות?
שני תנאים:
1. מתאם של 1 בין איקס ל-וויי
(בעיקר קורה כאשר הם אותו המשתנה
וויי הוא הציון האמיתי של איקס)
2. מהימנות מדידה 1 של וויי
כלומר, זהו המתאם בין הציון הנמדד לבין הציון האמיתי.
63
האם ניתן באמת למדוד את הציון האמיתי של משתנה?
לא
64
כיצד נראה המתאם המקסימלי בין ציון המדידה לכל מדידה אחרת?
היחס בין סטיית התקן של הציון האמיתי לסטיית התקן של הציון הנצפה.
65
שורש המהימנות שווה למתאם המקסימלי עם משתנה אחר
נכון או לא נכון?
נכון
66
מה גדול יותר - אומדן המהימנות של המדידה או המתאם בין המדידה לבין הציון האמיתי?
המתאם גדול מהאומדן
67
מדוע שורש מקדם המהימנות הוא חסם עליון לתוקף?
תוקף המקסימלי הוא המתאם המקסימלי של המדד עם מדד אחר, והמתאם המקסימלי הוא שורש המהימנות.
68
מהן שיטות שונות לחישוב אומדן מהימנותו של מדד?
1. מבחן חוזר
test-retest
2. טפסים\מבחנים מקבילים
3. מבחן חצוי
split-half method
4. התאמה בין פריטי המבחן
5. מהימנות בין שופטים
69
כיצד נקראת מהימנות מבחן חוזר?
test-retest reliability
70
מהי הבעיה המרכזית עם מדידה חוזרת?
השפעות של המדידה על איכות המדד
71
מתי מדידות חוזרות בשני זמנים שונים הן בעיתיות?
1. כאשר התכונה אינה יציבה
2. כאשר ישנה השפעה של אימון
3. כאשר יש השפעה של מוכרות
בשתי הסיבות הראשונות (אי-יציבות ואימון) הציון האמיתי משתנה. בסיבה השלישית, הציון האמיתי לא משתנה, אבל המדד כבר לא מצליח למדוד אותו היטב.
72
כדי שנוכל להשתמש במבחן חוזר, המדד צריך להיות מה?
מדד לא תגובתי
כלומר, אסור שמדידה בו תשפיע על הציון האמיתי במשתנה הנמדד או על הציון הנמדד.
73
לא תמיד הגיוני להעביר את אותו המדד פעמיים.
מהו פתרון אפשרי לבעיה זו?
שימוש בנוסחים מקבילים של אותו המדד.
למשל:
פסיכומטרי עם שאלות אחרות
שאלון עם פריטים מקבילים
74
כיצד מייצרים מבחנים מקבילים?
החוקרים צריכים לנסח את השיטה להכנת המדד ואז להשתמש בה פעמיים.
75
כיצד נעשה חישוב אומדן המהימנות במקרה של נוסחים מקבילים?
חישוב אומדן המהימנות במקרה של נוסחים מקבילים זהה לחישוב במקרה של מבחן חוזר: אומדן המהימנות הוא המתאם בין שתי מדידות של אותה קבוצת נבדקים.
76
ניתן להעביר נוסחים מקבילים באותו הזמן (למשל, אחד אחרי השני במעבדה), או בזמנים שונים (למשל, בפער של שבועיים).
נכון או לא נכון?
נכון
77
הגדר מבחן חצוי
(split-half method).
השיטה דומה למבחנים מקבילים, רק שבמקום לבצע שתי מדידות חוצים את המבחן לשניים ובודקים את המתאם בין שני החצאים.
שימוש במבחן חצוי אפשרי רק אם אנחנו מניחים ששני חלקי המבחן מצליחים למדוד את כל המשתנה התיאורטי.
78
בכל פעם שמריצים מחקר עם מדד שניתן לחצות לשני חלקים, אפשר לחשב מהימנות מבחן חצוי.
נכון או לא נכון?
נכון
79
למה צריך שני חצאים של המבחן (כלומר, למה צריך מבחן ארוך כל-כך), אם חצי שלו הוא מספיק טוב בשביל למדוד את התכונה?
להגדלת מהימנות.
80
האם במקרה של מבחן חצוי הקורלציה בין שני חלקי המבחן מהווה הערכה מדויקת של מדד המהימנות?
מדוע?
לא
למבחן ארוך יותר יש סיכוי טוב יותר להיות מהימן, ולכן, אם נבחן את המתאם בין שני חצאיו נקבל הערכת-חֵסֵר של המהימנות של המבחן כולו.
81
במקרה של מבחן חצוי
כיצד חוצים את המבחן?
אפשר לחצות את המבחן על-ידי זיווג של פריטים. לכל פריט מחפשים פריט דומה מאוד, ואז מגרילים אקראית כל פריט לאחד החצאים (דומה מאוד להגיון מאחורי נוסחים מקבילים).
82
אם מטלת סטרופ משמשת כמדד, כיצד נחשב את מהימנותהּ?
אפשר לחשב אפקט סטרופ לכל נבדק\ת מהצעדים האי-זוגיים במטלה ואפקט סטרופ נוסף מהצעדים הזוגיים במטלה.
את המתאם בין שני הציונים הללו נתקן באמצעות נוסחת ספירמן-בראון כדי לאמוד את מהימנות מטלת הסטרופ כמדד.
83
הגדר שיטת אלפא של קרונבך
שיטה רביעית לחישוב מהימנות היא לבצע איזשהו שקלול של המתאם בין כל הפריטים לבין עצמם.
84
מתי מקובל להשתמש בשיטת אלפא של קרונבך?
מקובל מאוד להשתמש בה כאשר בוחנים מהימנות של שאלונים.
85
מהימנות נמוכה במדגם מסוים בו השתמשנו במדד קיים (שמהימנותו גבוהה) רומזת על מה?
שאולי יש בעיה באיך שאנחנו השתמשנו במדד במחקר שלנו.
86
הגדר סכום שונויות של משתנים
סכום השונות של כל משתנה, בתוספת השונות המשותפת להם.
87
מדוע אלפא קרונבך היא אומדן למהימנות?
משום שהיא תהיה גבוהה יותר ככל שהשונות המשותפת של הפריטים גבוהה יותר.
88
אלפא-קרונבך שווה לממוצע הספירמן בראון של כל החצאים האפשריים של המבחן.
זה מתקיים רק תחת איזו הנחה?
בהנחה שסטיית התקן של כל הפריטים זהה.
89
איזה שיטות מודדות מהימנות כעקיבות פנימית?
1. מבחן חצוי
2. אלפא קרונבך
90
מדוע עקיבות פנימית היא שיטה לאומדן המהימנות?
ככל שחלקי המדד רגישים יותר לטעויות מקריות, כך הקורלציה ביניהם תהיה נמוכה יותר
91
הגדר שיטת מהימנות בין שופטים
בשיטה זו משתמשים כאשר הציון במבחן אינו אובייקטיבי, אלא נסמך על שיפוט בידי בני-אדם.
92
מהו מקדם המהימנות בשיטת מהימנות בין שופטים?
ממוצע הקורלציות בין ציוני כל זוג שופטים.
93
בשיטת מהימנות בין שופטים, מהימנות גבוהה היא בהכרח מצב בו השופטים נותנים את אותם הציונים
נכון או לא נכון?
לא נכון
מהימנות גבוהה היא לא בהכרח מצב בו השופטים נותנים את אותם הציונים, אלא השתנות משותפת של הציונים.
94
מה זה אומר ככל שאומדן המהימנות קרוב יותר לאפס?
שהמדד רגיש יותר לטעויות מקריות.
95
מה המשמעות של אומדן שלילי למהימנות?
אומדן שלילי יכול להתקבל במקרה, או להעיד על בעיה יסודית במדד.
96
מה המשמעות של אומדן חיובי למהימנות?
כאשר האומדן חיובי, יש סיכוי שהמדד מהימן.
97
אילו ערכי מהימנות הם ערכים טובים?
באופן כללי, איכות של מדדים היא תמיד יחסית.
מדד עם מהימנות של 0.3, למשל, הוא מדד שרגיש מאוד לטעויות מדידה. כמו כן, אנחנו מוגבלים מאוד ביכולתנו למצוא קשר בין מדד זה לבין כל משתנה אחר (מדד אחר או מניפולציה). ובכל זאת, אם זה המדד הכי מהימן למשתנה שחשוב לנו מאוד, עדיין נוכל להוסיף ידע על אותו משתנה באמצעות המדד הזה.
98
שיפוט המהימנות הוא תמיד יחסי.
נכון או לא נכון?
נכון
99
מה נסיק כאשר אומדן מהימנות כעקיבות פנימית הוא קרוב מאוד ל-1?
מקובל לחשוד שמא המדד ארוך מדי. כלומר, האומדן הגבוה מעיד על כך שהמדד לא כל כך רגיש לטעויות מדידה, ושהפריטים מצליחים למדוד דבר-מה דומה, ולכן אפשר להשתמש בפחות פריטים.
100
לפי הנורמה בפסיכולוגיה,
אילו ערכים של אלפא קרונבך או של מהימנות מבחנים חוזרים נחשבים לערכים טובים?
מעל 0.8
101
הגדר מקדם מהימנות
מתאם בין שתי מדידות נצפות של אותו ציון אמיתי
102
כאשר מדידת המשתנה אינה אובייקטיבית, באיזה שיטה נשתמש על מנת למדוד מהימנות?
מהימנות בין שופטים
103
כאשר המשתנה יציב, באיזה שיטה נשתמש על מנת למדוד מהימנות?
מדידות חוזרות (מבחן חוזר)
(בין שני זמנים שונים)
104
כאשר המשתנה יציב אך יש חשש להשפעה של מוכרות/מדידה קודמת, באיזה שיטה נשתמש על מנת למדוד מהימנות?
נוסחים מקבילים
105
כאשר נרצה למדוד מהימנות כעקיבות פנימית, באיזה שיטות נשתמש?
1. מבחן חצוי
2. אלפא קרונבך
(בין חלקיו של כלי המדידה)
106
מבחן חוזר מודד איזה סוג מהימנות?
מהימנות כיציבות
107
מבחן חוזר רגיש לשינויים ב...?
זמן (מוטיבציה, מצב רוח ועוד)
108
נוסחים מקבילים מודדים איזה סוג מהימנות?
מהימנות כאקוויבלנטיות
(עם ובלי פער בין העברות)
109
מהימנות גבוהה של כלי המדידה משמעותה ש:
יש לבחור תשובה אחת:
הטעות השיטתית במדידה גדולה
הטעות השיטתית במדידה קטנה
הטעות המקרית במדידה קטנה
הטעות המקרית במדידה גדולה
הטעות המקרית במדידה קטנה
110
השלימו:
תוחלת הטעויות המקריות ______, ותוחלת הטעויות השיטתיות _____.
יש לבחור תשובה אחת:
שווה ל-0; שווה ל-0
שווה ל-0; שונה מ-0
שונה מ-0; שווה ל-0
שונה מ-0; שונה מ-0
שווה ל-0; שונה מ-0
111
מהימנות של שאלון למדידה של OCD היא 0.81.
מה יכול להיות המתאם המקסימלי של שאלון זה עם שאלון אחר לבדיקה של דיכאון?
יש לבחור תשובה אחת:
0.09
0.9
0.81
0.18
0.9
112
על פי תיאוריית המבחנים הקלאסית, למה שווה הציון האמיתי?
יש לבחור תשובה אחת:
לציון הנצפה ועוד טעות המדידה
לציון הנצפה כפול טעות המדידה
לציון הנצפה חלקי טעות המדידה
לציון הנצפה פחות טעות המדידה
לציון הנצפה פחות טעות המדידה
