בדיקת תוקף הניבוי של מבחני מת"ל ושיפור משוואות הניבוי
סימפוזיון בנושא : תיקוף חוזר של מת " ל – מערכת לאבחון לקויות למידה בהשכלה הגבוהה תוקף הניבוי של מבחני מת " ל ושיפור משוואות הניבוי ענת בן-סימון מרכז ארצי לבחינות ולהערכה הכינוס השמיני של האגודה הישראלית לפסיכומטריקה (אפ"י), פברואר 2012 מטרות תיקוף חוזר של כלי האבחון של מת"ל בדיקת התוקף המבחין של מבחני מת"ל עדכון התפלגויות הביצוע במת"ל ל 4-קבוצות הלקות שיפור נוסחאות הניבוי המשמשות להפקת אבחנה ממוחשבת על ידי - מידול מחודש של האבחנה הקלינית תוך התבססות על מדגמים קליניים גדולים הוספת משתנים מתוך חומרי הרקע ותצפית הבוחנת למשוואת הניבוי 2 מבנה הנתונים במחקר התיקוף חומרי רקע: אבחנה לפי חומרי הרקע דיסלקסיה דיס רפיה דיסקלקוליה הפרעת קשב וריכוז שאלון אישי תעודות בית ספר אבחונים קודמים ת פית בוחנת מבחני מת"ל 3 קריאה כתיבה קשב תפקודים כמותיים זיכרון ותפיסה חזותית אבחנה קלינית מבוססת מת"ל דיסלקסיה דיס רפיה דיסקלקוליה הפרעת קשב וריכוז אבחנה ממוחשבת תפקודי קריאה תפקודי כתיבה תפקודי חשבון תפקודי קשב וריכוז תיקוף חוזר של מבחני מת " ל 4 תיקוף חוזר של מבחני מת"ל (גודל אפקט) עבור מבחני שפה קריאת טקסט דיוק קצב פענוח מילות תפל (הפקה) דיוק ז"ת פענוח מילות תפל (בחירה) דיוק ז"ת השמטת פונמות דיוק ז"ת מחקר תיקוף I אבחנה קלינית )(N=24 -2.65 -1.77 -1.65 -.91 -1.83 -1.53 -1.78 -0.41 מחקר תיקוף II אבחנה קלינית )(N=296 אבחנה לפי חומרי רקע )(N=340 -2.34 -2.14 -2.08 -2.71 -2.37 -2.52 -1.40 -1.93 -2.06 -1.91 -1.82 -2.39 -2.06 -2.28 -1.15 -1.65 סטיות התקן לכל המדדים נעות בין 1.2ל1.9 - 5 תיקוף חוזר של מבחני מת"ל (גודל אפקט) עבור מבחנים לא שפתיים מחקר תיקוף II אבחנה קלינית דיסלקסיה )(N=296 דיסלקסיה +דיסגרפיה )(N=54 6 אוטומטיות חישובית תפיסת מוש המספר תפיסה חזותית קשב מתמשך דיוק קצב דיוק ז"ת דיוק ז"ת מקבילה סדרתית -1.49 -1.47 -2.10 -2.35 -1.24 -.71 -.99 -1.41 -.18 -.39 -.42 -1.18 -.69 -.61 -.24 .10 שיפור משוואות הניבוי 7 ניבוי דיסלקסיה באמצעות חומרי רקע ותצפית בוחנת מס' משתנים מקור מתאם מרובה :תיקוף צולב בדידים מקובצים אבחנה קלינית האבחנה הממוחשבת שאלון אישי לפונה 28 1 .57 .55 תעודות בית ספר 6 1 .47 .45 אבחונים קודמים 15 1 .50 .49 תצפית בוחנת 5 1 .34 .34 סך הכול 49 4 .63 .63 מכאן ניתן לצפות שלמשתני הרקע תהיה תרומה משמעותית למשוואות הניבוי 8 מידול אבחנה קלינית לפי חומרי רקע ותצפית בוחנת DF משקל ()B t |Pr > |t משקל יחסי () Intercept 1 0.69 -4.47 <.0001 0 ת פית בוחנת 1 0.33 2.71 0.01 .12 שאלון רקע 1 0.84 7.02 <.0001 .34 תעודות ביה"ס 1 0.32 4.39 <.0001 .21 אבחנות קודמות 1 0.38 4.18 <.0001 .21 משתנה 9 משוואות לניבוי האבחנה הקלינית מתאם מרובה מנבאים מס' מנבאים N משקלות אופטימליים רקע רקע 4 344 .65 .63 אבחנה ממוחשבת אבחנה ממוחשבת 1 558 - .79 רקע +אבחנה ממוחשבת 5 326 .81 .80 מבחני שפה 31 525 .81 .77 רקע +מבחני שפה 35 326 .82 .74 מבחני שפה +אבחנה ממוחשבת 32 558 .82 .80 כל המבחנים 64 524 .83 .74 משוואת ניבוי חדשה תיקוף צולב מתאמים ואחוזי הסכמה בין אבחנות דיסלקסיה סוג הקשר מתאם אחוז הסכמה (דיכוטומי) אבחנה ממוחשבת /אבחנה קלינית מחקר (ענבר-וייס ,בן-סימון וברק)2009 , 77% תלוי אבחנה ממוחשבת /אבחנה קלינית תלוי .79 85% אבחנה ממוחשבת /אבחנה לפי חומרי רקע בלתי תלוי .49 70% הסכמה בין מאבחנים 11 אבחנה לפי חומרי רקע /אבחנה לפי חומרי רקע בלתי תלוי .71 82% אבחנה קלינית /אבחנה לפי חומרי רקע בלתי תלוי .62 78% אבחון קודם / Iאבחון קודם II תלוי .47 78% אבחון אחרון /אבחנה קלינית תלוי .43 72% סיכום תרומת משתני הרקע לשיפור נוסחאות הניבוי המתאמים בין 'משתני הרקע' (השפתיים) והתפקוד במבחני שפה גבוהים ().57 – .34 עם זאת ,התרומה השולית של 'משתני הרקע' למידול האבחנה הקלינית של דיסלקסיה ,מעבר למבחני מת"ל ,היא זניחה - ניתן להשתמש בחומרי הרקע לשיפור יציבות נוסחאות הניבוי לבקרה על אמינות הביצוע במבחני מת"ל הממצאים תקפים עבור דיסלקסיה ויכולים להשתנות עבור לקויות אחרות 12 סיכום שיפור נוסחאות הניבוי למבחני השפה תוקף מבחין גבוה הן בניבוי והן במידול אבחנה של דיסלקסיה רמת הדיוק של משוואות הניבוי מוגבלת כנראה בשל – מהימנות האבחנה הקלינית גורמים המשפיעים על הביצוע במת"ל ואינם נכללים בניבוי (רגשיים ,קשביים ומהירות עיבוד מידע) קיימת אפשרות שהכללת אינטראקציות במשוואת הניבוי או שימוש במודלים מורכבים יותר (למשל ,מודלים הסתברותיים) יתרמו לשיפור משוואות הניבוי הממצאים תקפים עבור דיסלקסיה ויכולים להשתנות עבור אבחון לקויות אחרות 13 תודה רבה!
© Copyright 2024