מה זו בכלל "קושיה"? מפת 3,454 שאלות הפסיכומטרי בשפה של זינוק
המרכז הארצי מכיר "חשיבה כמותית". הכיתה מכירה קושיות, אלגברה וגאומטריה, ובתוכן "חרטטת", "הספק" ו"שחור לבן". מדריך ותיק מיפה 3,454 שאלות ממבחני עבר לשפה הזו, ואנחנו הכנסנו את המפה לאפליקציה כשכבה ליד המנוע, לא במקומו. ולמה סירבנו למלא את החורים.
שאלו תלמיד בקורס פסיכומטרי מה הוא לומד השבוע, והוא יגיד "קושיות". שאלו את המרכז הארצי לבחינות ולהערכה, שכותב את המבחן, ותגלו שהמילה "קושיה" לא מופיעה בשום מסמך רשמי. בעיני המבחן יש "חשיבה כמותית": שאלות, בעיות, גרפים. בעיני מי שמלמד אותו כבר שני עשורים יש קושיות, אלגברה וגאומטריה, ובתוך כל אחת מהן עשרות סוגים עם שמות שאף אחד מחוץ לכיתה לא היה מבין: "חרטטת", "עכברי מעבדה", "שחור לבן", "הכל ב-$".
השמות האלה לא סלנג. הם תוצר של שנים שבהן מורים גילו שתלמידים לא נכשלים ב"חשיבה כמותית" באופן כללי, אלא בסוג מסוים מאוד של שאלה, שחוזר במבחן אחרי מבחן. השמות הם מפה. השאלה שלנו הייתה איך להכניס את המפה הזו לתוך אפליקציה שלומדת את התלמיד, בלי לשבור את המנוע שכבר עובד.
אילו סוגי שאלות יש במבחן הפסיכומטרי, ואיך זינוק ממיין אותן?
מדצמבר 2026 המבחן הרשמי בודק שני תחומים, חשיבה מילולית וחשיבה כמותית, והאנגלית נבדקת בנפרד בבחינת אמירנט. זינוק ממיין את שאלות התרגול בשכבה נוספת, בשפה שבה מלמדים בכיתה: בחלק המילולי, "היגיון" (שאלות הסקה) על שבעת סוגיו; בחלק הכמותי, "קושיות" (בעיות מילוליות) על עשרת סוגיהן, "אלגברה" על תשעה סוגים ו"גאומטריה" על אחד-עשר. המיפוי נעשה על ידי מדריך ותיק, שאלה אחר שאלה, על פני 3,454 שאלות ממבחני עבר, והוא יושב לצד סיווג המנוע הקיים, לא במקומו.
מה המדע אומר: מומחים ממיינים לפי מבנה, מתחילים לפי מראה
הניסוי הקלאסי כאן הוא של צ'י, פלטוביץ' וגלייזר (Chi, Feltovich & Glaser, 1981). הם נתנו לסטודנטים מתחילים ולדוקטורנטים בפיזיקה ערימת בעיות וביקשו למיין אותן לקבוצות. המתחילים מיינו לפי מה שרואים: בעיות עם מישור משופע יחד, בעיות עם קפיץ יחד. המומחים מיינו לפי מה שפותר: כל הבעיות שנפתרות בשימור אנרגיה יחד, גם אם אחת עוסקת בקפיץ והשנייה במישור. ההבדל בין מתחיל למומחה הוא לא כמות הידע, אלא הקטגוריות שדרכן הוא רואה בעיה חדשה.
הפסיכומטרי הוא מקרה מובהק. שאלה על שני רוכבי אופניים שיוצאים משתי ערים ושאלה על שני ברזים שממלאים אמבטיה נראות שונות לגמרי לתלמיד מתחיל. למורה ותיק הן אותה שאלה: "הספק" (או "תנועה", תלוי בפרטים), עם אותה טבלה ואותה משוואה. כשהאפליקציה יודעת שזה אותו סוג, היא יכולה להגיש לתלמיד את השנייה כשהוא נכשל בראשונה, ולהגיד לו למה.
בצד המדידה, הרעיון הזה קיבל שם: מטריצת Q. טצואוקה (Tatsuoka, 1983) הציעה למפות כל פריט במבחן לרשימת המיומנויות שהוא דורש, כדי לאבחן לא "כמה טעית" אלא "במה טעית". סן, קדינגר וג'אנקר (Cen, Koedinger & Junker, 2006) הראו שאפשר לבדוק מפה כזו אמפירית: אם המפה נכונה, עקומת הלמידה של כל מיומנות חלקה, ואם היא מערבבת שתי מיומנויות בקטגוריה אחת, העקומה מקפצת. קדינגר, קורבט ופרפטי (Koedinger, Corbett & Perfetti, 2012) סיכמו את התחום בעיקרון פשוט: הלמידה תלויה ביחידות הידע שמגדירים, ולכן הגדרה נכונה שלהן היא לא עניין של ניסוח, אלא של תוצאות.
ויש סיבה שלישית, שקשורה לתרגול עצמו. רוהרר וטיילור (Rohrer & Taylor, 2007) ואחריהם רוהרר, דדריק וסטרשיץ' (Rohrer, Dedrick & Stershic, 2015) הראו שתרגול משולב, שבו סוגי שאלות מעורבבים, משפר את הביצוע במבחן לעומת תרגול בבלוקים של סוג אחד, בעיקר כי הוא מאלץ את התלמיד לזהות איזה סוג שאלה מולו לפני שהוא פותר. אבל כדי לערבב סוגים בכוונה, המערכת צריכה לדעת מה הסוג של כל שאלה. בלי מפה, "עירוב" הוא סתם אקראיות.
המפה: ארבעה סוגים, שלושים ושבעה תת-סוגים
המיפוי נעשה על ידי חיים, מדריך פסיכומטרי ותיק בזינוק, על מבחני העבר שהמרכז הארצי פרסם עד 2026. הוא לא סיווג לפי נושא מתמטי, אלא לפי איך מלמדים: כל תת-סוג הוא דרך פתרון, וכל דרך פתרון היא שיעור.
| סוג | פרק במבחן | מה זה | תת-סוגים |
|---|---|---|---|
| היגיון | חשיבה מילולית | שאלות הסקה והבנה לוגית | חרטטת, עכברי מעבדה, דימויים, סידורים, תנאי קבלה, טענות כלל, כפל משמעות |
| קושיות | חשיבה כמותית | בעיות מילוליות שדורשות בניית מודל | כלליות, ממוצע, אחוזים, הספק, תנועה, הסתברות, קומבינטוריקה, יחס, עברית למתמטית, חפיפה |
| אלגברה | חשיבה כמותית | שאלות טכניות בביטויים ומשוואות | משוואות, חלוקות, אי-שוויונים, חזקות ושורשים, הכל ב-$, חיבור וחיסור שברים, אותיות, כפל מקוצר, זוגיות |
| גאומטריה | חשיבה כמותית | צורות, שטחים, זוויות ומרחב | מרובעים, תלת-מימד, משולשים, מעגלים, מערכת צירים, מצולעים משוכללים, שחור לבן, דמיון, מקבילים, כלליות, זוויות |
| אנלוגיות, השלמת משפטים | חשיבה מילולית (פורמט ישן) | סוגי שאלות ממבחנים עד 2011, שלא סווגו לתת-סוגים | ללא תת-סוגים |
שימו לב למה שלא נמצא בטבלה, כי זו ההחלטה החשובה. הבנת הנקרא, גרפים, אנגלית, ואנלוגיות והשלמת משפטים בפורמט הנוכחי לא קיבלו סיווג במיפוי הזה. לא כי הם לא חשובים, אלא כי בשיטת ההוראה של זינוק אין להם חלוקה לתת-סוגים שמשנה את דרך הפתרון. גם נושאים שיצאו מהמבחן, כמו השוואה כמותית או החלפת אותיות, נשארו בחוץ. ההנחיה שקיבלנו ממי שבנה את המפה הייתה חד-משמעית: אל תמציאו סוג לשאלה שאין לה סוג.
מה בנינו: שכבה, לא החלפה
למנוע האדפטיבי שלנו יש כבר סיווג משלו לכל שאלה: מימד היכולת שהיא מודדת, מתוך ארבעה עשר מימדים שעליהם כתבנו במאמר על שקלול ראיות. הסיווג הזה מזין את בחירת השאלה הבאה, את מסלול הלימוד ואת נקודות הבדיקה. הפיתוי הראשון היה להחליף אותו במפה החדשה, כי היא עשירה יותר. התנגדנו לפיתוי הזה משתי סיבות.
הראשונה היא שהמימדים והמפה עונים על שאלות שונות. המימד אומר "מה השאלה מודדת", והמפה אומרת "איך מלמדים לפתור אותה". שאלת אחוזים ושאלת ממוצע יכולות לחיות באותו מימד יכולת ולהיות שני שיעורים שונים לגמרי. השנייה היא שהחלפת סיווג של מנוע חי היא ניתוח בלב פתוח: כל דירוג, כל מסלול וכל נקודת בדיקה שנצברו על תלמידים אמיתיים בנויים על המימדים הקיימים.
לכן המפה יושבת בשכבה נפרדת, לצד המימד, עם רישום של מי סיווג, מתי ומאיזה מקור. שני הסיווגים קיימים לכל שאלה, ואף אחד לא דורס את השני. המנוע ממשיך לעבוד כרגיל, ובמקביל אפשר להתחיל לענות על שאלות חדשות: באיזה תת-סוג התלמיד הזה נופל שוב ושוב? האם שאלות "הספק" באמת קשות יותר משאלות "תנועה", כפי שהמורים חושבים, או שזו אגדה?
הכלל השני שקבענו הוא על מה שלא ידוע. כשמבחן נוסף מגיע והמסווג לא בטוח, השאלה לא מקבלת תת-סוג מנוחש, אלא סימון "לבדיקה" עם הסיבה. נכון למועד המיפוי, קצת יותר ממאה ושבעים שאלות סומנו כך. זה מספר קטן ביחס למאגר, ולכן היה קל להתעלם ממנו. אנחנו מעדיפים מאה שבעים שאלות עם סימן שאלה גלוי על פני מאה שבעים שאלות עם תשובה בטוחה ושגויה. את שם התת-סוג אנחנו גם לא "מסבירים" בשום מקום באפליקציה: "חרטטת" ו"עכברי מעבדה" הם מונחים של הכיתה, והפירוש שלהם שייך למי שמלמד אותם.
מה טעינו בדרך: הרשומה שקיבלנו ממפה את השאלות לפי מספרן במבחן: "סתיו, מילולי ראשון, שאלות אחת עד שלוש: חרטטת". כשהצלבנו את זה עם המאגר גילינו שבחלק מהמבחנים, בעיקר בין 2020 ל-2023, המספור שבמאגר לא תואם למספור במפה. באחד המקרים המפה תיארה שאלות היגיון במיקום שבו במאגר יושבות שאלות אנלוגיות. ההסבר הסביר הוא שבשנים האלה המרכז הארצי פרסם גרסאות שונות של אותו מבחן, ובכל גרסה השאלות הוזזו. הפיתוי היה להזיז את המספרים עד שיתאימו. במקום זה סירבנו לרשום את השורות האלה, כמה עשרות בסך הכל, והחזרנו אותן למסווג עם הפער המדויק. מפה שמתאימה בכוח היא גרועה ממפה עם חור.
מה זה לא (עדיין)
חשוב לומר את זה במפורש: נכון להיום, המפה הזו היא כלי של הצוות, לא מסך של התלמיד. אין באפליקציה עמוד שמראה לכם "אחוז הצלחה בחרטטת", ואין תרגול שמסונן לפי תת-סוג. זה בכוונה. לפני שמראים לתלמיד סטטיסטיקה על קטגוריה, צריך לוודא שהקטגוריה מחזיקה מים: שיש בה מספיק שאלות, ששאלות באותו תת-סוג באמת מתנהגות דומה מבחינת קושי, ושהסיווג יציב בין מסווגים שונים. זו בדיוק הבדיקה שתיארו סן וקדינגר: אם עקומת הלמידה של "הספק" חלקה, הקטגוריה אמיתית. אם היא מקפצת, אולי "הספק" הוא בעצם שני דברים.
יש גם עבודה שנשארה על השולחן. כמה מאות שאלות במפה שייכות למועדי בחינה שעדיין לא נכנסו למאגר התרגול, ומאה ועשרים ומשהו שאלות היגיון במאגר לא כוסו על ידי המפה. וכל מועד חדש שהמרכז הארצי מפרסם דורש סבב מיפוי נוסף. מפה של מבחן חי היא לעולם לא גמורה.
טעויות נפוצות במיון שאלות
- למיין לפי נושא מתמטי במקום לפי דרך פתרון. "אחוזים" בפסיכומטרי הוא לא פרק בספר חשבון, אלא סוג של מלכודת. מיון לפי "אחוזים = שברים" מפספס את זה שהתלמיד יודע אחוזים ונופל על הניסוח.
- להמציא קטגוריה כדי שלא יישאר "לא מסווג". טבלה מלאה נראית טוב יותר, ומטעה יותר. שאלה בלי סוג היא מידע. שאלה עם סוג שגוי היא רעש שנראה כמו מידע.
- להחליף את הסיווג הקיים בחדש. מנוע שרץ על תלמידים אמיתיים בנוי על הסיווג הישן. שכבה חדשה ליד הישן מאפשרת להשוות. החלפה מאפשרת רק להתפלל.
- לסמוך על מספור שאלות בין גרסאות. "שאלה 12 בפרק הכמותי הראשון" היא לא מזהה יציב, בעיקר במבחנים שיצאו בכמה גרסאות. המזהה הוא תוכן השאלה.
- להראות לתלמיד סטטיסטיקה על קטגוריה שעוד לא נבדקה. "אתה חלש בדמיון" הוא משפט שמשפיע על מה שהתלמיד יעשה מחר. הוא צריך להיות מבוסס על מספיק שאלות, ולא על שלוש.
מה זה אומר עליכם, התלמידים
- לפני שפותרים, שואלים "איזה סוג זה". זה ההבדל בין מתחיל למומחה בניסוי של צ'י, וזה הרגל שאפשר לאמן. שאלה של שני ברזים ושאלה של שני פועלים הן אותה שאלה. ברגע שזיהיתם את הסוג, זיהיתם גם את הטבלה.
- ערבבו סוגים בכוונה. אחרי שלמדתם סוג חדש, אל תפתרו עשרים שאלות שלו ברצף. פתרו חמש, ואז חזרו לשאלות מסוגים קודמים. הזיהוי הוא החלק שנבחן במבחן, והוא לא נבחן כשכל השאלות מאותו סוג.
- נהלו רשימת "נפילות" לפי סוג, לא לפי מבחן. "טעיתי ב-4 שאלות במבחן 3" לא אומר כלום. "טעיתי בשלוש שאלות הסתברות השבוע" הוא תוכנית לימוד.
- המונחים של הכיתה הם שלכם. אם המורה אומר "זו חרטטת", השם הזה הוא קיצור לדרך פתרון שלמה. שאלו מה הוא אומר בדיוק, ואל תסתפקו בהבנה מרפרפת של השם.
- ללומד עצמאי: קחו מבחן פסיכומטרי אחד ונסו למיין את השאלות הכמותיות לקבוצות לפי דרך פתרון, לפני שפותרים. אחר כך פתרו ובדקו אם המיון החזיק. זה תרגול קשה יותר מהפתרון עצמו, וזה בדיוק העניין.
המפה של חיים היא לא הסוף, אלא תשתית: שכבה שמאפשרת לשאול שאלות שלפני כן לא היה אפשר לשאול. איך המנוע מחליט מה מודדת כל שאלה? במאמר על שקלול ראיות. איך הוא מחליט כמה כל שאלה קשה, לפי התלמידים ולא לפי הכותב? במאמר על כיול פריטים. ולמה שאלות ממבחני עבר הן המשאב הכי יקר במאגר? במאמר על תקציב שאלות-האמת. לשאר המאמרים: המעבדה של זינוק.
שאלות ותשובות
מה זו "קושיה" בפסיכומטרי?
מונח של הכיתה, לא של המבחן: בעיה מילולית בחשיבה כמותית שדורשת לבנות מודל (טבלה, משוואה) לפני החישוב. בזינוק מחלקים את הקושיות לעשרה תת-סוגים, כמו הספק, תנועה, אחוזים והסתברות, שלכל אחד דרך פתרון משלו.
האם המרכז הארצי משתמש בסיווג הזה?
לא. מדצמבר 2026 המבחן הרשמי בודק שני תחומים, חשיבה מילולית וחשיבה כמותית (האנגלית נבדקת בנפרד בבחינת אמירנט), והחלוקה הרשמית אינה כוללת תת-סוגים. המפה של זינוק היא שכבה פדגוגית מעל המבחן, שנבנתה מתוך ניסיון הוראה על מבחני עבר.
למה אין תת-סוגים להבנת הנקרא, לגרפים או לאנגלית?
כי בשיטת ההוראה של זינוק אין להם חלוקה שמשנה את דרך הפתרון. ההנחיה של מי שבנה את המפה הייתה לא להמציא סוג לשאלה שאין לה סוג. שאלה בלי סיווג היא מידע; שאלה עם סיווג שגוי היא רעש.
האם המפה מחליפה את הסיווג של מנוע הלמידה?
לא. המנוע ממשיך לעבוד על מימדי היכולת שלו, והמפה נשמרת בשכבה נפרדת לצידם, עם רישום מי סיווג ומתי. שני הסיווגים עונים על שאלות שונות: מה השאלה מודדת, ואיך מלמדים לפתור אותה.
האם אפשר לראות באפליקציה את אחוזי ההצלחה שלי לפי תת-סוג?
עדיין לא. לפני שמראים לתלמיד סטטיסטיקה על קטגוריה צריך לוודא שיש בה מספיק שאלות, שהשאלות בה מתנהגות דומה, ושהסיווג יציב. עד אז המפה היא כלי של הצוות.
למה כדאי לערבב סוגי שאלות בתרגול?
מחקרי תרגול משולב (Rohrer ועמיתיו) מראים שערבוב סוגים משפר את הביצוע במבחן לעומת תרגול בבלוקים, כי הוא מאלץ לזהות את סוג השאלה לפני הפתרון. במבחן עצמו אף אחד לא אומר לכם איזה סוג זה.
מקורות
- Chi, Feltovich & Glaser (1981). Categorization and representation of physics problems by experts and novices. doi.org/10.1207/s15516709cog0502_2
- Kikumi K. Tatsuoka (1983). Rule space: An approach for dealing with misconceptions based on item response theory. doi.org/10.1111/j.1745-3984.1983.tb00201.x
- Cen, Koedinger & Junker (2006). Learning Factors Analysis: A general method for cognitive model evaluation and improvement. doi.org/10.1007/11774303_17
- Koedinger, Corbett & Perfetti (2012). The Knowledge-Learning-Instruction framework: Bridging the science-practice chasm to enhance robust student learning. doi.org/10.1111/j.1551-6709.2012.01245.x
- Rohrer & Taylor (2007). The shuffling of mathematics problems improves learning. doi.org/10.1007/s11251-007-9015-8
- Rohrer, Dedrick & Stershic (2015). Interleaved practice improves mathematics learning. doi.org/10.1037/edu0000001
