كل المقالات

بناء تفوق: منصة اختبارات كان عليها أن تحاكي الاختبار الحقيقي

التحضير للقدرات والتحصيلي يقوم كله على المطابقة: توقيت دقيق، وسلوك أسئلة دقيق، وتقدّم يصدّقه الطالب فعلًا. ما بنيناه، وما رفضنا بناءه عمدًا، وما ينتقل منه إلى أي نظام تقييم.

· 7 دقائق قراءة · Cozyplus Technologies

تُعِدّ "تفوق" طلابًا في المملكة العربية السعودية لاختباري القدرات والتحصيلي، وهما الاختباران الوطنيان اللذان يحددان أين يدرس الطالب وماذا يدرس. سجّل في السنة الأولى ستة عشر ألف طالب، وتحمل التطبيقات المبنية على المحرك نفسه تقييم 4.7 على App Store. هذه الأرقام نتيجة قرار اتُّخذ مبكرًا: أن تكون المطابقة للاختبار الحقيقي هي متطلب المنتج، وكل ما عداها ثانويًا.

يبدو هذا بديهيًا، وهو ليس الطريقة التي تُبنى بها معظم برمجيات التحضير للاختبارات. الغريزة المعتادة أن يكون التدريب ألطف من الاختبار: توقيت متسامح، وتلميحات، ونبرة مشجّعة، ودرجة تصعد. كل ذلك ينتج طالبًا يبلي حسنًا في التطبيق وسيئًا في القاعة، ثم يتوقف عن تصديق التطبيق، وهو محق.

المطابقة تشمل الأجزاء المزعجة

الاختبار الوطني تجربة محددة. الأقسام تأتي بترتيب ثابت، ولكل قسم مدته، ولا يمكن العودة إلى قسم أُغلق، والساعة لا تتوقف لأن الطالب أشاح بنظره. وتظهر الأسئلة بصيغ لها أعرافها، وبعض هذه الأعراف غير بديهي حين يقابله الطالب أول مرة.

أعدنا إنتاج ذلك كله، بما فيه ما يجعل التدريب غير مريح. القسم المحاكى ينتهي بانتهاء مؤقته، في منتصف سؤال إن كان الطالب هناك. ولا يوجد زر إيقاف مؤقت في وضع المحاكاة. والتنقل بين الأقسام يتبع القواعد الحقيقية لا القواعد المريحة. وأول مرة يخوض فيها الطالب محاكاة كاملة تكون التجربة غالبًا أسوأ مما توقع. وهذا هو المقصود. من الأفضل بكثير أن يحدث ذلك في غرفته في مارس لا في قاعة الاختبار.

الموضع الوحيد الذي نخالف فيه هو ما بعد الاختبار. الاختبار الحقيقي يعطي الطالب درجة، أما محاكاتنا فتعطي درجة ومراجعة كاملة: كل سؤال، وما أجاب، وما الإجابة الصحيحة، وكم استغرق، وأين ضيّع وقته. قيمة الاختبار التدريبي كلها في المراجعة، والمنصة التي تعرض درجة ولا شيء بعدها تكون قد أهدرت ثلاث ساعات من عمر الطالب.

مجموعة قواعد واحدة، ثلاث منصات

تعمل "تفوق" على الويب وiOS وأندرويد. وأهم قرار هندسي كان أن تعيش قواعد الاختبار في مكان واحد، وألا يُعاد تنفيذها لكل منصة.

السبب ليس الكفاءة بل الصحة. قواعد التوقيت، والانتقال بين الأقسام، والتصحيح، وأهلية ظهور السؤال، كلها منطق يكون فيه التباين الصغير غير مرئي في الاختبار وقاتلًا للثقة. فإذا سمحت نسخة أندرويد للطالب بالعودة إلى قسم مغلق لأن أحدهم نفّذ التنقل بطريقة مختلفة قليلًا، حصل طالبان يتدربان معًا على تجربتين مختلفتين، واكتشفا ذلك، وسقط ادعاء المنصة المركزي.

لذلك تُعرَّف القواعد مرة واحدة على الخادم، ويعرضها كل تطبيق. التطبيقات مسؤولة عن العرض والإدخال والصمود دون اتصال، وليست مسؤولة عن تقرير متى ينتهي القسم. وحين تتغير قاعدة، تتغير مرة واحدة، وفي كل مكان في اليوم نفسه.

ولهذا تكلفة يجب ذكرها بصراحة. التوقيت المرجعي على الخادم يعني أن الاتصال مهم، ولا يمكن إخبار طالب على شبكة جوال ضعيفة في منتصف محاكاة بأن اختباره لاغٍ. لذلك تحتفظ التطبيقات بحالة كافية لمواصلة القسم محليًا ثم المطابقة عند عودة الاتصال، مع بقاء الخادم مرجعًا للنتيجة النهائية. وقد استغرق بناء هذه المطابقة بشكل سليم وقتًا أطول من بناء محرك التوقيت نفسه. هذا نوع العمل الذي لا يظهر في قائمة مزايا، وهو سبب عمل المنتج على الشبكات الحقيقية.

متكيف، لكن دون غموض أبدًا

تتكيف الخطة الدراسية مع الطالب. هذا صار حدًّا أدنى، وهو أيضًا الموضع الذي تفقد فيه معظم المنصات مستخدميها.

العطل هو الغموض. يخبر نظام طالبًا أن يقضي هذا الأسبوع في المقارنات الكمية، ولا يعرف الطالب لماذا. ربما كان النموذج محقًا، وربما كان يستجيب لجلسة سيئة واحدة في يوم كان فيه متعبًا. في الحالتين طُلب من الطالب أن يأخذ توجيهًا من شيء يرفض أن يشرح نفسه، والمراهقون لا يميلون إلى ذلك، ولا أولياء أمورهم الذين يدفعون غالبًا.

لذلك تحمل كل توصية دليلها. حين تقول الخطة اعمل على موضوع ما، تعرض المحاولات التي أنتجت هذا الاستنتاج: أي أسئلة، ومتى، وكم استغرقت، وما النمط. يستطيع الطالب أن ينظر ويوافق، أو ينظر ويقول إن ذلك كان أسبوع زفاف أخي ولم أكن مركزًا. ونسمح له بقول ذلك؛ يستطيع تخفيض وزن جلسة، فتستجيب الخطة.

السماح للطالب بتجاوز النموذج غير مريح لمن يعتقد أن النموذج أعلم. وعلى المجموع، النموذج أعلم على الأرجح. لكن خطة يتبعها الطالب أثمن من خطة أفضل يتجاهلها، والقدرة على الاختلاف مع النظام هي ما يجعل بقية نصائحه ذات مصداقية.

واخترنا كذلك ألا نكيّف الصعوبة أثناء المحاكاة. جلسات التدريب تتكيف، أما المحاكاة الكاملة فلا، لأن محاكاة تعدّل نفسها لإبقاء الطالب مرتاحًا لم تعد قياسًا لموقعه الحقيقي. والخلط بين الاثنين أشيع خطأ تصميمي نراه في هذا المجال.

ما رفضنا بناءه

طُلبت منا لوحة متصدرين أكثر من مرة، ولم نبنِ لوحة عامة. ترتيب الطلاب بالدرجات أمام أقرانهم ممتاز لمؤشرات التفاعل وسيئ لطلاب النصف الأدنى، وهم تحديدًا الأحوج إلى مواصلة التدريب. المقارنة متاحة مع تاريخ الطالب نفسه ومع نطاقات الدرجات التي يحتاجها لهدفه، وهي المقارنة التي تفيد فعلًا.

وطُلبت منا سلاسل الأيام وآليات الضغط اليومي، فأبقيناها في حدها الأدنى. الطالب المستعد لاختبار وطني يحمل ضغطًا أكبر مما يمكن لإشعار أن يضيف إليه بفائدة، والخطة الدراسية المبنية على الشعور بالذنب تنهار في أول أسبوع تنكسر فيه.

ورفضنا أيضًا الوعد بتنبؤات درجات بدقة زائفة. تعرض المنصة للطالب موقعه من النطاقات التي يحتاجها، بمدى صادق. إخبار شاب في السابعة عشرة بأنه سيحصل على رقم بعينه ادعاء لا تستطيع أي منصة تحضير إسناده، ومن يطلقه يستدين مصداقية سيسددها في أغسطس.

ما ينتقل إلى نظام تقييم حكومي

معظم هذا ليس خاصًا بالتحضير للاختبارات. أي نظام يقيس شخصًا ويترتب عليه أثر يواجه المشكلات الثلاث نفسها.

الأولى المطابقة بين التدريب والاختبار الحقيقي. إن قدّمت جهة ترخيص نموذجًا تجريبيًا يسلك سلوكًا مختلفًا عن الاختبار الفعلي، فقد أنشأت قناة شكاوى. يجب أن يُولَّد النموذج التجريبي من محرك القواعد نفسه الذي يولّد الاختبار الحقيقي، لا أن يُصان على حدة.

والثانية قابلية تفسير أي حكم تكيفي أو آلي. إن قرر نظام أمرًا يخص مواطنًا بناء على أدائه، فعلى المواطن أن يرى ما أنتج ذلك القرار، بلغته، على الشاشة التي ظهر فيها القرار. لا عند الطلب، ولا عبر تذكرة دعم. على الشاشة.

والثالثة أن العبرة بالمراجعة لا بالنتيجة. النتيجة تخبر الشخص أين يقف، أما المراجعة فتخبره بما يفعله تاليًا، وهي ما يجعل النظام يبدو في صفه.

إن كنت تقيّم منصة تقييم، فهذا هو الاختبار الذي نجريه عند القبول. خذ حساب مرشح واحد، وشغّل تقييمًا كاملًا مؤقتًا على كل منصة مدعومة، الويب ونظامي الجوال، ثم قارن التجارب الثلاث سؤالًا بسؤال وثانية بثانية. ثم اقطع الشبكة عمدًا في منتصف التقييم على تطبيق الجوال، وأعدها، وتحقق مما جرى للوقت المنقضي وللإجابات المرسلة. مهما قال العرض عن الدقة أو حجم المحتوى، فنصف يوم الاختبار هذا يخبرك إن كان النظام قد بُني مرة واحدة أم ثلاث مرات.

تخططون لتحول رقمي أو تجربة ذكاء اصطناعي أو خدمة للمواطنين؟

أرسلوا لنا الموجز أو وثائق المنافسة. سيرد عليكم مهندس، لا مندوب مبيعات، خلال يومي عمل.