از نمره تا تصمیم: خروجی تحلیلی آزمون چگونه به بهبود آموزش کمک می‌کند؟

فرض کنید آزمون پایان دوره برگزار شده و میانگین کلاس شصت‌وهشت است. یک عدد روی میز است و پرسش‌های بی‌پاسخ پشت آن صف کشیده‌اند: آیا این میانگین خوب است؟ کدام مبحث درست یاد گرفته نشده؟ مشکل از سوال‌ها بود یا از آموزش؟ بیشتر مدیران آموزشی و مسئولان منابع انسانی این صحنه را دیده‌اند. نمره، پایان یک آزمون است، اما می‌تواند آغاز یک تصمیم باشد، به شرط آنکه داده‌ها خوانده شوند. در این مقاله می‌بینیم خروجی تحلیلی آزمون چه چیزهایی را آشکار می‌کند و چطور می‌شود آن را به اقدام تبدیل کرد.

نمره به‌تنهایی چه چیزی را پنهان می‌کند؟

یک نمره نهایی خلاصه‌ای بسیار فشرده است و در فشرده‌سازی، اطلاعات مهمی از بین می‌رود. دو شرکت‌کننده با نمره برابر ممکن است تصویر کاملاً متفاوتی داشته باشند: یکی در مباحث پایه قوی و در مباحث پیشرفته ضعیف است، دیگری برعکس. دو کلاس با میانگین یکسان نیز ممکن است یکی همگن باشد و دیگری شکاف عمیقی بین قوی‌ها و ضعیف‌ها داشته باشد. اگر فقط به نمره نگاه کنیم، همه این تفاوت‌ها یک شکل می‌شوند. هزینه این ندیدن واقعی است. مدرسی که نمی‌داند کجا باید بازآموزی کند، کل دوره را از اول تکرار می‌کند. مدیر آموزش سازمانی که نمی‌داند کدام بخش دوره اثر نداشته، بودجه سال بعد را همان‌طور خرج می‌کند. و شرکت‌کننده‌ای که فقط نمره می‌گیرد، نمی‌داند برای پیشرفت باید روی چه چیزی کار کند.

خروجی تحلیلی دقیقاً چه چیزی به ما می‌گوید؟

خروجی تحلیلی آزمون، یعنی گزارش‌هایی که فراتر از نمره، الگوها را نشان می‌دهند. در یک نگاه ساده، سه لایه پرسش را می‌توان با آن جواب داد: درباره شرکت‌کنندگان، درباره سوال‌ها و درباره آموزش.

درباره شرکت‌کنندگان: چه کسی کجا ایستاده است؟

پراکندگی نمرات، عملکرد در هر سرفصل و مقایسه گروه‌ها تصویر روشنی از سطح یادگیری می‌دهد. وقتی بدانید ۴۰ درصد شرکت‌کنندگان در یک مبحث مشخص ضعیف‌اند، دیگر نیازی به حدس‌زدن نیست. همین اطلاعات به شما اجازه می‌دهد برای گروهی که عقب‌تر است، تمرین هدفمند طراحی کنید و برای گروه پیشرو، چالش‌های پیشرفته‌تر بگذارید.

درباره سوال‌ها: کدام سوال خوب کار کرده است؟

هر سوال هم یک «آزمون» دارد. ضریب دشواری نشان می‌دهد چه نسبتی از شرکت‌کنندگان درست پاسخ داده‌اند. ضریب تمیز نشان می‌دهد سوال بین افراد مسلط و غیرمسلط تفاوت می‌گذارد یا نه. سوالی که همه درست جواب می‌دهند یا اصلاً کسی درست جواب نمی‌دهد، اطلاعات کمی دارد. گاهی هم یک گزینه غلط اصلاً انتخاب نمی‌شود، یعنی عملاً گزینه‌ای بی‌اثر است. چنین یافته‌هایی به شما کمک می‌کند بانک سوال را اصلاح و به‌مرور باکیفیت‌تر کنید.

درباره آموزش: مشکل از کجاست؟

اگر در چند گروه مختلف، شرکت‌کنندگان در یک مبحث مشخص ضعیف‌اند، احتمال زیاد مشکل از روش آموزش یا محتوای آن مبحث است، نه از شرکت‌کنندگان. این تفکیک بسیار ارزشمند است، چون جلوی سرزنش بی‌جا را می‌گیرد و انرژی را به جای درست هدایت می‌کند. در آموزش سازمانی، این دقیقاً همان نقطه‌ای است که می‌توان نتیجه گرفت کدام بخش دوره باید بازنویسی شود.

از داده تا اقدام: چطور گزارش را به تصمیم تبدیل کنیم؟

داشتن گزارش کافی نیست؛ باید یک چرخه کوچک بسازیم. تجربه ما این است که ساده‌ترین چرخه، همان مؤثرترین است: پرسش بپرسید: پیش از باز کردن گزارش، بنویسید دنبال جواب کدام سوال هستید. مثلاً «کدام سرفصل بیشترین ضعف را دارد؟» الگو را پیدا کنید: به‌جای تمرکز بر یک عدد، به روند و مقایسه نگاه کنید: بین گروه‌ها، بین سرفصل‌ها و بین دوره‌ها. علت را بررسی کنید: ضعف یک مبحث ممکن است از سوال بد، آموزش ناکافی یا شرایط آزمون باشد. با یک گفت‌وگوی کوتاه با مدرس یا شرکت‌کنندگان، فرضیه را بسنجید. اقدام کوچک و مشخص بگذارید: بازآموزی همان مبحث، اصلاح سوال، یا تغییر در ترتیب محتوا. در آزمون بعدی دوباره بسنجید: همین شاخص را مقایسه کنید تا ببینید اقدام اثر داشته است یا نه. این چرخه خوب است چون ترسناک نیست. لازم نیست یک تیم تحلیل داده داشته باشید. فقط باید عادت کنید بعد از هر آزمون چند ساعت را به خواندن نتایج اختصاص دهید.

تصمیم‌گیری: چه زمانی گزارش دستی کافی نیست؟

برای یک کلاس کوچک، چند ستون در اکسل ممکن است کار را راه بیندازد. اما چند نشانه می‌گوید زمان آن رسیده که سراغ سامانه بروید: گزارش‌گیری دستی ساعت‌ها یا روزها زمان می‌برد و خطا دارد. نتایج در فایل‌های جداگانه پراکنده است و مقایسه دوره‌ها سخت است. مدیران ارشد گزارش مدیریتی منظم و قابل اتکا می‌خواهند. سوال‌ها بارها استفاده می‌شوند و باید کیفیتشان رصد شود. آزمون در چند شعبه یا گروه برگزار می‌شود و لازم است نتایج با هم مقایسه شود. نتایج باید با سامانه‌های دیگر مثل آموزش یا منابع انسانی ارتباط داشته باشد. یک نکته مهم هم هست: تحلیل خوب به داده ساختاریافته نیاز دارد. اگر سوال‌ها برچسب سرفصل و سطح دشواری نداشته باشند، حتی بهترین گزارش هم نمی‌تواند بگوید ضعف در کدام مبحث است. به همین دلیل، تحلیل نتایج و بانک سوال را باید با هم دید، نه جدا از هم.

آینده جستجو و آینده سنجش

مدیران امروز بیشتر با پرسش‌های کامل به دنبال راه‌حل می‌گردند: «چطور نتایج آزمون کارکنان را طوری تحلیل کنم که بفهمم دوره آموزشی اثر داشته یا نه؟» پاسخ‌های خوب به این نوع پرسش‌ها از ترکیب فهم آموزشی و توان فنی ساخته می‌شود. شاید به همین دلیل است که آینده سنجش هم به سمت چرخه‌های مداوم می‌رود: آزمون می‌گیریم، تحلیل می‌کنیم، آموزش را اصلاح می‌کنیم و دوباره می‌سنجیم. خبر خوب اینکه این مسیر هزینه سنگین یا دانش پیچیده نمی‌خواهد. کافی است داده‌هایتان از همین امروز ساختاریافته جمع شود. هر آزمونی که امروز با برچسب درست برگزار شود، فردا به سرمایه‌ای برای تصمیم‌های بهتر تبدیل می‌شود.

ابزار و راه‌حل: سامانه آزمون آنلاین Doraan

شرکت تدبیراندیشان دوران، هسته سامانه آزمون آنلاین Doraan را بر پایه تجربه اجرای پروژه‌های آزمون در نهادهای مختلف ساخته است. این هسته شامل بانک سوال، زمان‌بندی جلسه‌های آزمون، ضدتقلب پایه و خروجی تحلیلی است. در رابطه با موضوع این مقاله، چند نکته مهم است: خروجی تحلیلی و گزارش‌گیری: نتایج آزمون فقط به شکل نمره باقی نمی‌ماند و برای تصمیم‌گیری قابل استفاده می‌شود. بانک سوال: سوال‌ها به شکل سازمان‌یافته نگهداری می‌شوند و داده تحلیل، کنار آن‌ها معنا پیدا می‌کند. یکپارچگی با سامانه‌های موجود: امکان ارتباط نتایج با سامانه‌های آموزشی یا منابع انسانی سازمان. مقیاس‌پذیری و سفارشی‌سازی: پشتیبانی از آزمون‌های تستی و تشریحی و سناریوهای ویژه سازمان‌ها. تجربه ما در سامانه‌های دولتی، آموزشی و رفاهی نشان داده موفقیت پایدار وقتی حاصل می‌شود که معماری، امنیت، آموزش کاربر و نگهداشت همزمان دیده شوند. برای همین پیشنهاد می‌کنیم هر سازمان یک مالک محصول تعریف کند، استقرار را مرحله‌ای انجام دهد، معیارهای پذیرش کاربر نهایی را از ابتدا روشن کند، خطا و عملکرد را پس از انتشار پایش کند، آموزش نقش‌محور و کانال پشتیبانی مشخص داشته باشد و مستندات فرآیندی، ماتریس دسترسی نقش‌ها و فهرست یکپارچه‌سازی‌ها را از ابتدا ثبت کند.

چه کسب‌وکارها و سازمان‌هایی به تحلیل نتایج آزمون نیاز دارند؟

هر کسب‌وکاری که نیاز به برگزاری آزمون، سنجش مهارت، آموزش مستمر کارکنان یا غربالگری افراد داشته باشد، مخاطب بالقوه این راه‌حل است. نمونه‌های رایج: آموزش و پرورش: مدارس دولتی، غیرانتفاعی و خصوصی، آموزشگاه‌های زبان، آموزشگاه‌های فنی‌وحرفه‌ای و مهارتی، مؤسسات کنکور و آمادگی آزمون‌ها، مراکز تقویتی و کلاس‌های خصوصی، دانشگاه‌ها و مؤسسات آموزش عالی (میان‌ترم، پایان‌ترم، آزمون ورودی)، پلتفرم‌های آموزش آنلاین و دوره‌های ویدیویی، مهدکودک‌ها و مراکز پیش‌دبستانی، مراکز آموزش رانندگی. شرکت‌ها و سازمان‌های خصوصی: واحدهای آموزش و منابع انسانی، مراکز ارزیابی شایستگی و سنجش مهارت، شرکت‌های استخدامی و جذب نیرو، شرکت‌های دارای واحد HSE، شرکت‌های بزرگ با شعب پراکنده، بانک‌ها و مؤسسات مالی، شرکت‌های بیمه، شرکت‌های بازاریابی شبکه‌ای و فروش. نهادهای دولتی و عمومی: وزارتخانه‌ها و سازمان‌های دولتی (آزمون استخدامی، ارتقای شغلی، دوره‌های ضمن خدمت)، شهرداری‌ها، نیروهای مسلح و نهادهای نظامی، سازمان‌های رفاهی و خدمات اجتماعی، مراکز آموزش مدیریت دولتی. مراکز صدور مجوز و گواهینامه: سازمان‌های نظام‌مند صنفی مانند نظام مهندسی و نظام پزشکی، مؤسسات صدور گواهینامه‌های حرفه‌ای، مراکز آزمون‌های بین‌المللی و زبان، انجمن‌ها و اتحادیه‌های صنفی. حوزه سلامت و صنعت: بیمارستان‌ها و مراکز درمانی، دانشکده‌های علوم پزشکی، صنایع بزرگ، پتروشیمی، نفت و معدن، شرکت‌های حمل‌ونقل و لجستیک.

از کجا شروع کنیم؟ چهار گام ساده

صورت‌مسئله سازمان خود را در یک صفحه کوتاه بنویسید. معیارهای موفقیت را مشخص کنید: زمان، کیفیت داده و رضایت کاربر. وضعیت سامانه‌های فعلی و نقاط یکپارچه‌سازی را فهرست کنید. برای طراحی مسیر MVP و نگهداشت، با تیم دوران مشورت کنید. برای آشنایی بیشتر با سامانه آزمون آنلاین Doraan، استعلام قیمت یا بررسی امکان‌سنجی سفارشی‌سازی، به بخش محصولات وب‌سایت تدبیراندیشان دوران سر بزنید یا از مسیر تماس با تیم ما گفت‌وگو کنید.

پرسش‌های پرتکرار