इंटेलिजन्ट टेस्ट जनरेशन (निर्मिती)
जेव्हा विद्यार्थ्यांचे मूल्यमापन करण्याची वेळ येते, तेव्हा टेस्ट पेपर-आधारित मूल्यमापन पद्धती अजूनही जगभरातील सर्वात लोकप्रिय पद्धत आहे. टेस्ट पेपरचा उद्देश हा मोठ्या लोकसंख्येचे मूल्यमापन करत, त्यांच्या शैक्षणिक क्षमतेनुसार मूल्यमापन करणे आणि त्यांना विविध क्षमता बंधांमध्ये वर्गीकृत करणे असा आहे. म्हणूनच, टेस्ट पेपरमध्ये विभेदन घटक, अभ्यासक्रम व्याप्ती आणि काठिण्य पातळीतील विविधतेसह प्रश्न समाविष्ट करणे आवश्यक आहे. परीक्षेच्या पातळीशी जुळणाऱ्या उच्च दर्जाच्या टेस्ट स्वयंचलितपणे निर्माण करण्यासाठी कोणत्याही व्यावसायिक अनुप्रयोगाच्या अनुपस्थितीमुळे, टेस्ट निर्मिती मुख्यत्वे मॅन्युअल (हस्तसाध्य) आणि कंटाळवाणी प्रक्रिया राहिली आहे.
वास्तविक जगातील परीक्षेच्या पॅटर्नबरोबरच या परीक्षेच्या जटिलता आणि इतर गुणधर्मांशी जुळणारा टेस्ट पेपर स्वयंचलितपणे तयार करणे ही NP-हार्ड combinatorics (संयोजनशास्त्र) समस्या आहे. ही मूलत: एक जटिल आणि स्वतंत्र स्वरूपाची ऑप्टिमायझेशन समस्या आहे, ज्यामध्ये आपण हजारो प्रश्नांच्या सर्च स्पेसमधून, साधारणपणे 100 पेक्षा कमी टेस्ट प्रश्न अनेक निर्बंधाचे समाधान करण्यासाठी निवडतो. यामध्ये काठिण्य पातळीचे वितरण आणि प्रश्नांनुरूप प्रश्न सोडवण्याची वेळ, टेस्ट स्तरावर अभ्यासक्रमाची व्याप्ती, परीक्षेत विचारले जाणाऱ्या प्रश्नांमागील महत्त्वाच्या संकल्पनांचे वितरण, परीक्षेत पूर्वी विचारल्या न केलेल्या संकल्पनांचा शोध, प्रश्न सोडवण्यासाठी आवश्यक कौशल्यांचे वितरण, मागील वर्षाच्या परीक्षेच्या प्रश्नांचे नमुने इत्यादी निवडले जातात.
Embibe ने इन-हाऊस मशीन लर्निंगवर आधारित स्टॅक विकसित केला आहे जो जेनेटीक अल्गोरिदम वापरतो आणि टेस्ट पेपर स्वयंचलितपणे तयार करण्यासाठी ग्रिडी इंटरमीडिएट स्टेप्ससह सिम्युलेटेड ॲनिलिंग वापरतो. हे कोणत्याही परीक्षेसाठी गेल्या N वर्षांच्या वास्तविक-जागतिक टेस्ट पेपरशी साम्य राखत जुळवू शकतात. आपण कोणत्याही स्वयंनिर्मित पेपरची गुणवत्ता मोजण्यासाठी टेस्ट पेपरची गुणवत्ता मोजण्याचा एक नवीन मार्ग देखील परिभाषित केला आहे. या अल्गोरिदमचे तपशील या पेपरच्या व्याप्तीच्या बाहेर आहेत.
केस स्टडी: आकृती 1 Embibe च्या स्वयंचलित टेस्ट निर्मीती प्रणालीद्वारे तयार केलेल्या टेस्ट पेपर केस स्टडीचे परिणाम दर्शवते. आपण 20 टेस्ट पेपर तयार करण्यासाठी प्रणालीचा वापर केला आणि आपल्या प्लॅटफॉर्मवर ~8000 विद्यार्थ्यांच्या यादृच्छिक नमुन्यासाठी या प्रशासित केल्या. आकृती 1 मध्ये विद्यार्थ्यांनी मिळवलेल्या गुणांचे वितरण बॉक्स प्लॉट, प्रत्येक टेस्ट पेपरसाठी एक बॉक्स प्लॉट म्हणून दर्शवले आहे. आपण निरीक्षण करू शकतो की चार टेस्ट, टेस्ट -15, टेस्ट -16, टेस्ट -17 आणि टेस्ट -18 वगळता गुणांचे वितरण सर्व टेस्टमध्ये सारखेच आहे, या सर्वांच्या गुणांच्या वितरणात सकारात्मक असममितता आहे. याचे कारण असे की, अंतगर्त प्राध्यापकांनी या परीक्षेच्या प्रश्नपत्रिकांच्या प्रश्न संचात मॅन्युअली बदल केले, ज्यामुळे गुणांच्या वितरणामध्ये असममितता निर्माण झाली. हे निकाल दर्शवतात की Embibe ची ऑटोमेटेड टेस्ट जनरेशन सिस्टीम विद्यार्थ्यांच्या सरासरी कार्याच्या मेट्रिकचा वापर करून मोजली जाते तेव्हा सातत्याने सारख्याच स्वरूपाच्या टेस्ट निर्माण करण्यास सक्षम आहे.