ਸਵਾਲ ਭੇਦਭਾਵ ਕਾਰਕ

ਸਵਾਲ ਭੇਦਭਾਵ ਕਾਰਕ

ਟੈਸਟ ਸਭ ਤੋਂ ਵੱਧ ਤਰਜੀਹੀ ਮੁਲਾਂਕਣ ਤਕਨੀਕ ਹਨ ਜੋ ਸਿਖਿਆਰਥੀਆਂ ਦੁਆਰਾ ਨਿਸ਼ਾਨਾ ਸਿੱਖਣ ਦੇ ਨਤੀਜਿਆਂ ਦੇ ਵਿਰੁੱਧ ਪ੍ਰਦਰਸ਼ਨ ਨੂੰ ਮਾਪਣ ਲਈ ਵਰਤੀ ਜਾਂਦੀ ਹੈ। ਇਸ ਲਈ, ਵਿਦਿਆਰਥੀਆਂ ਦੇ ਸਿੱਖਣ ਦੇ ਪਾੜੇ ਦੀ ਪਛਾਣ ਕਰਨ ਅਤੇ ਵਿਦਿਆਰਥੀਆਂ ਦੀ ਸਿਖਲਾਈ ਨੂੰ ਵਧਾਉਣ ਲਈ ਟੈਸਟ ਨਿਰਪੱਖ ਅਤੇ ਪ੍ਰਭਾਵਸ਼ਾਲੀ ਹੋਣੇ ਚਾਹੀਦੇ ਹਨ। ਇਹਨਾਂ ਟੀਚਿਆਂ ਨੂੰ ਪੂਰਾ ਕਰਨ ਲਈ ਇੱਕ ਟੈਸਟ ਦੀ ਯੋਗਤਾ ਇਸ ਗੱਲ ਦਾ ਇੱਕ ਸਮੂਹ ਹੈ ਕਿ ਟੈਸਟ ਦਾ ਹਰੇਕ ਸਵਾਲ ਕਿੰਨਾ ਢੁਕਵਾਂ ਹੈ। ਇਸ ਤਰ੍ਹਾਂ, ਆਈਟਮ ਦੇ ਵਿਸ਼ਲੇਸ਼ਣ ਦੁਆਰਾ ਇੱਕ ਟੈਸਟ ਦੀ ਭਰੋਸੇਯੋਗਤਾ ਨੂੰ ਵਧਾਇਆ ਜਾ ਸਕਦਾ ਹੈ, ਜਿੱਥੇ ਹਰੇਕ ਪ੍ਰਸ਼ਨ ਜਾਂ ਆਈਟਮ ਲਈ ਵਿਦਿਆਰਥੀਆਂ ਦੇ ਜਵਾਬਾਂ ਦੀ ਵਰਤੋਂ ਟੈਸਟ ਦੀ ਕਾਰਗੁਜ਼ਾਰੀ ਦਾ ਮੁਲਾਂਕਣ ਕਰਨ ਲਈ ਕੀਤੀ ਜਾਂਦੀ ਹੈ। ਆਈਟਮ ਵਿਸ਼ਲੇਸ਼ਣ ਵਿੱਚ ਇੱਕ ਮਹੱਤਵਪੂਰਨ ਤਰੀਕਿਆਂ ਵਿੱਚੋਂ ਇੱਕ ਆਈਟਮ ਵਿਤਕਰਾ ਹੈ ਜੋ ਵੱਖ-ਵੱਖ ਸਿਖਿਆਰਥੀਆਂ ਵਿੱਚ ਫਰਕ ਕਰਨ ਵਿੱਚ ਇੱਕ ਸਵਾਲ ਦੀ ਸ਼ਕਤੀ ਨੂੰ ਦਰਸਾਉਂਦਾ ਹੈ। ਪ੍ਰਸ਼ਨ ਵਿਤਕਰਾ ਕਾਰਕ ਇੱਕ ਸੂਚਕਾਂਕ ਹੈ ਜੋ ਮਾਪਦਾ ਹੈ ਕਿ ਇੱਕ ਸਵਾਲ ਵੱਖ-ਵੱਖ ਉਪਭੋਗਤਾ ਸਮੂਹਾਂ ਵਿੱਚ ਕਿੰਨੀ ਚੰਗੀ ਤਰ੍ਹਾਂ ਫਰਕ ਕਰ ਸਕਦਾ ਹੈ। ਇਹ ਦਰਸਾਉਂਦਾ ਹੈ ਕਿ ਕਿਵੇਂ ਸਿਖਰਲੇ ਸਕੋਰਰਾਂ ਨੂੰ ਘੱਟ ਸਕੋਰਰਾਂ ਨਾਲੋਂ ਸਵਾਲ ਸਹੀ ਹੋਣ ਦੀ ਜ਼ਿਆਦਾ ਸੰਭਾਵਨਾ ਹੁੰਦੀ ਹੈ।

ਪ੍ਰਸ਼ਨਾਂ ਦੇ ਪ੍ਰਸ਼ਨ ਵਿਤਕਰੇ ਦੇ ਕਾਰਕ ਦੀ ਗਣਨਾ ਕਰਨ ਲਈ, ਏਮਬੀਬੇ ਨੇ ਰਵਾਇਤੀ ਅੰਕੜਾ – ਆਈਟਮ ਪੁਆਇੰਟ ਬਿਸੀਰੀਅਲ ਕੋਰੀਲੇਸ਼ਨ ਅਤੇ ਡੂੰਘੇ ਸਿੱਖਣ-ਆਧਾਰਿਤ ਤਰੀਕਿਆਂ ਦੀ ਵਰਤੋਂ ਕੀਤੀ ਹੈ। ਆਈਟਮ ਪੁਆਇੰਟ ਬਿਸੀਰੀਅਲ ਸਹਿ-ਸਬੰਧ ਅਸਲ ਵਿੱਚ ਇੱਕ ਵਿਦਿਆਰਥੀ ਲਈ ਪ੍ਰਸ਼ਨ ਸਕੋਰ ਅਤੇ ਕੁੱਲ ਸਕੋਰ ਵਿਚਕਾਰ ਇੱਕ ਪੀਅਰਸਨ-ਉਤਪਾਦ ਪਲ ਦਾ ਸਬੰਧ ਹੈ। ਇਸ ਲਈ, ਪ੍ਰਸ਼ਨ ਸਹੀ ਪਾਏ ਗਏ ਵਿਦਿਆਰਥੀਆਂ ਅਤੇ ਪ੍ਰਸ਼ਨ ਗਲਤ ਪਾਏ ਗਏ ਵਿਦਿਆਰਥੀਆਂ ਦੇ ਕੁੱਲ ਸਕੋਰਾਂ ਵਿੱਚ ਵੱਧ ਅੰਤਰ, ਪ੍ਰਸ਼ਨ ਵਿਤਕਰਾ ਕਾਰਕ ਮੁੱਲ ਵੱਧ ਹੋਵੇਗਾ। ਅਸੀਂ ਡੀਪ ਨਿਊਰਲ ਨੈੱਟਵਰਕ ਆਰਕੀਟੈਕਚਰ ਦੀ ਵਰਤੋਂ ਕਰਦੇ ਹੋਏ ਕਲਾਸੀਕਲ ਆਈਟਮ ਰਿਸਪਾਂਸ ਥਿਊਰੀ ਤੋਂ 2PL ਮਾਡਲ ਵੀ ਲਾਗੂ ਕੀਤਾ ਹੈ। ਵਿਦਿਆਰਥੀਆਂ ਦੇ ਯਤਨਾਂ ਦੇ ਅੰਕੜਿਆਂ ਦੇ ਮੱਦੇਨਜ਼ਰ, ਅਸੀਂ ਸਿਖਲਾਈ ਪ੍ਰਾਪਤ DNN ਦੇ ਭਾਰ ਤੋਂ ਪ੍ਰਸ਼ਨ ਦੇ ਮੁਸ਼ਕਲ ਪੱਧਰ ਅਤੇ ਵਿਤਕਰੇ ਦੇ ਕਾਰਕ ਨੂੰ ਪ੍ਰਾਪਤ ਕਰਦੇ ਹਾਂ। ਇੱਥੇ ਇੱਕ ਉਦਾਹਰਨ ਹੈ ਕਿ ਕਿਵੇਂ ਪ੍ਰਸ਼ਨ ਵਿਤਕਰੇ ਕਾਰਕ ਦਾ ਮੁੱਲ ਸਿਖਿਆਰਥੀਆਂ ਦੇ ਪ੍ਰਸ਼ਨ ਕੋਸ਼ਿਸ਼ਾਂ ਦੇ ਅੰਤਰਕਿਰਿਆਵਾਂ ਨਾਲ ਬਦਲਦਾ ਹੈ।

QDF = 0.11	QDF = 0.80
ਸਵਾਲ 1:ਘੱਟ ਅਣੂ ਭਾਰ ਦੇ ਅਲਕੋਹਲ ਹਨa ਸਾਰੇ ਘੋਲਨ ਵਿੱਚ ਘੁਲਣਸ਼ੀਲ (ਸਹੀ ਵਿਕਲਪ)ਬੀ. ਪਾਣੀ ਵਿੱਚ ਘੁਲਣਸ਼ੀਲc. ਸਾਰੇ ਘੋਲਨ ਵਿੱਚ ਘੁਲਣਸ਼ੀਲd. ਹੀਟਿੰਗ ‘ਤੇ ਪਾਣੀ ਵਿੱਚ ਘੁਲਣਸ਼ੀਲ	ਸਵਾਲ 2:ਐਸਪਰੀਨ ਵਜੋਂ ਵੀ ਜਾਣਿਆ ਜਾਂਦਾ ਹੈa ਐਸੀਟਿਲ ਸੈਲੀਸਿਲਿਕ ਐਸਿਡ (ਸਹੀ ਵਿਕਲਪ)ਬੀ. ਮਿਥਾਇਲ ਸੈਲੀਸਿਲਿਕ ਐਸਿਡc. ਐਸੀਟਿਲ ਸੈਲੀਸੀਲੇਟd. ਮਿਥਾਇਲ ਸੈਲੀਸੀਲੇਟ
ਸਾਰਣੀ 1: ਘੱਟ QDF ਅਤੇ ਉੱਚ QDF ਮੁੱਲਾਂ ਦੇ ਨਾਲ ਸਹੀ ਅਤੇ ਗਲਤ ਪ੍ਰਸ਼ਨਾਂ ਲਈ ਕੁੱਲ ਅੰਕਾਂ ਦੀ ਵੰਡ ਵਿਚਕਾਰ ਤੁਲਨਾ

ਇੱਥੇ, x-ਧੁਰਾ ਸਕੋਰ ਕੀਤੇ ਕੁੱਲ ਅੰਕਾਂ ਨੂੰ ਦਰਸਾਉਂਦਾ ਹੈ ਅਤੇ y-ਧੁਰਾ ਵਿਦਿਆਰਥੀਆਂ ਦੀ ਸਾਧਾਰਨ ਗਿਣਤੀ ਨੂੰ ਦਰਸਾਉਂਦਾ ਹੈ। ਪੀਲੀ ਲਾਈਨ ਉਹਨਾਂ ਵਿਦਿਆਰਥੀਆਂ ਦੇ ਕੁੱਲ ਅੰਕਾਂ ਦੀ ਵੰਡ ਨੂੰ ਦਰਸਾਉਂਦੀ ਹੈ ਜਿਨ੍ਹਾਂ ਦਾ ਪ੍ਰਸ਼ਨ ਗਲਤ ਹੈ। ਨੀਲੀ ਲਾਈਨ ਉਹਨਾਂ ਵਿਦਿਆਰਥੀਆਂ ਦੇ ਕੁੱਲ ਅੰਕਾਂ ਦੀ ਵੰਡ ਨੂੰ ਦਰਸਾਉਂਦੀ ਹੈ ਜਿਨ੍ਹਾਂ ਨੇ ਪ੍ਰਸ਼ਨ ਸਹੀ ਪਾਇਆ ਹੈ। ਪ੍ਰਸ਼ਨ 1 ਵਿੱਚ, ਪ੍ਰਸ਼ਨ 2 ਵਿੱਚ ਸਹੀ ਪ੍ਰਸ਼ਨ ਪ੍ਰਾਪਤ ਕਰਨ ਵਾਲੇ ਵਿਦਿਆਰਥੀਆਂ ਦੇ ਕੁੱਲ ਅੰਕਾਂ ਵਿਚਕਾਰ ਇੱਕ ਉੱਚ ਓਵਰਲੈਪ ਹੈ, ਜਦੋਂ ਕਿ ਪ੍ਰਸ਼ਨ 2 ਵਿੱਚ, ਓਵਰਲੈਪ ਬਹੁਤ ਘੱਟ ਹੈ ਅਤੇ ਇਸਲਈ, ਪ੍ਰਸ਼ਨ 1 ਦੇ ਮੁਕਾਬਲੇ ਪ੍ਰਸ਼ਨ 2 ਲਈ ਪ੍ਰਸ਼ਨ ਵਿਤਕਰੇ ਕਾਰਕ ਦਾ ਮੁੱਲ ਵੱਧ ਹੈ। ਅੰਤਿਮ ਪ੍ਰਸ਼ਨ ਵਿਤਕਰਾ ਕਾਰਕ ਮੁੱਲ ਉਪਰੋਕਤ ਵਿਧੀ ਅਤੇ ਟੈਸਟ ਮਾਪਦੰਡਾਂ ਦਾ ਵਧੀਆ-ਟਿਊਨਡ ਨਤੀਜਾ ਹੈ।

Embibe ਨੇ ਦੋ ਵੱਖ-ਵੱਖ ਟੈਸਟਾਂ ਵਿੱਚ ਵਿਦਿਆਰਥੀਆਂ ਦੇ ਪ੍ਰਦਰਸ਼ਨ ਦੀ ਤੁਲਨਾ ਕਰਨ ਲਈ ਇੱਕ ਪ੍ਰਮਾਣਿਕਤਾ ਪ੍ਰਯੋਗ ਕੀਤਾ:

1. ਬੇਸਲਾਈਨ ਨੀਤੀ: ਇੱਥੇ, ਮੁਸ਼ਕਲ ਪੱਧਰਾਂ ਅਤੇ ਸਿਲੇਬਸ ਕਵਰੇਜ ‘ਤੇ ਸੰਭਾਵਿਤ ਵੰਡ ਨੂੰ ਯਕੀਨੀ ਬਣਾਉਂਦੇ ਹੋਏ, ਜ਼ਮੀਨੀ ਸੱਚ ਡੇਟਾਬੇਸ ਤੋਂ ਭੇਦਭਾਵ ਦੇ ਕਾਰਕਾਂ ਦੇ ਕਾਰਨ ਬਿਨਾਂ ਪੱਖਪਾਤ ਦੇ ਸਵਾਲਾਂ ਦੀ ਚੋਣ ਕੀਤੀ ਜਾਂਦੀ ਹੈ।
2. ਕੇਵਲ ਵਿਤਕਰਾ ਨੀਤੀ: ਇੱਥੇ, ਸਿਲੇਬਸ ਕਵਰੇਜ ਨੂੰ ਯਕੀਨੀ ਬਣਾਉਂਦੇ ਹੋਏ, ਹਰੇਕ ਅਧਿਆਏ ਤੋਂ ਘੱਟੋ-ਘੱਟ ਇੱਕ ਸਵਾਲ, ਅਤੇ ਇਹ ਯਕੀਨੀ ਬਣਾਉਣ ਲਈ ਕਿ ਕਿਸੇ ਵੀ ਮੁਸ਼ਕਲ ਪੱਧਰ ‘ਤੇ ਸਵਾਲਾਂ ਦਾ ਸਮੁੱਚਾ ਵਿਤਕਰਾ ਕਾਰਕ ਵੱਧ ਤੋਂ ਵੱਧ ਹੋਵੇ, ਜ਼ਮੀਨੀ ਸੱਚ ਡੇਟਾਸੈੱਟ ਤੋਂ ਸਵਾਲਾਂ ਦੀ ਚੋਣ ਕੀਤੀ ਜਾਂਦੀ ਹੈ।

ਪ੍ਰਯੋਗ ਲਈ, ਕੁੱਲ 312 ਵਿਦਿਆਰਥੀਆਂ ਨੂੰ 75 ਪ੍ਰਸ਼ਨਾਂ ਵਾਲੀ ਪ੍ਰੀਖਿਆ ਦੇਣ ਲਈ ਚੁਣਿਆ ਗਿਆ ਸੀ। ਦੋ ਅੰਕੜਾ ਮੈਟ੍ਰਿਕਸ ਟੈਸਟ ਦੇ ਪ੍ਰਦਰਸ਼ਨ ਦੀ ਤੁਲਨਾ ਕਰਦੇ ਹਨ:

1. RMSE ਦੀ ਵਰਤੋਂ ਕਰਦੇ ਹੋਏ ਮੁਲਾਂਕਣ: ਆਈਟਮ ਰਿਸਪਾਂਸ ਥਿਊਰੀ ਮਾਡਲ ਦੀ ਵਰਤੋਂ ਕਰਦੇ ਹੋਏ, ਅਸੀਂ ਪ੍ਰਸ਼ਨਾਂ ਦੇ ਸਹੀ ਉੱਤਰ ਦੇਣ ਵਾਲੇ ਮੁਲਾਂਕਣ ਸੈੱਟ ਵਿੱਚ ਹਰੇਕ ਵਿਦਿਆਰਥੀ ਦੀ ਸੰਭਾਵਨਾ ਦੀ ਭਵਿੱਖਬਾਣੀ ਕਰਦੇ ਹਾਂ ਅਤੇ ਵਿਦਿਆਰਥੀਆਂ ਦੇ ਸਕੋਰਾਂ ਤੋਂ ਔਸਤ ਯੋਗਤਾ ਦੀ ਗਣਨਾ ਕਰਦੇ ਹਾਂ ਜੇਕਰ ਉਹ ਤਿਆਰ ਕੀਤੇ ਟੈਸਟ ਪੇਪਰ ਦੀ ਕੋਸ਼ਿਸ਼ ਕਰਦੇ ਹਨ। ਅਸੀਂ ਆਈਟਮ ਰਿਸਪਾਂਸ ਥਿਊਰੀ ਮਾਡਲ ਤੋਂ ਹਰੇਕ ਵਿਦਿਆਰਥੀ ਦੀ ਜ਼ਮੀਨੀ ਸੱਚਾਈ ਯੋਗਤਾ ਨੂੰ ਵੀ ਨਿਰਧਾਰਤ ਕਰਦੇ ਹਾਂ। ਅੰਤ ਵਿੱਚ, ਅਸੀਂ ਜ਼ਮੀਨੀ ਸੱਚਾਈ ਯੋਗਤਾ ਅਤੇ ਸ਼ੁੱਧਤਾ ਨੂੰ ਮਾਪਣ ਦੀ ਅਨੁਮਾਨਿਤ ਯੋਗਤਾ ਦੇ ਵਿਚਕਾਰ ਰੂਟ ਮਤਲਬ ਵਰਗ ਗਲਤੀ ਦੀ ਗਣਨਾ ਕਰਦੇ ਹਾਂ।
2. ਸਪੀਅਰਮੈਨ ਦੇ ρ ਦੀ ਵਰਤੋਂ ਕਰਦੇ ਹੋਏ ਮੁਲਾਂਕਣ: ਇੱਥੇ, ਅਸੀਂ ਜ਼ਮੀਨੀ ਸੱਚ ਡੇਟਾ ਅਤੇ ਉਤਪੰਨ ਟੈਸਟ ਤੋਂ ਪ੍ਰਾਪਤ ਵਿਦਿਆਰਥੀਆਂ ਦੀਆਂ ਯੋਗਤਾਵਾਂ ਨੂੰ ਕ੍ਰਮਬੱਧ ਕਰਦੇ ਹਾਂ ਅਤੇ ਦੋ ਰੈਂਕਾਂ ਦੇ ਵਿਚਕਾਰ ρ ਦਰਜੇ ਦੇ ਸਬੰਧ ਨੂੰ ਨਿਰਧਾਰਤ ਕਰਦੇ ਹਾਂ।

ਨੀਤੀ	RMSE	ਰੈਂਕ ਕੋਰ ρ
ਬੇਸਲਾਈਨ ਨੀਤੀ	0.844	0.59
ਵਿਤਕਰਾ ਕੇਵਲ ਨੀਤੀ	0.549	0.83
ਸਾਰਣੀ 2: ਵੱਖ-ਵੱਖ ਨੀਤੀਆਂ ਦੁਆਰਾ ਤਿਆਰ ਕੀਤੇ ਗਏ ਟੈਸਟਾਂ ਵਿੱਚ RMSE (ਅਨੁਮਾਨਿਤ ਯੋਗਤਾ ਅਤੇ ਜ਼ਮੀਨੀ ਸੱਚਾਈ ਤੋਂ ਯੋਗਤਾ) ਅਤੇ ਦਰਜਾਬੰਦੀ ρ ਦੀ ਤੁਲਨਾ

ਨਾਲ ਹੀ, ਅਸੀਂ ਪਾਇਆ ਕਿ ਸਿਰਫ਼ ਵਿਤਕਰਾ ਨੀਤੀ ਟੈਸਟ ਬੇਸਲਾਈਨ ਨੀਤੀ ਟੈਸਟ ਨਾਲੋਂ 24.8% ਸਕੋਰ (ਵਿਦਿਆਰਥੀਆਂ ਦੇ 95ਵੇਂ ਪਰਸੈਂਟਾਈਲ ‘ਤੇ ਸਕੋਰ – 5ਵੇਂ ਪਰਸੈਂਟਾਈਲ ‘ਤੇ ਸਕੋਰ) ਦਿੰਦਾ ਹੈ।

ਇਸਲਈ, ਟੈਸਟਾਂ ਵਿੱਚ ਉੱਚ ਪ੍ਰਸ਼ਨ ਵਿਤਕਰੇ ਕਾਰਕ ਪ੍ਰਸ਼ਨਾਂ ਦੀ ਵਰਤੋਂ ਉਸੇ ਨਿਸ਼ਾਨਾ ਸਿੱਖਣ ਦੇ ਟੀਚਿਆਂ ਦੇ ਅਧੀਨ ਵਿਦਿਆਰਥੀਆਂ ਵਿੱਚ ਫਰਕ ਕਰਨ ਦੀ ਸ਼ਕਤੀ ਦੇ ਰੂਪ ਵਿੱਚ ਟੈਸਟ ਦੀ ਗੁਣਵੱਤਾ ਵਿੱਚ ਸੁਧਾਰ ਕਰਦੀ ਹੈ। ਨਾਲ ਹੀ, ਸਮੱਗਰੀ ਦੀ ਗੁਣਵੱਤਾ ਨੂੰ ਬਿਹਤਰ ਬਣਾਉਣ ਲਈ ਇਹਨਾਂ ਦਾ ਲਾਭ ਉਠਾਇਆ ਜਾਂਦਾ ਹੈ ਜਿੱਥੇ ਅਸੀਂ ਨਕਾਰਾਤਮਕ ਪ੍ਰਸ਼ਨ ਵਿਤਕਰੇ ਕਾਰਕ ਵਾਲੇ ਪ੍ਰਸ਼ਨਾਂ ਦੀ ਪਛਾਣ ਕਰਦੇ ਹਾਂ ਅਤੇ ਉਹਨਾਂ ਦੀ ਪ੍ਰਸੰਗਿਕਤਾ ਅਤੇ ਸਪਸ਼ਟਤਾ ਵਿੱਚ ਸੁਧਾਰ ਕਰਦੇ ਹਾਂ।

ਹਵਾਲੇ

• ਸੋਮਾ ਧਾਵਲਾ, ਚਿਰਾਗ ਭਾਟੀਆ, ਜੋਏ ਬੋਸ, ਕੇਯੂਰ ਫਾਲਦੂ, ਅਦਿਤੀ ਅਵਸਥੀ, “ਡਾਇਗਨੌਸਟਿਕ ਅਸੈਸਮੈਂਟਸ ਅਤੇ ਉਹਨਾਂ ਦੀ ਗੁਣਵੱਤਾ ਮੁਲਾਂਕਣ ਦੀ ਆਟੋ ਜਨਰੇਸ਼ਨ,” ਜੁਲਾਈ 2020, EDM।
• Vincent LeBlanc, Michael A. A. Cox, “ਸਕੂਲ ਪ੍ਰੀਖਿਆ ਦੇ ਸੰਦਰਭ ਵਿੱਚ ਬਿੰਦੂ-ਬਾਇਸੀਰੀਅਲ ਸਹਿ-ਸੰਬੰਧ ਗੁਣਾਂਕ ਦੀ ਵਿਆਖਿਆ,” ਜਨਵਰੀ 2017, ਮਨੋਵਿਗਿਆਨ ਲਈ ਮਾਤਰਾਤਮਕ ਢੰਗ 13(1):46-56
• ਲਿੰਡਨ, ਡਬਲਯੂ. ਡੀ., ਅਤੇ ਆਰ. ਹੈਮਬਲਟਨ। “ਆਧੁਨਿਕ ਆਈਟਮ ਰਿਸਪਾਂਸ ਥਿਊਰੀ ਦੀ ਹੈਂਡਬੁੱਕ।” (1997), ਬਾਇਓਮੈਟ੍ਰਿਕਸ 54:1680
• ਦੇਸਾਈ, ਨਿਸ਼ਿਤ, ਕੇਯੂਰ ਫਾਲਦੂ, ਅਚਿੰਤ ਥਾਮਸ, ਅਤੇ ਅਦਿਤੀ ਅਵਸਥੀ। “ਇੱਕ ਮੁਲਾਂਕਣ ਪੇਪਰ ਤਿਆਰ ਕਰਨ ਅਤੇ ਇਸਦੀ ਗੁਣਵੱਤਾ ਨੂੰ ਮਾਪਣ ਲਈ ਸਿਸਟਮ ਅਤੇ ਢੰਗ।” ਯੂ.ਐੱਸ. ਪੇਟੈਂਟ ਐਪਲੀਕੇਸ਼ਨ 16/684,434, ਅਕਤੂਬਰ 1, 2020 ਨੂੰ ਦਾਇਰ ਕੀਤੀ ਗਈ।
• “ਡਾਇਗਨੌਸਟਿਕ ਟੈਸਟ ਅਤੇ ਉਹਨਾਂ ਦੀ ਗੁਣਵੱਤਾ ਦਾ ਮੁਲਾਂਕਣ – EDM:2020”, EDM 2020 ਪੇਸ਼ਕਾਰੀ, ਜੁਲਾਈ 2020, https://www.youtube.com/watch?v=7wZz0ckqWFs
• ਫਾਲਦੂ, ਕੇਯੂਰ, ਅਚਿੰਤ ਥਾਮਸ ਅਤੇ ਅਦਿਤੀ ਅਵਸਥੀ। “ਵਿਹਾਰ ਸੰਬੰਧੀ ਵਿਸ਼ਲੇਸ਼ਣ ਅਤੇ ਸਿਫ਼ਾਰਸ਼ਾਂ ਲਈ ਸਿਸਟਮ ਅਤੇ ਢੰਗ।” ਯੂ.ਐੱਸ. ਪੇਟੈਂਟ ਐਪਲੀਕੇਸ਼ਨ 16/586,525, 1 ਅਕਤੂਬਰ, 2020 ਨੂੰ ਦਾਇਰ ਕੀਤੀ ਗਈ।