نمره‌دهی به آزمون‌های تشریحی: روش‌ها، چالش‌ها و راهکارها

النسخ

1 مروري مقاله بهآزمونهایتشريحي:روشها چالشهاوراهکارها نمرهدهي 2 1 * ديدهبان حسين مرادي اسحاق كبى تحقيقبت سف> پيفظهي تكطيحي 9094/35/30 دريافت تاريخ چکيس پذيزش تاريخ هؿتقين تأثيط تحت زا كد يبى يبزگيطي ک اؾت زاز 9094/37/66 يث اضظقيب يض ثؿيب اػتقبز ث اؾت. يض ثؿيب زض ک اؾت ثعضگي چبلف تكطيحي آظه ى بي وط ز ي ح زضاييثيي اهب ثطهيا گيع س ضا يبزگيطي ثطتط ؾؤال ابي پػ كگطاى اظ ثاياػتجابضي ؾجت ه اضز اظ آظها ى ابي زض اؾات ک اسگبى تصحيح قرصي اظ ظط هؿتقل آظه ىق سگبى ت ا بيي ا ساظ گيطي ک ػي ي آظه ى بي ثطذالف هيق ز. آظه ى اظ حبصل وطات پبؾد ک قرصي ث ه ضزؾ دف ت ا بيي ا ساظ گيطي تكطيحي قي ثطضؾي ث هقبل ايي زض اؾت. هطث ط هصححبى ػول زقت ا ضاق تصحيح ح ث ظيبزي هيعاى ثا تكاطيحي آظها ى ابي ثا وط ز ي زقت ث بثطايي اؾت اثؿت هيذ ا س ضا ؾؤال ب ثپطزاظين. تكطيحي آظه ى بي ث وط ز ي اؾتب ساضز ث هت ى ػويق ثطضؾي ثب زاضين ؾؼي هيپطزاظين هرتلف ه از قبهل هقابتت زض تكاطيحي آظها ى ابي واط ز اي هرتلف پعقاکي آها ظ هؼتجاط هداالت زض ه تكطقس هقبتت Pubmed, Scopus,Proquest زاز اي هرتلف پبيگب بي اثتسا هط ضي هطبلؼ ايي زض ب> هؼتجط هدالت Academic medicine, British medical journal, teaching & learning in medicine, medical teacher, medical education يا ايط هدل قبهل پعقکي آه ظ ظهي زض زاذلي گبم پعقکي ػل م زض آه ظ يػگي وط ز ي کلي وط ز ي تحليلي وط ز ي قس س. ا تربة هطتجط تكاطيحي آظها ى کلياس اغ ابي اظ اؾاتدبز ثاب پعقاکي آها ظ ت ؾؼ هقابتت گطتات قاطاض خؿاتد ه ضز آى ب ا گليؿي هؼبزل وط ز ي اصلي ػاسم زليل ث هطبلؼ 385 تؼساز ک آهس زؾت ث اي تط تي ه بثغ خؿتد ي اظ ظهب ي هحس زيت ثس ى کتبة هقبل 462 تؼساز اثتسا ه بثغ خؿتد ي زض يبتت ب> ثطضؾاي خ ات هطبلؼ 76 تؼساز بيتب گطزيس. ذبضج هطبلؼ اظ ذالص ج ز ػ اى خ ز زليل ث ن هطبلؼ 45 تؼساز گطزيس. حصف ثطضؾي اظ ه ض ع ثب اضتجبط 4- تكاطيحي ؾاؤاتت ثا واط ز اي هرتلاف قس س> 3 -تقؿينث سي زؾت ث سي ظيط زؾت چ بض زض هطبلت خؿتد اظ حبصل تبيح اؾبؼ ثط گطزيس. ا تربة چبلف 5- تكطيحي ؾؤاتت ث وط ز ي ثطاي ه بؾت ا تربة ثحث يث اضظيب اضتقبي تيد گيطي> 6 - تكطيحي ؾؤاتت ث وط ز ي تا تطکي هرتلاف ابي اظ اؾتدبز ث يبظ تكطيحي آظه ى بي ث وط ز ي آظه ى ب ايي اظ اؾتدبز ک زاضز خ ز اطوي بى ايي اگط ث طحبل ثپطزاظين. ثبيس يع ضا آى وطات اػتجبض اتعايف يث اضظيب وط ز ي تكطيحي آظه ى بي کليس اغ ب> ضا کبض چبلف ب زا كد تكطيحي ؾؤاتت ث وط ز ي خسيس زاضز. ثابت ؾاطح چ سگب ا ابي واط ز اي ثا هطثا ط عي ا ابي هيز اس اضتقب ضا زا كد يبى زض يبزگيطي ثطتط ص 9094 آبان 70 پيدرپي هشتم شماره سيزدهم دوره اروميه مامايي و پزستاري دانشکده مجله ;2 تلدي> ايطاى ت طاى ت طاى پعقکي ػل م زا كگب پعقکي آه ظ گط هکبتج > آزضؼ h-didehban@razi.tums.ac.ir مقدمه اظ اضظقاايبثي اابي اظ اؾااتدبز اذيااط ز اا اابي زض اؾاات زاقاات ثؿاايبضي پيكااطتت اابي زا كااد يبى.)4,3( قبثالاػتوابز اضظيبثي ابي ا دبم زض ؾؼي پعقکي زا كکس بي ز اس اضائا خبهؼ ث کبتي ه بضت بي ثب پعقکب ي ک زاض س پبيب هرتلاف ابي آها ظ تطاي اس زض اؾابؼ وايي ثاط )5(. زا كاد اظ اضظيابثي گيطز. قطاض ه ضزهطبلؼ هايثبيؿات ضاط ضتب کا اؾات هق لا اي هيک س اشػبى ضا ه ن ايي ظيبزي تحقيقبت اظ اؾتدبز پعقکي زا كکس بي ثيكتط زض ک کتجي 1 ايران اروميه اروميه پسشکي علوم دانشگبه پسشکي آموزش توسعه و مطبلعبت مرکس علمي هيبت عضو 2 مسئول( )نويسنده ايران تهران تهران پسشکي علوم دانشگبه پسشکي آموزش گروه پسشکي آموزش دکتراي دانشجوي 8=47 آبان 7; پي در پي هشتم شماره سيزدهم دوره 6=: اروميه

2 ي ل ا ی ومرهدهيبهآزمونه تشريحي:روشها چالصهاوراهکارها يث اضظيب يث اضظيب اهط زض آظه ى اب ايي اظ گؿتطز اي طيف ث ز ضايح اهطي يگا ه قاطاض ه ضزاؾتدبز زا كد زضايايثايي )6(. ياطز ثاط ضا تأکياس ثيكاتطيي کا تكاطيحي آظه ى بي اظ اؾتدبز اظ هرتلداي چابلف ابي ثب زاض س يبزگيط س ؾ ي اظ پبؾد ؾبذتي آه ذت اظ زضؾت و گيطي ػسم قجيل ػسم آظه ىق سگبى )7-;(. ؿات س ثاط هصاححبى ؾا ي اظ وط ز اي ث اطوي بى چبلف يث اضظيب اهط زض ه خ ز هرتلف آظه ى بي ت ؾط زا كد اظ بقاي اثاطات وط ز اي ا تربة ه بؾت قي تكطيحي اظ يکي ث ػ اى ضا ه ض ع ايي ث پطزاذتي ضط ضت وط ز ي ا ل يت ي ث اضظيب حيط يزا ه قاطاض تأکيس ه ضز ثيفاظپيف اس اظ اؾاتدبز کا اؾات حاسي ثا چبلف اب ايي ا ويت )34-32(. ت ب ضي ثا تكاطيحي آظه ى ابي وط گصاضي ثطاي ضا ز يب ظ وايي ثا اؾات) 3;-35 ( کطز تجسيل زضاييثبض خسيسي ثحث ثطضؾاي ثاطاي هرتلداي کبضگب ابي زليل زيگاط پبيابيي اياي ز يب ؾطاؾط پعقکي هؼتجط زا كگب بي اغلت زض آظه ى ب هكرصبت يض ثؿيب هقبتت اؾت. گطزيس ثطگعاض ا يي ابي تكاطيح ثا اظ اؾاتدبز کا پطزاذتا ا اس تكاطيحي آظها ى ابي ثا وط ز ي هعاياب ثا هقبتتي )42(. زاضز قطاض ب ايي ا ل يت زض کبهپي تط يا اي واط ز اي هرتلاف ابي هقبيؿا هؼبيت اقبض کطز ا س بيي ططاحي آظها ى اب ثب ضاثط زض ثحث ث ن هقبتت ؾطي يک 43 (. ): پطزاذت ا اس) 33 (. آظه ى ب ايي وط گصاضي ثطاي ت ا ابيي ثا اثؿت تكطيحي آظه ى بي ث وط ز ي اظآ دبک ت ا ابيي ث ظيبزي اثؿتگي اظ وطات ايي زقت اؾت هصحح قرص اضظيابة اظآ دبکا اؾات ثطذا ضزاض گاط تصحيح قرص ه بضت ضاوي هقبلا اياي اؾات وط ز اي زض ظيبزي ذطبي ه جغ ا ؿب ي ب تكطيح ث تكطيحي ؾؤاتت ث وط ز ي چگ گي تكطيح يکطز ايي ث وط ز ي خسيس وطات کيديت اتعايف ؾجت ؾيغ گطزز. کار روش و مواد زياسي ثاب تب هيپطزاظز ؾؤاتت تكطيحي آظه ى بي ث زاز قس Google قابهل زاز پبيگب ابي اثتسا هط ضي هطبلؼ ايي زض هقااااابتت scholar,eric,pubmed Scopus,Proquest قابهل پعقکي آه ظ هؼتجط هدالت زض ه تكطقس Academic Medicine, British Medical Journal, Medical Teacher, Medical Teaching & Learning In Medicine پعقاکي آها ظ ظهي ا زض زاذلاي هؼتجاط هدالت Education ت ؾاؼ گابم ابي پعقاکي ػلا م زض آها ظ ايطا ي هدل قبهل کلياس اغ ابي اظ اؾاتدبز ثب پعقکي آه ظ 3 تكاطيحي آظها ى وط ز اي کلي وط ز ي تحليلي وط ز ي ػگي ي 8 7 گطتات قاطاض خؿتد ه ضز وط ز ي اصلي قس س. ا تربة هطتجط هقبتت ها يافته اثتسا اظ ظهاب ي هحاس زيت ثاس ى کتابة هقبلا 462 تؼاساز 385 تؼساز ک آهس زؾت ث اي تط تي ه بثغ خؿتد ي گطزياس. حاصف ثطضؾاي اظ ه ضا ع ثب اضتجبط ػسم زليل ثا هطبلؼا 45 تؼاساز ذابضج هطبلؼا اظ ذالصا ج ز ػ اى خ ز زليل ث ن هطبلؼ ثطضؾاي خ ت هطبلؼ 76 تؼساز بيتب گطزيس. ثاط گطزياس. ا ترابة ظياط زؾات چ ابض زض هطبلات خؿاتد اظ حبصال تابيح اؾابؼ قس س زؾت ث سي <)47-43,38,:( تكطيحي ؾؤاتت ث وط ز ي هرتلف تقؿينث سي ؾاؤاتت ثا واط ز اي ثاطاي ه بؾات ا ترابة تكطيحي ط هعايبي هؼبيت خسيس تكطيحي. ؾؤاتت ث وط ز ي تكطيحي> ؾؤاتت ث وط ز ي هرتلف تقؿينث سي 3- ؾبل زض ظهي زض خسيسي خ تگيطي اذيط )47, اؾت گؿتط حبل زض هططح تكطيحي ؾؤاتت ث وط ز ي ؾاؤاتت ثا واط ز اي هرتلاف ابي قؿاوت ايي زض 48(. زاز. ذ ا ين ت ضيح کطز هط ض ضا تكطيحي ث آظه ىق س تطز پبؾد تحليلي زض تحليلي> الف- اهتيابظ ياب واط هكرص خع ط ثطاي تقؿين ک چکتطي اخعاي خساگب اي 49-;4(. هيق ز) 43, گطتت ظط زض تقؿاين اخاعا ثا و ا پبؾاد اياي زض کلي> ة- پبؾد اظ هؼلن ثطزاقت ثلک ويق ز ا اساظ گياطي هؼيابض ث ػ ا اى تطز ط پبؾد توبهي هؼلن ايي زض هيگيطز. قطاض ه ضزاؾتدبز ضا ؾؤال يک ث هيک س کؿت آى اظ کلي ثطزاقت يک هيذ ا س ايي زض هي وبيس. تجسيل وط يک ث ضا کلي ثطزاقت ايي ثؼس ػ اهل و ثلک ويق ز زاز ذبصي اهتيبظ احسي ػبهل يچ ث اقاغ قااب ت ها ضز ياکثابض پبؾد کل هيگيط س قطاض ه ضز ظط هيق ز.)4;,48,:( يػگي ج- ؾؤال ط ث زا كد يب زا فآه ظ پبؾد اصلي يػگاي ابي هصاحح ايي زض اصلي> ثاطاي هيؾا دس ضا 1 Essay tests 2 Scoring 3 Analytical scoring 4 Global scoring 5 Primary traits 6 Scoring rubric 8=47 آبان 7; پي در پي هشتم شماره سيزدهم دوره 7=: اروميه

3 اسحاقمرادی حسيهديدهبان ااط يااک اظ آى ااب وااط اابي 2 تااب 6 ضا کاا هؼااطف ػاابلي تااب غيطقبثلقج لا س ه ظ ض هي وبيس );4(. الجت زض ثؼاي اظ ه بثغ اي يا وااط ز ااي ضا يکااي اظ زا ؿت ا س) 52 (. اابي وااط ز ااي تحليلااي 4 -ا تربة ه بؾت ثطاي وط ز ي ث ؾؤاتت تكطيحي> هقبتت هتؼسزي ث تطيي ثطاي کب ف ؾ گيطي اتعايف اػتجبض وطات آظه ى بي تكاطيحي ضا آها ظ اضظيبثابى هايزا اس )53(. زض هقبيؿ ثب ش ي وط ز اي هقابتت هتؼاسزي اؾتدبز اظ هقيبؼ وط ز ي تحليلي ضا ثب ت خ ث هؼيبض بي هكرص وط ز ي ضا زض خ ت اتعايف اػتجابض واطات کابضثطزيتاط هيزا س) 43, وط ز ي ق ي ثطاي زا ؿت ا س ):, ک يل 54(. 45, زض ثؼاي اظ هقابتت ياع اؾاتدبز اظ تحليلي ث ؾاؤاتت ضا ثا زليال اي کا زتيال تا خي ي يبزگيط س اضائ هيز س اظ کلي وط ز اي ث تاط 46, ;4( اظ ططتي اؾتدبز اظ کلي وط ز اي ضا آؾبىتط ؾطيغتط اظ وط ز ي تحليلي زا ؿت ا س ):,55(. ػس اي اظ هحققبى يع اؾاتدبز اظ اط ز تطکيات ز تحليلي ضا ث تاطيي واط ز اي ثا ؾاؤاتت تكاطيحي زا ؿت ا س. ثسييص ضت اثتسا ؾؤاتت ضا ثا صا ضت کلاي تصاحيح ؾپؽ پبؾد ب ضا ث ص ضت تحليلي تصحيح وبي اس )33, 48(. اي يا وااط گااصاضي ؾااجت خلاا گيطي اظ هؼبياات ااط ز وط گصاضي ذ ا س قس اػتجبض وطات يع ثابت ذ ا اس ضتات );4, 52(. ثؼاي ظهب ي ک اضظياب يث اظ صبحت ظطاى يع اؾتدبز اظ وط ز ي کلاي ضا زض هقيابؼ ثاعض ثا صا ضت تطاکواي ا دابم هيق ز ت صي هيک س اقبض زاض س ک اؾتدبز اظ اياي زض هقبيؿ ثب تحليلي تصحيح وطات اظ عي پابيي ي ثطذا ضزاض,55(.)56 اؾت 5 -چبلف زض هقبتت ث چبلف وط ز ي ث ؾؤاتت تكطيحي> هتدب تي زض ضاثط ثاب واط ز اي ثا ؾؤاتت آظها ى ابي تكاطيحي اقابض قاس اؾات. ثطذاي اظ اي يا چبلف ب ضا هيت اى ث ه ض ع اػتجبض پبيبيي وطات )55( ثطذي زيگط ج ز يک هقيابؼ اؾاتب ساضز زض واط ز اي کلاي ضا اظ چبلف ايي وط ز اي زا ؿات ا اس ايايگ ا اؾاتستل هيک س ک ايي وط ز ي ثيف اظ ايايکا ثا قابط ضاؼف آظه ىق سگبى اقبض زاقت ثبقاس ثا توطکاع يؿا س زض ها ضز ؾؤال هطث ط اقابض زاضز اظ زازى ثابظذ ضز ثا تطاگيط اسگبى زض ه ضز اقتجب بت ضايح ذ ز زض ه ضز ؾؤال ه ضز ظط ػبخع اؾت )57(. اهب زض ه ضز وط ز ي ث تحليلي چبلكي ک زض هقبتت ث آى اقبض قس اؾت ج ز هؼيبض اؾاتب ساضز واط ز اي زض اط آظها ى )58( اضظيب يث خ ج کيدي پبؾد ث ؾؤاتت اظخول قي ثيبى ططظ اؾتدبز اظ اغگبى زض ظط گاطتتي هؼيبض ابي ه ان زيگاط پبؾد ث ؾؤاتت )59( اقبض قس اؾت. ثؼاي اظ هقبتت يع ت ا ع هؼيبض هقيبؼ وط ز ي چگ گي ضا ؾجت ايدبز وطات هتدب ت ثيي اقبض زاض س ک زض يک ثط به آه ظ اضظيب يث زض خ ت ا ساف اضظيب يث اؾتدبز اضظيبة اظ ايي هقيبؼ اضظيبة ب هيزا س ث ايي کت وط ز ي اتطاز ثبيس اؾتدبز اظ هؼيبض بي هكابث تاال زض خ ت ضتج ث سي کطزى اضظيابة اب اظ تابظ کابض ثا هترصاص قاسم ثطزاض س.): 5 ( 6 - خسيس وط ز ي ث ؾؤاتت تكطيحي> خسيس وط ز ي آظه ى بي تكطيحي ثيكتط ث ؾوت کب ف ؾ گيطي اتعايف اػتجبض وطات ايي آظها ى ثاب اؾاتدبز اظ هجت ي ثط کبهپي تط ث ز اؾت. قبيس ثت اى ايس اصلي ايي ططح ضا هتؼلق ثا آلايؽ پابخؽ زض ؾابل 88;3 زا ؿات. ا اي يا تطضي ضا ک هيتا اى اظ کابهپي تط زض واط ز اي ثا آظها ى ابي تكاطيحي اؾاتدبز وا ز ضا آغابظ کاطز لايکي ثا زليال ػاسم هقط ىث صطت ث زى زض آى ؾبل ب اياي اياس ها ضز اؾاتقجبل قاطاض گطتات );5(. زض ؾابل ابي ز ا 2;;3 ثاب ه ا ض کبهپي تط ابي هيعي ايي تطضي ز جبل قس ا ج ايي قک تبيي زض ؾابل 4234 ثب حوبيت هبلي ث يبز هلي ي لت 3 ا دبم قس ايي ث يبز زض ايي ؾبل ثب ايي تطضي ک ؾيؿتن وط ز ي هجت ي ثط کبهپي تط آى ب ت ا بيي اضائ وطات قبثلاػتوبز پبيابيي ؿاجت ثا اضظيابة ا ؿاب ي اضائا هيز س تؼساز عاض ثطگا اهتحابى تكاطيحي ضا ثا كات اضظيابة ا ؿب ي اضائ زاز زض آذط ايي تطضي تبئياس گطزياس )62(. ؾيؿاتن اضظيبة کبهپي تطي هجت ي ثط هسل ضيبضاي ثا ز ثط بها ابي هتؼسزي ثطاي ايي ؾيؿتن ه ضزاؾتدبز قطاض گطتتا اؾات لايکي پبي اصلي توبهي هسل آى ب ا ساظ گيطي ت اتاق ثايي اضظيابة زضص ضتيک وطات ثيي ز اضظيبة ثب ن ورا ا ي ساقات ثبقاس هيثبقس) 63 (. هقبتت ثؿيب يض زض ظهي اؾاتدبز اظ ؾيؿاتن ابي ذ زکبض وط ز ي ث آظه ى بي تكطيحي ه تكطقس اؾات. هحا ض ايي هقبتت ػو هب زض ظهي اػتجابض ز ي) 74 ( اب هاسل ابي پبيابيي ذ زکابض واط ثکابض ضتتا زض اياي ) 4 ( هقبيؿ وطات کؿتقس اظ ايي ثاب اضظيابة ا ؿاب ي) ( هيثبقس. زض تؼسازي اظ هقبتت يع ثا چگا گي پيابز ؾابظي اي يا ؾيؿتن ب زض ظبم اضظقيب يث ذ ز اقبض کطز ا س. ث ط ضکلي تصحيح وط ز ي اظ ططيق ايي ؾيؿتن قبهل 6 هطحلا > 3 -آهابز ؾابظي زاز ب: زض ايي هطحل ؿر الکتط يک يا اظ پبؾاد آظها ى ز اس ايدبز هيگطزز. 4 -اؾترطاج يػگي اب> زض اياي هطحلا ت طؾاتي اظ ي ػگي ک هيت ا س ت ؾط کابهپي تط ثاطاي ت صايف زاز ابي زي ه ضزاؾتدبز قاطاض گياطز اؾاترطاج ه يا گاطزز. 5 -تطاگياطي 1 The William and Flora Hewlett Foundation 8=: دوره سيزدهم شماره هشتم پي در پي 7; آبان 8=47 مجله دانشکده پرستاري و مامايي اروميه

4 ا ی ومرهدهيبهآزمونه تشريحي:روشها چالصهاوراهکارها ذط خاي ز م هطحلا هكرصابت ث ت خ ثب هطحل ايي زض هبقيي> ثط به ابي اکثط ثطاي ه ضزاؾتدبز ذط خي هيگطزز. ت ليس ذبصي پبؾاد ابي ثا زاز قاس وطات قبهل ذ زکبض وط ز ي کبضثطزي واطات اؾات. 6 -طجقا ث اسي ا ؿاب ي اضظيابة ت ؾاط ت ليسقس تحليال زؾات ث اسي واطات هطحلا ايي زض ذطب> تدعي تحليل هيگيطز) 76 ). ا دبم ذطب ب نتیجهگیری و بحث چبلف طچ س يج کت آظه ى بي ثب يث اضظيب ظهي زض اذيط تا ػي ي اتاعايف ؾاوت ثا ثيكتط پعقاکي زا كد يبى واط ز اي ابي اضتقابي اس لاي اؾات ثا ز تكاطيحي آظه ى ابي اياطاى پعقاکي آها ظ هؤؾؿابت زض آظه ى اب ايي ث وط ز ي ه ابثغ خؿتد ي زض ک ث گ اي ز يبؾت قبط زيگط تطاظ آ ؿت تابيح ثاط ثيكاتط پطزاذتا ا اس ه ضا ع اياي ثا ا اسکي هقبتت ع ايي ث کبضگيطي آه ظقاي تطآي اس بي يابزگيطي ثاط آظه ى ب زض زضاييثبض ظيبزي پيكطتت بي زضحبليک )64( ث ز ا س هتوطکع چبلف ث بثطايي اؾت) 65 (. زاز ضخ ز يب يث اضظيب ايي اظ يک ط خعئيبت زيگط ث وط ز ي زض ه خ ز ت ان ثا ا اساظ آى ظاتاع ى اؾتدبز ث ت خ ثب يث اضظيب ذبصاي ا ويات اظ زيگط ؾابذتبض چگ گي ثط اؾت تظم ث ط ضکلي اؾت. ثطذ ضزاض حا گاطزز تؼييي تب و ز توطکع تكطيحي آظه ى بي ث وط ز ي اضتقب يث اضظيب ضا يبزگيطي ه ضز ظط پيبهس بي آظه ى آيب ک ذيط يب هيک س ثاطاي کبهپي تط ثط هجت ي وط ز ي يکطز بي اظ اؾت تظم )66(. ث اضظقيبثبى قاب ت تب و ز اؾتدبز تكطيحي ؾؤاتت ث وط ز ي 67(. ثطؾس) 44, هقساض کوتطيي قجبل زض اضظيبثبى ثيكتط ک چبلف بيي ث هقبل ايي زض ثباي ک ؾاؤاتت لاي قاس اقابض ؿات س ثط آى ب ثب تكطيحي ؾؤاتت يث اضظيب ه ضز زض تطا ا ي ز زض )68(. تكاطيحي آظها ى ابي ثط تب قط عقس وط ز ي ق ز تکي کوتط اؾات هب اس ثايپبؾاد اضظيبثبى ت ا و سي زض اضظيبثابى تؼاساز اتاعايف ثاب حطکت ايي اذيط خسياس ت اب ضي ابي اظ اؾاتدبز )69( يث اضظيب اػتجابض ثاس ى ش ي اتاطاز يئاتػلواي اػابي اضظيبثبى ;6(. ):6, شاتاي ضاؼف ابي زضثابض ثبيس زذيل ثا ؾا تي واط ز اي ابي ک زاقت ت خ ثبيس زضػييحبل گطز س. آگب تط تكطيحي آظه ى بي ان زض ؾبذتبضي زاضاي تكطيحي آظه ى بي زض اضظيبثبى ت ا و سي تكطيحي آظه ى بي وطات اػتجبض اتعايف ثطاي )72( اؾت ت يس ث پبيبى زض ):(. اؾت يبظ ثبت ؾطح تطکيجي چ سگب ابي اظ اؾاتدبز چگ گي زضثبض تصوينگيطي گدت هيت اى زض آظه ى ب ايي ک قطايطي تكطيحي ؾؤاتت ث وط ز ي هرتلف هؼيبض ب اي ک يع هيگيطز ا دبم آى ث وط ز ي اؾتب ساضز بي چابلف ابي ث ػ ا اى ظ )73( ثبق س چگ تكطيحي ؾؤاتت يث اضظيب زض ه وي ؿت س. هططح تكطيحي ؾؤاتت References: 1. Griffin P. Assessment for Teaching. Cambridge University Press; Miller AH, Imrie BW, Cox K. Student assessment in higher education: a handbook for assessing performance. Psychology Press; Rheingold A, Seaman J, Berger R. Assessment across boundaries: How high-quality student work demonstrates achievement, shapes practice, and improves communities. Assessing Schools for Generation R (Responsibility) Springer; p Nelson R, Dawson P. A contribution to the history of assessment: how a conversation simulator redeems Socratic Method. Assess Eval High Educ 2014;39(2): Jonsson A, Svingby G. The use of scoring rubrics: Reliability, validity and educational consequences. Educ Res Rev 2007;2(2): Johnson RL, Penny J, Gordon B, Shumate SR, Fisher SP. Resolving Score Differences in the Rating of Writing Samples: Does Discussion Improve the Accuracy of Scores? Language Assess Quart 2005;2(2): Powers DE, Burstein JC, Chodorow M, Fowles ME, Kukich K. Stumping e-rater: Challenging the validity of automated essay scoring. Computers Human Behav 2002;18(2): Bacha N. Writing evaluation: What can analytic versus holistic essay scoring tell us? System 2001;29(3): Fullerton JT, Greener DL, Gross LJ. Scoring and setting pass/fail standards for an essay 8=47 آبان 7; پي در پي هشتم شماره سيزدهم دوره 9=: اروميه

5 اسحاقمرادی حسيهديدهبان certification examination in nurse-midwifery. Midwifery 1992;8(1): Rudner L, Gagne P. An Overview of Three Approaches to Scoring Written Essays by Computer. Pract Assess Res eval 2001;7(26). 11. Coker DR. Improving Essay Tests: Structuring the Items and Scoring Responses. Clear Hou 1988;61(6): Hughes DC, Keeling B. The Use of Model Essays to Reduce Context Effects in Essay Scoring. J Educ Measur 1984;21(3): Shermis MD. State-of-the-art automated essay scoring: Competition, results, and future directions from a United States demonstration. Assessing Writing 2014;20: Weigle SC. English language learners and automated scoring of essays: Critical considerations. Assessing Writing 2013;18(1): Wang J. A new automated essay scoring: Teaching Resource Program; p Ramineni C, Williamson DM. Automated essay scoring: Psychometric guidelines and practices. Assessing Writing 2013;18(1): Dos Santos Figueira A, Gomes da Silva A, Machado de Melo B, Del Pino Lino A, Lobato L, Rossy F, et al. Module of evaluation automatic essay questions on virtual learning environment LabSQL. Information Systems and Technologies (CISTI), th Iberian Conference on IEEE; p Chen H, Xu J, He B. Automated Essay Scoring by Capturing Relative Writing Quality. Computer J 2013:bxt Almond RG. Using Automated Essay Scores as an Anchor When Equating Constructed Response Writing Tests. Int J Test 2013;14(1): Attali Y, Lewis W, Steier M. Scoring with the computer: Alternative procedures for improving the reliability of holistic essay scoring. Language Testing 2013;30(1): East M. Evaluating the reliability of a detailed analytic scoring rubric for foreign language writing. Assessing Writing 2009;14(2): Bridgeman B, Trapani C, Attali Y. Comparison of Human and Machine Scoring of Essays: Differences by Gender, Ethnicity, and Country. Appl Measur Educ 2012;25(1): Adnan KAN. Effects of using a scoring guide on essay scores: Generalizability theory. Perceptual Motor Skills 2007;105(3 I): Sachs SG, Reiser RA. An objective approach to scoring essays. J Instructional Devel 1979;3(4): Harsch C, Martin G. Comparing holistic and analytic scoring methods: issues of validity and reliability. Assess Educ Princip Policy Practice 2012;20(3): Nakamura Y. A comparison of holistic and analytic scoring methods in the assessment of writing. The Interface Between Interlanguage, Pragmatics and Assessment: Proceedings of the 3rd Annual JALT Pan-SIG Conference; Espin CA, Weissenburger JW, Benson BJ. Assessing the writing performance of students in special education. Exceptionality 2004;12(1): Chase CI. Essay test scoring: Interaction of relevant variables. J Educ Measur 1986;23(1): Saif AA. Educational Measurement,Assessment and Evaluation. 3rd ed. Dowran; Cooper CR, Odell L. Evaluating Writing: Describing, Measuring, Judging; Sweedler-Brown CO. The effect of training on the appearance bias of holistic essay graders. J Res Devel Educ 1992;26(1): Moskal BM, Leydens JA. Scoring rubric development: Validity and reliability. Practic Assess Res Eval 2000;7(10): Huot B. Reliability, validity, and holistic scoring: What we know and what we need to know. :=: دوره سيزدهم شماره هشتم پي در پي 7; آبان 8=47 مجله دانشکده پرستاري و مامايي اروميه

6 ا ی ومرهدهيبهآزمونه تشريحي:روشها چالصهاوراهکارها College Composition and Communication; 1990.P Myers M. A Procedure for Writing Assessment and Holistic Scoring. ERIC; Elbow P. Ranking, Evaluating, Liking: Sorting Out Three Forms of Judgment. College English 1994;55(2): Gamaroff R. Rater reliability in language assessment: the bug of all bears. System 2000;28(1): Mertler CA. Designing scoring rubrics for your classroom. Practic Assess Res Evalu 2001;7(25): Moskal BM. Scoring Rubrics: How?: ERIC Clearinghouse on Assessment and Evaluation. University of Maryland; Shermis MD, Burstein J, Higgins D, Zechner K. Automated essay scoring. Writing assessment and instruction; p Shermis MD, Burstein J. Handbook of automated essay evaluation: Current applications and new directions. Routledge; Ben-Simon A, Bennett RE. Toward more substantively meaningful automated essay scoring. J Technol Learn Assess 2007;6(1). 42. Shakurnia A, Alijani H, Najjar S, komeili h, Elhampour H. The Effect of Two Assessment Methods on Exam Preparation and Study Strategies: Multiple Choice and Essay Questions. Iran J Med Educ 2013;13(4): Zhang M, Williamson DM, Breyer FJ, Trapani C. Comparison of e-rater Automated Essay Scoring Model Calibration Methods Based on Distributional Targets. Int J Test 2012;12(4): Madu B, Ikeh EF. Effect of Scoring Patterns on Scorer Reliability in Economics Essay Tests. J Economics Sustainable Develop 2013;4(15): Powers DE, Burstein JC, Chodorow MS, Fowles ME, Kukich K. Comparing the validity of automated and human scoring of essays. J Educ Comput Res 2002;26(4): Myford CM, Wolfe EW. Monitoring rater performance over time: A framework for detecting differential accuracy and differential scale category use. J Educ Measur 2009;46(4): Leckie G, Baird J-A. Rater Effects on Essay Scoring: A Multilevel Analysis of Severity Drift, Central Tendency, and Rater Experience. J Educ Measur 2011;48(4): Attali Y. Method of model scaling for an automated essay scoring system. Google Patents; Attali Y, Burstein J. Automated essay scoring with e-rater V. 2. J Tech Learn Assess 2006;4(3). 50. Leckie G, Baird JA. Rater effects on essay scoring: A multilevel analysis of severity drift, central tendency, and rater experience. J Educ Measur 2011;48(4): Ahn JY, Han KS, Mun GS. Evaluation of essay questions and applications for effective feedback. ICIC Express Letters 2013;7(3 A): Yao X. Automated essay scoring. A comparative study; p Hang M, Williamson DM, Breyer FJ, Trapani C. Comparison of e-rater Automated Essay Scoring Model Calibration Methods Based on Distributional Targets. Int J Test 2012;12(4): Gierl MJ, Latifi S, Lai H, Boulais A-P, Champlain A. Automated essay scoring and the future of educational assessment in medical education. Med Educ 2014;48(10): =47 آبان 7; پي در پي هشتم شماره سيزدهم دوره ;=: اروميه

7 The Journal of Urmia Nursing and Midwifery Faculty, Vol 13(8), November, 2015 Review Article SCORING IN THE ESSAY TESTS QUESTIONS: METHODS, CHALLENGES AND STRATEGIES Moradi E 1, Didehban H 2 Received: 25 Jul, 2015; Accepted: 18 Oct, 2015 Abstract Background & Aims: The related studies has shown that students learning is under the direct influence of assessment and evaluation methods. Many researchers believe that essay tests can assess the quality of the students' learning, however essay tests scoring a big challenge which causes their unreliability in many cases. Unlike objective tests that measure the examinees' ability independent of the individual judgment, in essay tests, the examinees' ability is directly related to the examiners' judgment. Therefore, the accuracy of test scoring is greatly related to the methods of paper correction, and the examiners accuracy. This study tries to explain various methods of essay tests scoring in different published papers. Materials & Methods: In this study, first the different papers and articles published in national and international journals were selected by using keywords of essay test, scoring, and student assessment. Later, they were studied and analyzed. Results: 240 articles without time limit were found by searching in the Web. 163 articles were excluded because of lack of relevant to the topic, and 23 articles were excluded because of lacking abstract. Finally, 54 articles were selected to be included in the study. Based on the search results of study, the search topic was grouped in four categories:1.defining different grading methods in essay questions 2.selecting appropriate methods for essay questions scoring 3.the challenges of essay questions scoring. 4. new methods of essay questions scoring. Conclusion: Improving assessment and essay questions scoring requires using of various methods, and the combination of multiple high level tests. In applying these kinds of tests, we should pay attention to the reliability and validity of the essay tests and scores. Keywords: Essay test, Scoring, Student assessment Address: Department of Medical Education, Tehran University of Medical Sciences, Tehran, Iran Tel: (+98) h-didehban@razi.tums.ac.ir 1 Instructor, Education Development Center (EDC), Urmia University of Medical Sciences, Urmia, Iran 2 MSc, PhD candidate in medical education, Department of Medical Education, Tehran University of Medical Sciences, Tehran, Iran (Corresponding Author) >=: دوره سيزدهم شماره هشتم پي در پي 7; آبان 8=47 مجله دانشکده پرستاري و مامايي اروميه