Incentivized formative quiz engagement and assessment performance: a multiple-campus observational study of student response profiles
مشارکت در آزمونهای تکوینی مشوقدار و عملکرد ارزیابی: مطالعه مشاهدهای چنددانشگاهی از پروفایلهای پاسخدهی دانشجویان
چکیده
Foundational basic science courses in early health sciences curricula are characterized by high conceptual density, complex disciplinary content, and large student enrollments. In this demanding environment, students frequently rely on superficial rote memorization rather than deep conceptual understanding, compromising the overarching curricular goal of establishing robust scientific foundations for subsequent clinical training. The pedagogical strategy implemented in this study consisted of an instructional framework combining weekly curated short instructional videos with asynchronous, incentivized online formative quizzes, designed to provide students with opportunities to identify conceptual gaps and perform active retrieval practice. Utilizing a multi-campus, observational quasi-experimental design across two consecutive cohorts of first-year dental students ( N = 771), the association between active quiz completion (Responders) and raw summative examination performance was analyzed. Active participation in the strategy was significantly and positively associated with raw summative examination scores across all evaluation periods (Cohen's d = 0.37–0.77), with continuous milestone completion accounting for 14.1% of the total variance in overall semester performance ( η 2 = 0.1409). Additionally, a concept-matched anchor-question design aligned with Bloom's revised taxonomy was implemented ( N = 412) to explore whether active participation was associated with item-level performance on higher-order questions, operationalized into categorical response profiles (Null, Basic, and Deep). Although small effect sizes were observed (Cramer's V = 0.10–0.11), item-level response profile distributions between Responders and Non-responders did not reach statistical significance following False Discovery Rate adjustment ( p adj >.25). The instructional design described here provides an adaptable, operationally scalable formative framework for large-enrollment health science courses. Prospective and longitudinal studies will be valuable to further investigate the relationship between continuous formative scaffolding and both long-term knowledge retention and higher-order analytical performance.
دروس علوم پایه بنیادین در اوایل برنامههای درسی علوم سلامت با تراکم مفهومی بالا، محتوای پیچیده رشتهای و تعداد زیاد دانشجویان مشخص میشوند. در این محیط پرچالش، دانشجویان اغلب به حفظیات سطحی تکیه میکنند تا درک عمیق مفهومی، که این امر هدف کلی برنامه درسی مبنی بر ایجاد بنیانهای علمی قوی برای آموزش بالینی بعدی را به خطر میاندازد. راهبرد آموزشی بهکاررفته در این پژوهش شامل چارچوبی آموزشی بود که ویدئوهای آموزشی کوتاه هفتگی گزینششده را با آزمونهای تکوینی آنلاین غیرهمزمان و مشوقدار ترکیب میکرد تا فرصتهایی برای شناسایی خلأهای مفهومی و تمرین بازیابی فعال برای دانشجویان فراهم آورد. با استفاده از طرح شبهآزمایشی مشاهدهای چنددانشگاهی در دو گروه متوالی از دانشجویان سال اول دندانپزشکی (N = 771)، ارتباط بین تکمیل فعال آزمونها (پاسخدهندگان) و عملکرد خام در آزمونهای جمعبندی مورد تحلیل قرار گرفت. مشارکت فعال در این راهبرد به طور معنادار و مثبت با نمرات خام آزمونهای جمعبندی در تمامی دورههای ارزیابی مرتبط بود (d کوهن = 0.37–0.77)، بهطوری که تکمیل مستمر مراحل، ۱۴.۱٪ از واریانس کل عملکرد ترم را تبیین کرد (η۲ = 0.1409). علاوه بر این، طراحی سؤال لنگر مفهومی منطبق با طبقهبندی بازنگریشده بلوم (N = 412) به کار گرفته شد تا بررسی شود که آیا مشارکت فعال با عملکرد در سطح آیتم در سؤالات سطوح بالاتر، که به پروفایلهای پاسخدهی طبقهای (Null، Basic و Deep) عملیاتی شده بود، مرتبط است یا خیر. اگرچه اندازه اثرات کوچک مشاهده شد (V کرامر = 0.10–0.11)، توزیع پروفایلهای پاسخدهی در سطح آیتم بین پاسخدهندگان و غیرپاسخدهندگان پس از اصلاح نرخ کشف کاذب از نظر آماری معنادار نشد (p adj >.25). طراحی آموزشی توصیفشده در اینجا، چارچوب تکوینی قابل تطبیق و مقیاسپذیری عملیاتی برای دروس علوم سلامت با ثبتنام بالا فراهم میکند. مطالعات آیندهنگر و طولی برای بررسی بیشتر رابطه بین پشتیبانی تکوینی مستمر و هر دو نگهداری دانش بلندمدت و عملکرد تحلیلی سطوح بالاتر ارزشمند خواهند بود.