distractor effectiveness

Evaluation and assessment are integral components of modern biology education, serving not only to measure final learning outcomes but also to support continuous learning processes. This study aims to provide a comprehensive overview of the relationship among assessment instrument development, assessment result analysis, and biology teacher competence. A literature review method with a qualitative descriptive approach was employed. Data collection involved analyzing scientific articles published between 2020 and 2025 from various databases, including Google Scholar, ScienceDirect, and ERIC. The findings indicate that: (1) biology assessment instrument development currently focuses on measuring complex competencies, such as scientific literacy, higher-order thinking skills (HOTS), and genetic literacy; (2) the analysis of assessment results through validity, reliability, item difficulty, discrimination power, and distractor effectiveness is crucial to ensuring item quality; and (3) biology teachers play a strategic role encompassing conceptual, practical, and socio-emotional assessment literacy to design, implement, interpret, and utilize assessment results as a basis for feedback and instructional improvement. In conclusion, the integration of valid instruments, systematic item analysis, and adequate teacher assessment literacy is key to achieving quality biology education oriented toward holistic student competency development.

ارزیابی و سنجش از اجزای جدایی‌ناپذیر آموزش زیست‌شناسی مدرن به‌شمار می‌روند که نه‌تنها برای سنجش نتایج نهایی یادگیری بلکه برای حمایت از فرآیندهای یادگیری مستمر نیز به‌کار می‌روند. هدف این پژوهش ارائه مروری جامع بر ارتباط میان توسعه ابزارهای سنجش، تحلیل نتایج ارزشیابی و شایستگی معلمان زیست‌شناسی است. روش پژوهش مرور متون با رویکرد توصیفی-کیفی بوده است. گردآوری داده‌ها از طریق تحلیل مقالات علمی منتشرشده بین سال‌های 2020 تا 2025 از پایگاه‌های مختلف از جمله Google Scholar، ScienceDirect و ERIC انجام شده است. یافته‌ها نشان می‌دهد: (1) توسعه ابزارهای سنجش زیست‌شناسی در حال حاضر بر سنجش شایستگی‌های پیچیده‌ای مانند سواد علمی، مهارت‌های تفکر سطح‌بالا (HOTS) و سواد ژنتیکی متمرکز است؛ (2) تحلیل نتایج ارزشیابی از طریق روایی، پایایی، دشواری سؤال، قدرت تمایز و اثربخشی گزینه‌های انحرافی برای تضمین کیفیت سؤال‌ها حیاتی است؛ و (3) معلمان زیست‌شناسی نقش راهبردی دربرگیرنده سواد ارزشیابی مفهومی، عملی و اجتماعی-هیجانی دارند تا بتوانند نتایج ارزشیابی را طراحی، اجرا، تفسیر و به‌عنوان مبنایی برای بازخورد و بهبود آموزشی به‌کار گیرند. در نتیجه، ادغام ابزارهای معتبر، تحلیل نظام‌مند سؤال‌ها و سواد ارزشیابی کافی معلمان، کلید دستیابی به آموزش زیست‌شناسی باکیفیت و مبتنی بر توسعه شایستگی جامع دانش‌آموزان است.

Background-This study addresses the persistently low pass rate on the Teacher Professional Education Competency Exam (UKP-PPG) among prospective science teachers in Indonesia. This low pass rate has been largely attributed to inadequate preparation and limited mastery of the subject matter. Objective-The study aims to develop a valid, reliable, and feasible pilot test (TO) as an evaluation tool to assess the readiness of prospective science teachers prior to taking the UKP-PPG. Method-Using a research and development approach based on the ADDIE framework, this study involved 857 participants with diverse demographic and occupational backgrounds, including gender and province as demographic data, and teaching level as occupational data. The researchers developed 35 items underwent psychometric analysis covering validity, reliability, difficulty level, discrimination power, and distractor effectiveness (DE). Results-Results indicated 20 valid items (α = 0.793, high reliability), with difficulty levels dominated by the easy category and varied DE across items. Furthermore, 61.6% of participants achieved high scores. Conclusion-These findings confirm that the developed TO instrument possesses high psychometric quality and is suitable for use as a diagnostic tool to accurately and reliably measure the readiness of prospective science teachers.

زمینه: این پژوهش به نرخ پایین قبولی مداوم در آزمون شایستگی آموزش حرفه‌ای معلمان (UKP-PPG) در میان داوطلبان معلمی علوم در اندونزی می‌پردازد. این نرخ پایین قبولی عمدتاً به آمادگی ناکافی و تسلط محدود بر محتوای درسی نسبت داده می‌شود. هدف: هدف این پژوهش توسعه یک آزمون آزمایشی (TO) معتبر، پایا و امکان‌پذیر به عنوان ابزاری برای ارزیابی آمادگی داوطلبان معلمی علوم پیش از شرکت در UKP-PPG است. روش: با استفاده از رویکرد پژوهش و توسعه مبتنی بر چارچوب ADDIE، این مطالعه با مشارکت ۸۵۷ نفر با پیشینه‌های جمعیت‌شناختی و شغلی متنوع، از جمله جنسیت و استان به عنوان داده‌های جمعیت‌شناختی و سطح تدریس به عنوان داده‌های شغلی انجام شد. پژوهشگران ۳۵ گویه طراحی کردند که مورد تحلیل روان‌سنجی از جمله روایی، پایایی، سطح دشواری، قدرت تمییز و اثربخشی گزینه‌های انحرافی (DE) قرار گرفتند. یافته‌ها: نتایج نشان داد که ۲۰ گویه معتبر (α = 0.793، پایایی بالا) هستند، سطوح دشواری عمدتاً در دسته آسان قرار داشتند و اثربخشی گزینه‌های انحرافی در گویه‌ها متفاوت بود. همچنین، ۶۱.۶٪ از شرکت‌کنندگان نمرات بالایی کسب کردند. نتیجه‌گیری: این یافته‌ها تأیید می‌کند که ابزار TO توسعه‌یافته از کیفیت روان‌سنجی بالایی برخوردار است و به عنوان ابزاری تشخیصی برای سنجش دقیق و پایای آمادگی داوطلبان معلمی علوم مناسب است.