assessment design

The rapid integration of digital technologies into teaching, learning, and assessment has created new avenues through which technology-facilitated gender-based violence (TFGBV) may occur in school settings. Existing scholarship has examined TFGBV mainly through the lenses of cyberbullying, digital safety, and student well-being. At the same time, emerging work has also begun to conceptualise digital assessment systems as sites of structural and institutional gendered risk. Building on this systems-level perspective, this conceptual paper shifts attention to the pedagogical and interactional layer of digital assessment, examining how teachers' assessment design and oversight decisions may shape the conditions under which TFGBV becomes more or less likely. Developed through a critical interdisciplinary literature review, the paper draws on Bronfenbrenner's ecological systems theory, digital citizenship frameworks, and classroom assessment scholarship to examine how learning management systems, peer assessment tools, collaborative online assignments, and social media-integrated assessment activities may create conditions conducive to gendered harassment, image-based abuse, and exclusionary behaviour among learners of all genders. The paper proposes the Assessment-Mediated Digital Ethics (AMDE) framework, a theoretically grounded but not yet empirically validated model integrating gender-responsive assessment design, embedded digital behavioural expectations, and structured teacher oversight. AMDE is presented as a complementary pedagogical extension of existing justice-oriented approaches to digital assessment and TFGBV, rather than as a claim of first conceptualisation. The framework provides a basis for future empirical research examining teacher-mediated assessment practices and their relationship to digital safety, ethical participation, and TFGBV risk across diverse educational contexts. Responsibility for TFGBV prevention is understood as shared among teachers, learners, schools, families, technology providers, and policymakers.

This article reviews the evidence base for a range of contemporary, student-centred curriculum design methodologies, including inquiry-based learning (IBL), problem-based learning (PBL), project-based learning (PjBL), challenge-based learning (CBL), place-based learning and competency-based education (CBE), and considers their applicability to the design of a contemporary undergraduate criminology degree. Drawing on systematic reviews, meta-analyses and recent empirical literature, the article evaluates the theoretical underpinnings, andragogical benefits and structural limitations of each approach. It situates these findings within the requirements of the Quality Assurance Agency for Higher Education Subject Benchmark Statement for Criminology (QAA, 2022), which explicitly positions research and critical enquiry as foundational to the discipline and calls for curriculum designs that embed equality, diversity and inclusion, education for sustainable development, and professional partnership. The article argues that no single methodology is sufficient on its own and that a principled hybrid model, drawing selectively on the strengths of each approach, offers the most coherent and evidence-informed basis for criminology curriculum design. Implications for degree revalidation, staff development, assessment design and partnership are discussed.

Higher education has historically operated under a paradigm of information scarcity, positioning universities as premier institutions for curating and transmitting knowledge. The convergence of digital hyper-abundance, algorithmic curation, and generative artificial intelligence (GenAI) has disrupted this model, producing what educators increasingly describe as a crisis of critical thinking in higher education. The purpose of this review is to examine how information abundance, algorithmic curation, and GenAI use may influence university students’ critical thinking, and to synthesise what this evidence implies for what universities teach and how they assess. Using a critical narrative review design with thematic synthesis, the review analyses 45 verified sources (empirical studies, systematic reviews and meta-analyses, conceptual works, and policy guidance) identified through citation chaining and targeted searches; empirical GenAI studies date from November 2022 to 2026, and foundational theoretical works from 1976 onward. The synthesis is anchored in an integrative framework that combines cognitive load and dual-process theory, cognitive offloading, scaffolding theory, self-regulated learning, and epistemic cognition, with critical thinking as the principal outcome. Five themes emerged: (1) information abundance appears to shift the central cognitive challenge from retrieval to evaluation; (2) unguided GenAI use is associated with reduced cognitive engagement and, in several experiments, with weaker independent performance once AI support is removed, although guardrailed designs appear to mitigate this; (3) fluent AI output can be mistaken for validated knowledge, and AI-detection tools are unreliable and biased; (4) lateral reading, guided AI use, and process-visible assessment have promising but uneven support; and (5) workload, equity, and policy constraints limit adoption. From these themes, the review derives the Fade–Visibility Matrix, which crosses AI support structure (persistent versus fading) with assessment design (product-only versus process-visible) to yield four diagnostic states. The evidence is early and methodologically uneven, but it is most consistent with a structural rather than individual explanation. Universities should therefore teach evaluation, verification, and metacognitive regulation explicitly, design AI support to fade, and redesign assessment so that the learning process, not only the finished product, can be observed.

This study aims to analyze the characteristics of Science, Technology, Engineering, and Mathematics (STEM) concepts integrated into literacy and science assessment based on the standards of the Programme for International Student Assessment (PISA), as well as to develop a contextual and applicable assessment design appropriate to the characteristics of students at SMP PGRI 5 Denpasar. The study employed a mixed-methods approach with an exploratory sequential design. The participants consisted of 116 students and 6 teachers. Data were collected through observations, interviews, document analysis, questionnaires, and expert validation. Data analysis involved qualitative analysis, the Gregory validity index, empirical validity, and instrument reliability analysis. The findings indicate that STEM-PISA assessment characteristics include the use of contextual stimuli based on real-world problems, the utilization of data and graphs, higher-order reasoning, cross-disciplinary integration, varied response formats, and assessment of thinking processes. The developed assessment design integrates science, technology, engineering, and mathematics through authentic contexts, data literacy, problem-solving, and assessment rubrics. Students’ perceptions obtained a mean score of 3.96, while teachers’ perceptions reached 4.42 on a five-point scale, indicating that the assessment design was considered relevant and acceptable for supporting contextual learning and assessment.

هدف این پژوهش تحلیل ویژگی‌های مفاهیم علوم، فناوری، مهندسی و ریاضیات (STEM) ادغام‌شده در ارزشیابی سواد و علوم بر اساس استانداردهای برنامه ارزیابی بین‌المللی دانش‌آموزان (PISA) و همچنین توسعه یک طرح ارزشیابی زمینه‌محور و کاربردی متناسب با ویژگی‌های دانش‌آموزان دبیرستان PGRI 5 دنپاسار است. این پژوهش با رویکرد روش‌های ترکیبی و با طرح توالی اکتشافی انجام شد. شرکت‌کنندگان شامل ۱۱۶ دانش‌آموز و ۶ معلم بودند. داده‌ها از طریق مشاهده، مصاحبه، تحلیل اسناد، پرسشنامه و اعتبارسنجی خبرگان گردآوری شد. تحلیل داده‌ها شامل تحلیل کیفی، شاخص روایی Gregory، روایی تجربی و تحلیل پایایی ابزار بود. یافته‌ها نشان می‌دهد که ویژگی‌های ارزشیابی STEM-PISA شامل استفاده از محرک‌های زمینه‌ای مبتنی بر مسائل واقعی، بهره‌گیری از داده‌ها و نمودارها، استدلال سطوح بالاتر، ادغام میان‌رشته‌ای، قالب‌های پاسخ متنوع و ارزشیابی فرایندهای تفکر است. طرح ارزشیابی توسعه‌یافته، علوم، فناوری، مهندسی و ریاضیات را از طریق زمینه‌های اصیل، سواد داده، حل مسئله و روبریک‌های ارزشیابی ادغام می‌کند. میانگین نمره ادراک دانش‌آموزان ۳.۹۶ و ادراک معلمان ۴.۴۲ در مقیاس پنج‌درجه‌ای به دست آمد که نشان‌دهنده مرتبط و قابل قبول بودن طرح ارزشیابی برای حمایت از یادگیری و ارزشیابی زمینه‌محور است.

The transformation of 21st-century education demands the strengthening of higher-order thinking skills, known as the 4Cs (critical thinking, creativity, communication, and collaboration), along with the need for technology integration in the learning and assessment process. In the context of Sekolah Penggerak (Moving Schools), Indonesian language teachers have a strategic role in designing assessments that are oriented not only toward cognitive achievement but also toward developing students' competencies and character. This study aims to examine the implementation of the Technological Pedagogical Content Knowledge (TPACK) approach in assessing 4C skills, formulate an effective TPACK-based 4C skills assessment model, and construct an applicable assessment concept for Indonesian language teachers at Sekolah Penggerak (Moving Schools) in Bali Province. This study used a mixed methods approach with an exploratory design. Qualitative data were obtained through observation, document study, in-depth interviews, and focus group discussions (FGDs), while quantitative data were collected through questionnaires that had been tested for validity and reliability. The study subjects included Indonesian language teachers, school principals, and educational stakeholders at Sekolah Penggerak (Moving Schools) in Bali Province. Qualitative data were analyzed using thematic analysis, while quantitative data were analyzed using descriptive statistics. The research results show that Indonesian language teachers have positive perceptions of the implementation of the TPACK-based 4C skills assessment. The integration of technology into the assessment is considered capable of increasing student engagement, encouraging reflection on learning, and strengthening student-centered learning. The developed assessment model emphasizes the integration of learning objectives, pedagogical strategies, Indonesian language content, and the contextual use of digital technology. The resulting assessment concept is flexible, adaptive, and relevant to the characteristics of the Driving Schools and the implementation of the Independent Curriculum.

تحول آموزش قرن بیست و یکم مستلزم تقویت مهارت‌های تفکر سطح بالاتر، که به عنوان مهارت‌های 4C (تفکر انتقادی، خلاقیت، ارتباط و همکاری) شناخته می‌شوند، همراه با نیاز به ادغام فناوری در فرایند یاددهی و ارزیابی است. در زمینه مدارس پیشرو (Sekolah Penggerak)، معلمان زبان اندونزیایی نقش راهبردی در طراحی ارزیابی‌هایی دارند که نه تنها بر دستاوردهای شناختی بلکه بر توسعه شایستگی‌ها و شخصیت دانش‌آموزان نیز متمرکز است. هدف این پژوهش بررسی اجرای رویکرد دانش محتوایی-آموزشی-فناورانه (TPACK) در ارزیابی مهارت‌های 4C، تدوین یک مدل ارزیابی مؤثر مبتنی بر TPACK برای مهارت‌های 4C و ساخت یک مفهوم ارزیابی قابل اجرا برای معلمان زبان اندونزیایی در مدارس پیشرو استان بالی است. این پژوهش با رویکرد روش ترکیبی و طرح اکتشافی انجام شد. داده‌های کیفی از طریق مشاهده، مطالعه اسناد، مصاحبه‌های عمیق و بحث‌های گروهی متمرکز (FGD) گردآوری شد و داده‌های کمی از طریق پرسشنامه‌هایی که روایی و پایایی آن‌ها آزمون شده بود، جمع‌آوری گردید. شرکت‌کنندگان پژوهش شامل معلمان زبان اندونزیایی، مدیران مدارس و ذینفعان آموزشی مدارس پیشرو استان بالی بودند. داده‌های کیفی با استفاده از تحلیل تماتیک و داده‌های کمی با آمار توصیفی تحلیل شدند. نتایج پژوهش نشان داد که معلمان زبان اندونزیایی نگرش مثبتی نسبت به اجرای ارزیابی مهارت‌های 4C مبتنی بر TPACK دارند. ادغام فناوری در ارزیابی، موجب افزایش مشارکت دانش‌آموزان، تشویق به بازتاب یادگیری و تقویت یادگیری دانش‌آموزمحور می‌شود. مدل ارزیابی توسعه‌یافته بر ادغام اهداف یادگیری، راهبردهای آموزشی، محتوای زبان اندونزیایی و استفاده زمینه‌ای از فناوری دیجیتال تأکید دارد. مفهوم ارزیابی حاصل، انعطاف‌پذیر، سازگار و متناسب با ویژگی‌های مدارس پیشرو و اجرای برنامه درسی مستقل است.

This study analyzes the need for a comprehensive and contextual evaluation model for the Teacher Professional Education Program (PPG) from the perspective of schools as employers of its graduates. An exploratory qualitative needs-assessment design was employed. Data were collected through three semi-structured interview sessions with principals and academic leaders at schools employing PPG graduates, complemented by a review of relevant policies and teacher-education evaluation literature. Approximately 40 minutes of recorded interviews were transcribed and analyzed through familiarization, coding, categorization, theme development, and interpretation. Credibility was strengthened by comparing evidence across interview sessions and checking its consistency with program documents. Five needs emerged: multidimensional assessment of graduate competence; responsiveness to school-specific competencies; stronger professional and socio-emotional dispositions; better alignment of field experience with school conditions; and systematic involvement of employing schools in outcome evaluation. Graduates were generally perceived as pedagogically, professionally, and socially competent. Nevertheless, the schools identified areas requiring reinforcement, including English for international-class instruction, integration of institutional values, contemporary instructional approaches, mental readiness, and socio-emotional sensitivity. These findings indicate that PPG evaluation should move beyond completion and implementation indicators by connecting context, input, process, product, and outcomes through multi-stakeholder evidence. The findings provide an empirical foundation for developing PRIMA-Eval as an adaptive, improvement-oriented evaluation model.

این مطالعه به تحلیل نیاز برای یک مدل ارزیابی جامع و زمینه‌مند در برنامه آموزش حرفه‌ای معلمان (PPG) از دیدگاه مدارس به عنوان کارفرمایان فارغ‌التحصیلان این برنامه می‌پردازد. از طرح پژوهش کیفی اکتشافی مبتنی بر نیازسنجی استفاده شده است. داده‌ها از طریق سه جلسه مصاحبه نیمه‌ساختاریافته با مدیران و رهبران آموزشی مدارس استخدام‌کننده فارغ‌التحصیلان PPG جمع‌آوری شد و با مرور سیاست‌های مرتبط و ادبیات ارزیابی آموزش معلمان تکمیل گردید. حدود ۴۰ دقیقه مصاحبه ضبط‌شده رونویسی و از طریق آشنایی، کدگذاری، دسته‌بندی، توسعه تم‌ها و تفسیر تحلیل شد. اعتبار نتایج با مقایسه شواهد میان جلسات مصاحبه و بررسی تطابق آن با اسناد برنامه تقویت گردید. پنج نیاز شناسایی شد: ارزیابی چندبعدی شایستگی فارغ‌التحصیلان؛ پاسخگویی به شایستگی‌های خاص مدرسه؛ تقویت گرایش‌های حرفه‌ای و اجتماعی-هیجانی؛ همسویی بهتر تجربه میدانی با شرایط مدرسه؛ و مشارکت نظام‌مند مدارس کارفرما در ارزیابی پیامدها. فارغ‌التحصیلان عموماً از نظر آموزشی، حرفه‌ای و اجتماعی شایسته ارزیابی شدند. با این حال، مدارس حوزه‌هایی را نیازمند تقویت دانستند، از جمله زبان انگلیسی برای تدریس کلاس‌های بین‌المللی، ادغام ارزش‌های نهادی، رویکردهای نوین آموزشی، آمادگی ذهنی و حساسیت اجتماعی-هیجانی. این یافته‌ها نشان می‌دهد که ارزیابی PPG باید فراتر از شاخص‌های اتمام و اجرا رفته و با پیوند دادن زمینه، ورودی، فرایند، محصول و پیامدها از طریق شواهد چندذینفعی عمل کند. یافته‌ها مبنای تجربی برای توسعه مدل ارزیابی تطبیقی و بهبودمحور PRIMA-Eval فراهم می‌کند.

Assessment in higher education often suffers from a critical disconnect where student feedback benefits future cohorts rather than current participants. This study presents SHARP (Strategic, Holistic, Adaptive, Reflective, Process), a systematic framework for embedding real-time student voice into assessment design to develop students’ assessment literacy and engagement. SHARP was piloted across three in-class Mathematics tests with 246 students on a foundation-level UK university programme using a mixed-methods quasi-experimental design with post-assessment surveys from 108 students administered before grade release. Quantitative analysis revealed statistically significant improvements in clarity ratings, whilst fairness perceptions rose from 70.3% to 96.0%. A quasi-experimental comparison with historical controls demonstrated a 73% reduction in assessment volatility, reflecting more consistent student performance across assessments. Qualitative evidence illustrated students’ developing capacity to evaluate and articulate assessment design. This pilot demonstrates SHARP’s potential as a transferable framework for student-informed assessment practice, though replication is needed to establish broader generalisability.

ارزیابی در آموزش عالی اغلب با یک گسست اساسی مواجه است که در آن بازخورد دانشجویان بیشتر به نفع گروه‌های آینده است تا شرکت‌کنندگان فعلی. این مطالعه چارچوب SHARP (راهبردی، کل‌نگر، سازگارپذیر، تأملی، فرایندی) را معرفی می‌کند؛ چارچوبی نظام‌مند برای ادغام صدای دانشجویان در زمان واقعی در طراحی ارزیابی با هدف توسعه سواد ارزیابی و مشارکت دانشجویان. چارچوب SHARP در سه آزمون کلاسی ریاضی با حضور ۲۴۶ دانشجو در یک برنامه دانشگاهی سطح پایه در بریتانیا، با استفاده از طرح شبه‌آزمایشی روش‌های ترکیبی و پرسشنامه‌های پس از ارزیابی از ۱۰۸ دانشجو که پیش از اعلام نمرات اجرا شد، به صورت آزمایشی به کار گرفته شد. تحلیل کمی بهبود معنادار آماری در امتیازدهی به وضوح را نشان داد، در حالی که ادراک از انصاف ارزیابی از ۷۰٫۳٪ به ۹۶٫۰٪ افزایش یافت. مقایسه شبه‌آزمایشی با گروه‌های کنترل تاریخی، کاهش ۷۳٪ در نوسان ارزیابی را نشان داد که بیانگر عملکرد یکنواخت‌تر دانشجویان در ارزیابی‌ها بود. شواهد کیفی نیز نشان داد که توانایی دانشجویان در ارزیابی و بیان طراحی ارزیابی توسعه یافته است. این مطالعه آزمایشی، پتانسیل چارچوب SHARP را به عنوان الگویی قابل انتقال برای رویه ارزیابی مبتنی بر مشارکت دانشجویان نشان می‌دهد، هرچند تکرار پژوهش برای تعمیم‌پذیری گسترده‌تر ضروری است.

Introduction Legal and Ethical Business (LEB) curricula in higher education (HE) are traditionally taught through lectures and subsequently assessed via invigilated examinations. These methods have been shown to result in suboptimal student engagement, with challenges to students inculcating the desired theoretical knowledge. Studies have shown that authentic assessment (AA) offers a viable alternative towards enhancement of student learning, engagement, and skill development while maintaining academic integrity. This study proposes an authentic assessment practical framework for LEB. The proposed framework may support the adoption of AA in LEB curricula and in turn have a positive impact on student learning in higher education. Methods A systematic literature review (SLR) was employed to identify, evaluate, and synthesise existing research on the topic. The review followed a structured search, screening and categorisation process to develop the proposed evidence-informed framework for AA. Results A structured framework is proposed for implementing AA in Legal and Ethical Business curricula, comprising of five key processes: (1) selecting appropriate AA forms; (2) aligning AA characteristics with the chosen assessment design; (3) incorporating the anticipated impacts of AA; (4) implementing the designed AA within the curricula; and (5) evaluating its effectiveness. Discussion The proposed framework informed by the SLR and pedagogical experience of the author, aims to guide educators in adopting AA practices that are context-specific, pedagogically-sound, and aligned with learning outcomes. It offers a scaffolded framework for LEB curricula so that it can be structured across key dimensions of authenticity including real-world complexity, core knowledge and skills, as well as meaningful application in the contextual learning environment. It also offers potential applicability to other regulatory curricula in business education and other disciplines with similar learning outcomes. It may support institutions in upholding the necessity for continuous quality enhancement including innovation in teaching, learning and assessment, thereby enhancing the overall student learning experience.

مقدمه: برنامه‌های درسی حقوقی و اخلاقی کسب‌وکار (LEB) در آموزش عالی به طور سنتی از طریق سخنرانی تدریس و سپس از طریق آزمون‌های نظارت‌شده ارزیابی می‌شوند. پژوهش‌ها نشان داده‌اند که این روش‌ها منجر به مشارکت کمتر دانشجویان شده و دانشجویان در درونی‌سازی دانش نظری مطلوب با چالش‌هایی مواجه می‌شوند. مطالعات نشان داده‌اند که ارزیابی اصیل (AA) جایگزینی مناسب برای ارتقاء یادگیری، مشارکت و توسعه مهارت‌های دانشجویان است و در عین حال یکپارچگی علمی را حفظ می‌کند. این مطالعه چارچوب عملی ارزیابی اصیل را برای LEB پیشنهاد می‌کند. چارچوب پیشنهادی می‌تواند از پذیرش AA در برنامه‌های درسی LEB حمایت کند و در نتیجه تأثیر مثبتی بر یادگیری دانشجویان در آموزش عالی داشته باشد. روش‌ها: مرور نظام‌مند ادبیات (SLR) برای شناسایی، ارزیابی و ترکیب پژوهش‌های موجود در این حوزه به کار گرفته شد. این مرور با یک فرایند جستجوی ساختاریافته، غربالگری و دسته‌بندی به منظور توسعه چارچوب مبتنی بر شواهد برای AA دنبال شد. نتایج: چارچوبی ساختاریافته برای اجرای AA در برنامه‌های درسی حقوقی و اخلاقی کسب‌وکار پیشنهاد شده است که شامل پنج فرایند کلیدی است: (۱) انتخاب اشکال مناسب AA؛ (۲) همسویی ویژگی‌های AA با طراحی ارزیابی انتخاب‌شده؛ (۳) گنجاندن تأثیرات مورد انتظار AA؛ (۴) اجرای AA طراحی‌شده در برنامه درسی؛ و (۵) ارزیابی اثربخشی آن. بحث: چارچوب پیشنهادی که مبتنی بر SLR و تجربه آموزشی نویسنده است، با هدف راهنمایی مدرسان در پذیرش شیوه‌های AA که متناسب با زمینه، از نظر آموزشی معتبر و همسو با نتایج یادگیری هستند، ارائه شده است. این چارچوب ساختاریافته برای برنامه‌های درسی LEB ارائه می‌دهد تا بتوان آن را در ابعاد کلیدی اصالت از جمله پیچیدگی دنیای واقعی، دانش و مهارت‌های اصلی و همچنین کاربرد معنادار در محیط یادگیری زمینه‌ای ساختاربندی کرد. همچنین قابلیت کاربرد بالقوه در سایر برنامه‌های درسی مقرراتی در آموزش کسب‌وکار و سایر رشته‌ها با نتایج یادگیری مشابه را دارد. این چارچوب می‌تواند از مؤسسات در حفظ ضرورت ارتقای مستمر کیفیت از جمله نوآوری در تدریس، یادگیری و ارزیابی حمایت کند و در نتیجه تجربه کلی یادگیری دانشجویان را ارتقاء دهد.