Brina Kurent

As technology-enhanced learning environments increasingly promote active and situated engagement, assessment must move beyond isolated tests of knowledge and skills to capture learners' performance in authentic contexts. In technology and engineering education, systems thinking is often embedded in product-based learning, yet technical product quality alone may not show how pre-service preschool teachers organise, connect, and justify systems-related ideas. The aim of this study was to examine systems-oriented reasoning as part of complex technology and engineering learning outcomes by combining the Distinctions, Systems, Relationships, and Perspectives (DSRP) framework with Epistemic Network Analysis (ENA). Students' written reflections on the “Product as a System” were coded across the four DSRP dimensions and re-encoded as binary indicators of DSRP achievement levels for ENA. Using ENA, we identified differences in the prominence and co-occurrence of DSRP-related reasoning elements between students taught through the technology-enhanced systems-thinking approach (STICT) and those taught through a traditional approach. The findings revealed distinguishable DSRP epistemic network structures between the two groups, with the STICT group displaying a more heterogeneous structure and the traditional group showing a more concentrated network around system organisation, functional relationships, and multiple perspectives. The ENA indicators were more clearly associated with written report quality than with technical product quality. This study contributes to the assessment of systems-oriented reasoning. It suggests that integrating DSRP-based coding and ENA provides complementary evidence about systems-oriented reasoning beyond that captured by product quality alone, thereby contributing to a broader assessment of technology and engineering learning outcomes in authentic higher education assessment tasks.

با توجه به اینکه محیط‌های یادگیری مبتنی بر فناوری به طور فزاینده‌ای مشارکت فعال و موقعیتی را ترویج می‌کنند، ارزیابی باید فراتر از آزمون‌های مجزای دانش و مهارت‌ها رفته و عملکرد یادگیرندگان را در زمینه‌های اصیل ثبت کند. در آموزش فناوری و مهندسی، تفکر سیستمی اغلب در یادگیری مبتنی بر محصول جای گرفته است، اما کیفیت فنی محصول به تنهایی ممکن است نشان ندهد که دانشجومعلمان پیش‌دبستانی چگونه ایده‌های مرتبط با سیستم را سازمان‌دهی، ارتباط‌دهی و توجیه می‌کنند. هدف این مطالعه بررسی استدلال مبتنی بر سیستم به عنوان بخشی از پیامدهای پیچیده یادگیری فناوری و مهندسی از طریق ترکیب چارچوب تمایزات، سیستم‌ها، روابط و دیدگاه‌ها (DSRP) با تحلیل شبکه معرفتی (ENA) بود. بازتاب‌های مکتوب دانشجویان درباره «محصول به عنوان یک سیستم» بر اساس چهار بُعد DSRP کدگذاری شد و به عنوان شاخص‌های دودویی سطوح دستیابی به DSRP برای ENA بازکدگذاری گردید. با استفاده از ENA، تفاوت‌هایی در برجستگی و هم‌رخدادی عناصر استدلال مرتبط با DSRP بین دانشجویانی که با رویکرد تفکر سیستمی مبتنی بر فناوری (STICT) آموزش دیده بودند و آن‌هایی که با رویکرد سنتی آموزش دیده بودند، شناسایی شد. یافته‌ها ساختارهای متمایز شبکه معرفتی DSRP را بین دو گروه نشان داد، به طوری که گروه STICT ساختاری ناهمگن‌تر و گروه سنتی شبکه‌ای متمرکزتر حول سازمان‌دهی سیستم، روابط عملکردی و دیدگاه‌های چندگانه داشت. شاخص‌های ENA ارتباط واضح‌تری با کیفیت گزارش مکتوب نسبت به کیفیت فنی محصول داشتند. این مطالعه به ارزیابی استدلال مبتنی بر سیستم کمک می‌کند و نشان می‌دهد که ادغام کدگذاری مبتنی بر DSRP و ENA شواهد مکملی درباره استدلال سیستمی فراتر از آنچه کیفیت محصول به تنهایی ثبت می‌کند، ارائه می‌دهد و بدین ترتیب به ارزیابی گسترده‌تر پیامدهای یادگیری فناوری و مهندسی در وظایف اصیل ارزیابی آموزش عالی کمک می‌کند.