Can artificial intelligence read our handwriting? A comparison of humans and artificial intelligence in the future of assessment
آیا هوش مصنوعی میتواند دستخط ما را بخواند؟ مقایسه انسان و هوش مصنوعی در آینده ارزیابی
چکیده
The purpose of this study is to evaluate the legibility of fourth-grade elementary school students' handwriting and to examine the differences and relationships between two evaluators: a human researcher and artificial intelligence (ChatGPT). To this end, the study was conducted using the descriptive survey model, one of the quantitative research approaches. The study sample consisted of 67 fourth-grade students attending a public elementary school. The students' handwriting was evaluated using the Multidimensional Legibility Scale. Writing samples were collected from each student, including copying samples, dictated samples, and free writing samples. One class period was allocated for each writing task. The 201 handwriting samples obtained from the 67 students were evaluated by a researcher (the second author) and artificial intelligence (ChatGPT). According to the findings, no significant differences were detected between the artificial intelligence and the researcher in any writing type or subdimension, except for the slant subdimension of free writing. However, a high level of positive and significant correlation was identified between the two raters. Findings indicate that artificial intelligence can produce results comparable to those of expert raters when evaluating handwriting legibility. The fact that differences among raters are not statistically significant suggests that AI-based handwriting evaluations could serve as an objective and reliable alternative.
هدف این پژوهش، ارزیابی خوانایی دستخط دانشآموزان پایه چهارم ابتدایی و بررسی تفاوتها و روابط بین دو ارزیاب: یک پژوهشگر انسانی و هوش مصنوعی (ChatGPT) است. بدین منظور، پژوهش با استفاده از مدل پیمایش توصیفی که یکی از رویکردهای پژوهش کمی است، انجام شد. نمونه پژوهش شامل ۶۷ دانشآموز پایه چهارم یک مدرسه ابتدایی دولتی بود. دستخط دانشآموزان با استفاده از مقیاس چندبعدی خوانایی ارزیابی شد. نمونههای نوشتاری از هر دانشآموز جمعآوری گردید که شامل نمونههای رونویسی، نمونههای دیکته و نمونههای نوشتار آزاد بود. برای هر تکلیف نوشتاری یک جلسه کلاسی اختصاص داده شد. ۲۰۱ نمونه دستخط بهدستآمده از ۶۷ دانشآموز توسط یک پژوهشگر (نویسنده دوم) و هوش مصنوعی (ChatGPT) ارزیابی شد. بر اساس یافتهها، به جز زیرمقیاس شیب در نوشتار آزاد، هیچ تفاوت معناداری بین هوش مصنوعی و پژوهشگر در هیچیک از انواع نوشتار یا زیرمقیاسها مشاهده نشد. با این حال، همبستگی مثبت و معنادار بالایی بین دو ارزیاب شناسایی گردید. یافتهها نشان میدهد که هوش مصنوعی میتواند نتایجی قابل مقایسه با ارزیابان خبره در ارزیابی خوانایی دستخط ارائه دهد. عدم معناداری آماری تفاوت بین ارزیابان، حاکی از آن است که ارزیابیهای دستخط مبتنی بر هوش مصنوعی میتواند به عنوان جایگزینی عینی و قابل اعتماد مورد استفاده قرار گیرد.