AI-Assisted vs. Teacher-Based Assessment of EFL Students' Writing: A Comparative Study.

Saved in:
Bibliographic Details
Title: AI-Assisted vs. Teacher-Based Assessment of EFL Students' Writing: A Comparative Study.
Alternate Title: Dirbtinio intelekto ir dėstytojo atliekamo EFL studentų rašymo vertinimo priešprieša: lyginamasis tyrimas.
Authors: Tekman, İbrahim1 itekman@ciu.edu.tr, Tekman, Tülay Kaya2 tulay.kaya@neu.edu.tr
Source: Pedagogy Studies / Pedagogika. 2025, Vol. 160 Issue 4, p23-39. 17p.
Subject Terms: *Educational evaluation, *Computer assisted language instruction, *Language ability testing, *Comparative studies, *Educational technology
Abstract (English): Artificial intelligence (AI) plays a growing role in foreign language learning, especially in assessing learners' writing. This study examined 11 EFL compositions, evaluated by both an AI program and three teachers. Findings show AI offers speed, consistency, and objectivity, but struggles with content and organization. Thus, AI should be used as a supportive tool, complementing teachers rather than replacing them in EFL writing assessment. [ABSTRACT FROM AUTHOR]
Abstract (Lithuanian): Dirbtinis intelektas (DI) tapo neišvengiama mūsų gyvenimo dalimi, taip pat ir švietimo sistemoje. Anglų kalbos, kaip užsienio kalbos, mokymasis (EFL) sparčiai keičiasi integruojant DI. Vienas iš svarbių užsienio kalbos mokymo aspektų yra vertinimas. DI integravimas į EFL rašymo vertinimą sulaukė susidomėjimo: toks vertinimas gali pagerinti vertinimo praktiką, sumažinti vertinimo apkrovą ir suteikti greitą grįžtamąjį ryšį. Šiame tyrime buvo naudojamas kokybinės analizės modelis, siekiant palyginti DI grįstą vertinimą ir dėstytojų vertinimą įvertinant EFL studentų rašymo kompozicijas. Buvo įvertinta vienuolika kompozicijų, parašytų B1 kalbos lygio studentų, studijuojančių privačiame Kipro universitete, Anglų kalbos parengimo katedroje. Rašinius vertino dirbtinio intelekto programa „DeepSeek" ir trys anglų kalbos dėstytojai, naudodami tą pačią rašymo vertinimo skalę, pagal kurią buvo vertinamas turinys, struktūra, žodynas, kalbos vartojimas ir rašymo technika. Rezultatai parodė, kad dirbtinio intelekto atliktas vertinimas buvo veiksmingas, greitas ir nuoseklus vertinant gramatiką, žodyną ir rašymo techniką, tačiau turėjo trūkumų vertinant turinį ir struktūrą. Darytina išvada, kad dirbtiniu intelektu grįstas vertinimas gali būti integruotas kaip pagalbinė priemonė, tačiau tai negali visiškai pakeisti dėstytojų vertinimo. [ABSTRACT FROM AUTHOR]
Copyright of Pedagogy Studies / Pedagogika is the property of Vytautas Magnus University and its content may not be copied or emailed to multiple sites without the copyright holder's express written permission. Additionally, content may not be used with any artificial intelligence tools or machine learning technologies. However, users may print, download, or email articles for individual use. This abstract may be abridged. No warranty is given about the accuracy of the copy. Users should refer to the original published version of the material for the full abstract. (Copyright applies to all Abstracts.)
Database: Education Research Complete
Description
Abstract:Artificial intelligence (AI) plays a growing role in foreign language learning, especially in assessing learners' writing. This study examined 11 EFL compositions, evaluated by both an AI program and three teachers. Findings show AI offers speed, consistency, and objectivity, but struggles with content and organization. Thus, AI should be used as a supportive tool, complementing teachers rather than replacing them in EFL writing assessment. [ABSTRACT FROM AUTHOR]
ISSN:13920340
DOI:10.15823/p.2025.160.2