Evaluating the Use of Wordtune as an AI Writing Assistant During the Editing Phase: Impact on the Content Quality of EFL Students’ Academic Writing The Case of Third-Year EFL Bachelor Students at Mohamed Cherif Messaadia University of Souk Ahras

Abstract

Abstract The current study aims to evaluate the impact of using Wordtune as an Artificial Intelligence (AI) writing assistant on the content quality of third-year EFL (English as a Foreign Language) Bachelor students' academic writing during the editing phase at Mohamed Cherif Messaadia University, in Souk-Ahras. Grounded in the context of challenges faced by EFL learners in producing high-quality academic texts, the study specifically assesses improvements in six aspects of content quality: language use and style, accuracy, clarity and precision, conciseness, vocabulary diversity, and readability. Adopting a one-group pretest-posttest design, which falls under the category of quasi-experimental research, both quantitative and qualitative methods are used to pursue these objectives. Twenty-two participants underwent a pre-test, treatment sessions that served as introductory and training sessions for using the tool, and a post-test to identify Wordtune's effect after the editing process. The qualitative insights were obtained through a focus group interview to explore students’ perceptions of using Wordtune as an editing tool. The findings revealed significant improvements across content quality criteria in the post-test writing, alongside positive perceptions expressed by the participants of the focus group interview. The obtained findings demonstrate that integrating AI writing assistants like Wordtune into the editing phase can effectively support EFL students in producing higher-quality academic texts. To this end, the study provides evidence-based recommendations for integrating AI writing tools into academic settings to foster student autonomy and improve learning outcomes ------------------ الملخص تهدف هذه الدراسة إلى تقييم تأثير استخدام "ووردتون" كمساعد كتابة قائم على الذكاء الاصطناعي (AI) على جودة محتوى الكتابة الأكاديمية لطلبة السنة الثالثة في قسم الإنجليزية كلغة أجنبية بجامعة محمد الشريف مساعدية بسوق أهراس، وذلك خلال مرحلة التحرير.. وانطلاقًا من سياق التحديات التي يواجهها متعلمو اللغة الإنجليزية كلغة أجنبية في إنتاج نصوص أكاديمية عالية الجودة، تقيم الدراسة على وجه التحديد التحسينات في ستة جوانب من جودة المحتوى: استخدام اللغة والأسلوب، والضبط اللغوي والدقة، والوضوح والدقة، والإيجاز، وتنوع المفردات، وسهولة القراءة. واعتمادًا على تصميم الاختبار القبلي-البعدي لمجموعة واحدة، والذي يندرج تحت فئة البحوث شبه التجريبية، تم استخدام كل من الأساليب الكمية والنوعية لتحقيق هذه الأهداف.خضع اثنان وعشرون مشاركًا لاختبار قبلي، ثم شاركوا في حصص تدريبية تعريفية بكيفية استخدام الأداة، تلاها اختبار بعدي لقياس تأثير "ووردتون" بعد عملية التحرير. كما تم جمع بيانات نوعية من خلال مقابلة جماعية مركزة لاستكشاف تصورات الطلبة حول استخدام "ووردتون" كأداة تحرير. أظهرت النتائج تحسنًا ملحوظًا في معايير جودة المحتوى في الكتابة بعد الاختبار، إلى جانب تصورات إيجابية عبّر عنها المشاركون في المقابلة الجماعية. . وقد أظهرت النتائج التي تم الحصول عليها أن دمج أدوات الذكاء الاصطناعي المساعدة في الكتابة مثل "ووردتون" في مرحلة التحرير يمكن أن يدعم طلاب اللغة الإنجليزية كلغة أجنبية بشكل فعال في إنتاج نصوص أكاديمية عالية الجودة. تحقيقًا لهذه الغاية، تقدم الدراسة توصيات قائمة على الأدلة لدمج أدوات الكتابة بالذكاء الاصطناعي في الإعدادات الأكاديمية لتعزيز استقلالية الطلاب وتحسين نتائج التعلم. --------------------- Résumé La présente étude vise à évaluer l'impact de l'utilisation de Wordtune, un assistant d'écriture par intelligence artificielle (IA) sur la qualité du contenu des écrits académiques des étudiants de troisième année de licence EFL (anglais langue étrangère) pendant la phase d'édition à l'Université Mohamed Cherif Messaadia, à Souk-Ahras. Basée sur le contexte des défis rencontrés par les apprenants EFL dans la production de textes académiques de haute qualité, l'étude a spécifiquement évalue les améliorations dans six aspects : l'utilisation de la langue et le style, l'exactitude, la clarté et la précision, la concision, la diversité du vocabulaire et la lisibilité. Adoptant une conception prétest-post-test à groupe unique, qui relève de la catégorie de la recherche quasi-expérimentale, des méthodes quantitatives et qualitatives sont utilisées pour poursuivre ces objectifs. Vingt-deux participants ont passé un pré-test, suivi de séances de traitement ayant servi d’introduction et de formation à l’utilisation de l’outil, puis un post-test afin d’évaluer l’effet de Wordtune après la phase d’édition. Les données qualitatives ont été recueillies par le biais d’un entretien de groupe pour explorer les perceptions des étudiants quant à l’utilisation de Wordtune comme outil d’édition. Les résultats ont révélé des améliorations significatives dans les critères de qualité du contenu lors du post-test, ainsi que des perceptions positives exprimées par les participants à l’entretien. Les résultats obtenus démontrent que l’intégration d’assistants d’écriture IA comme Wordtune dans la phase d’édition peut soutenir efficacement les étudiants EFL dans la production de textes académiques de meilleure qualité. En ce sens, l’étude propose des recommandations fondées sur des données probantes en faveur de l’intégration d’outils d’aide à la rédaction dans les environnements académiques, afin de promouvoir l’autonomie des étudiants et d’améliorer les résultats d’apprentissage.