Людмила Анатольевна Зинченко, Москва
Lyudmila A. Zinchenko, Moscow
Елена Викентьевна Резчикова, Москва
Elena V. Rezchikova, Moscow
Елена Александровна Тарапанова, Москва
Elena A. Tarakanova, Moscow
Цель исследования. Работа посвящена актуальным вопросам проверки на объем заимствованного текста в выпускной квалификационной работе в техническом вузе с учетом вероятности использовании обучающимися возможностей искусственного интеллекта. Проблема плагиата, в частности плагиата выпускных квалификационных работ (дипломных работ), всегда была на повестке дня. Некоторые студенты при написании выпускных квалификационных работ склонны заимствовать тексты работ, защищенных в предыдущие годы, что привело к необходимости организации проверки текстов всех работ текущего года выпуска на плагиат. Существуют различные методы, которые дают возможность легко обойти такую проверку. Указанная проблема особенно обострилась в последниегоды в связи с развитием информационных технологий. Широкое внедрение генеративного искусственного интеллекта привело к возникновению новой проблемы – необходимости проверки выпускной квалификационной работы научным руководителем и/или назначенным ответственным лицом на наличие текста, сгенерированного искусственным интеллектом. В данной статье рассматриваются особенности проверки на плагиат текстов выпускных квалификационных работ студентов, обучающихся по направлениям, связанным с информационными технологиями, с учетом потенциальной возможности использования студентами генеративного искусственного интеллекта, в частности программного обеспечения ChatGPT и GitHub Copilot. Материалы и методы. Использован метод компаративного анализа научных публикаций, посвященных проверке на плагиат и вопросам применения искусственного интеллекта в образовательном процессе. Существующие методики проверки на плагиат неактуальны при проверке текстов, сгенерированных искусственным интеллектом. Рассмотрены признаки и примеры таких текстов. Экспериментальным путем выявлены тренды в среде обучающихся в техническом университете по отношению к применению генеративного искусственного интеллекта, в частности программного обеспечения ChatGPT и GitHub Copilot при написании выпускных квалификационных работ. Проверены возможности применения ряда программ по детектированию текстов, сгенерированных искусственным интеллектом. Результаты исследования. Проведен анализ результатов проверки на плагиат текстов, сгенерированных системой искусственного интеллекта, и подготовленных методистом. Обсуждена проблема однозначного автоматического выявления использования генеративных нейросетей студентами в процессе подготовки выпускной квалификационной работы в силу наличия ложноположительных срабатываний. Представляется целесообразным широкое внедрение систем проверки текста выпускной квалификационной работы на предмет наличия текста, сгенерированного системами искусственного интеллекта. Однако тестовое использование существующих систем проверки показало, что достоверность проверки на наличие текста, сгенерированного системами искусственного интеллекта, является весьма спорной. Процент выявленного заимствования может варьироваться как в сторону понижения, так и повышения с некорректными выводами. Обсуждены проблемы, вызванные особенностями обучения студентов технического вуза. Предложен подход к проверке материалов выпускной работы на наличие ИИ-плагиата. Заключение. Отмечена важность и необходимость проверки оригинальности выпускных квалификационных работ на заимствования как текстов работ прошлых лет, так и использования текстов и программ, сгенерированных системами искусственного интеллекта. Авторами предложены возможные подходы к организации учебного процесса в техническом вузе с учетом накопленного опыта, а также пути решения рассмотренных в работе проблем, в частности, предложено введение обязательной маркировки как текста, так и программного кода, созданного системой искусственного интеллекта. Кроме того, подчеркнута необходимость разработки методик обучения, включающих формирование рефлексивности.
The purpose of the study. The paper discusses the current issues of checking the volume of borrowed text in the graduation qualification paper in a technical university taking into account the probability of using the capabilities of artificial intelligence by students. The problem of plagiarism, in particular plagiarism of graduation qualification papers (diploma theses), has always been actual. Some students, when writing their graduation qualification papers, tend to copy texts of papers defended in previous years, which led to the need to organize plagiarism check of texts of all papers of the current year of graduation. There are various methods that make it possible to easily bypass such a check. This problem has become especially actual in recent years due to the development of information technology. The widespread introduction of generative artificial intelligence has led to the emergence of a new problem the need for the supervisor and/or designated responsible person to check the graduation qualification paper for the presence of text generated by artificial intelligence. This paper discusses the features of plagiarism check of texts of graduation qualification papers of students studying in the areas related to information technologies, considering the potential possibility of using generative artificial intelligence by students, in particular ChatGPT and GitHub Copilot software. Materials and methods. The method of comparative analysis of scientific publications for plagiarism checking and the use of artificial intelligence in the educational process was used. Existing plagiarism checking methods are irrelevant when checking texts generated by artificial intelligence. The attributes and examples of such texts are considered. Trends in the environment of students at a technical university in relation to the use of generative artificial intelligence, in particular ChatGPT and GitHub Copilot software when writing graduation qualification papers were experimentally identified. The possibilities of applying a number of programs for detecting texts generated by artificial intelligence have been verified. Research results. The analysis of plagiarism check results for texts generated by an artificial intelligence system and prepared by a methodologist was carried out. The problem of unambiguous automatic detection of the use of generative neural networks by students in the process of preparing a graduation qualification paper due to the presence of false positives was discussed. It seems advisable to widely implement systems for checking the text of graduation qualification paper for the presence of text generated by artificial intelligence systems. However, the test use of existing verification systems showed that the reliability of checking for the presence of text generated by artificial intelligence systems is highly debatable. The percentage of identified borrowings can vary both downwards and upwards with incorrect conclusions. The problems caused by the peculiarities of teaching students at a technical university are discussed. A path for checking the materials of graduation thesis for AI plagiarism is proposed. Conclusion. The importance and necessity of checking the originality of the graduation qualification papers for borrowings both the texts of the graduation qualification paper of previous years and the use of texts and programs generated by artificial intelligence systems are outlined. The authors propose possible approaches to organizing the educational process at a technical university taking into account the accumulated experience, as well as ways to solve the problems discussed in the paper, in particular, the introduction of mandatory marking of both the text and the program code created by the artificial intelligence system is proposed. In addition, the need to develop relevant teaching methods, including the formation of reflexivity, is emphasized.
The authors declare that there are no conflicts of interest present.