Исследователи из Канзасского университета недавно обнаружили новая методика тестирования который может точно определить, является ли статья была написана с использованием ЧатGPT. Этот метод имеет точность 99%. Раньше любой мог ввести некоторую информацию и письмо с просьбой предоставить научную статью, и ChatGPT создавал документ, который выглядел бы подлинным, за считанные секунды. Из-за доступности ChatGPT многие авторы почти полностью полагаются на него при написании эссе.
Однако академические публикации и исследовательские организации предупреждают, что неупоминание об использовании ChatGPT при подаче статьи может рассматриваться как плагиат или другие формы нечестности. В результате, хотя в настоящее время нет специального инструмента для академических публикаций, был достигнут прогресс в разработке систем, предназначенных для обнаружения статей, созданных ИИ.
Исследовательская группа из Канзасского университета сосредоточилась на разработке новой модели ИИ, чтобы определить, была ли статья создана ChatGPT. Их стратегия обучения была сосредоточена на изучении «общих фраз» и «сложности абзаца». Для своего проекта исследователи отобрали 64 публикации из американского журнала Science, опубликованные в период с сентября 2022 года по март 2023 года. Затем они поручили ChatGPT создать тезисы объемом от 300 до 400 слов для каждого исследования, в результате чего было создано 128 статей. Новая модель обнаружения ИИ была обучена с использованием этих статей, созданных ИИ.
После обучения модель правильно распознала 100 % частей, созданных руками человека, в изделиях, созданных ИИ, с общей точностью 99 % и точностью 92 % для конкретных частей. Исследование опубликовано в журнале Cell Reports Physical Science.
Исследовательская группа пришла к выводу, что ChatGPT избегает таких слов, как «но», «однако» и «хотя». В качестве альтернативы он поддерживает такие слова, как «другие» или «исследователи». В отличие от отличительного стиля письма ChatGPT, авторы-люди часто смешивают короткие и длинные предложения и используют разные модели предложений.
Кроме того, профессор Техасского университета A&M в США ввел студенческие работы в ChatGPT, пытаясь подтвердить достоверность этих работ. Однако эксперимент не увенчался успехом, поскольку ChatGPT не смог опубликовать какие-либо статьи, подобные тем, которые ранее приписывались ему.
