Сервіси для перевірки на ШІ у наукових роботах

1. Чому навчальні заклади почали перевіряти наявність ШІ у студентських (наукових) роботах?

1.1. Актуальність ШІ при написанні наукових робіт

З початку роботи ChatGPT в Україні, який створений OpenAI для допомоги з вирішенням різноманітних завдань, від відповідей на запитання до написання текстів та надання консультацій, його можливості все більше використовуються у різних сферах, зокрема – в науковій діяльності. Найбільшу частку користувачів становлять студенти, які прагнуть отримати оригінальний текст та значно скоротити час, витрачений на роботу. З часом можливості ШІ зросли – з’явилися нові інструменти, такі як підтримка зображень та браузера, що значно розширює можливості науковців та студентів.
Штучний інтелект (ШІ) відіграє важливу роль в освіті, тому студенти, науковці та педагогічні працівники все частіше використовують його можливості для написання наукових робіт, і це викликає дискусії щодо етичності та легальності таких дій. Інструменти штучного інтелекту, такі як генеративні моделі тексту, покликані допомагати в створенні текстів, забезпечуючи швидкий доступ до інформації та формулювань, включаючи автоматичне написання частин досліджень, наукових статей чи рефератів. Однак такий підхід часто стикається з проблемою плагіату, оскільки використання текстів, створених штучним інтелектом, порушує принципи академічної доброчесності.

Використання ШІ для генерації наукових текстів призводить до некоректного цитування або навіть їх відсутності, що вважається академічною нечесністю. Студенти здають роботи, створені штучним інтелектом, як свої власні, не визнаючи участі технологій у їх написанні. Це порушує етичні стандарти, адже будь-яке використання сторонніх джерел, включаючи ШІ, має бути відповідно позначене та цитоване. Педагоги та наукові установи часто застосовують програмне забезпечення для виявлення плагіату, щоб перевірити автентичність робіт, і згенеровані штучним інтелектом тексти можуть бути виявлені відмічені як такі, що не є оригінальними.
У зв’язку з масовим застосуванням ШІ серед студентства керівництво навчальних закладів стало все більше замислюватись над тим, як перешкодити цьому процесу, адже текст в студентських роботах має бути авторським, тоді як згенеровані матеріали не є такими. І якщо для боротьби з плагіатом було створено багато зручних сервісів, то перевірка тексту на ШІ часто супроводжується помилками й похибками. Так, одні сервіси з високою ймовірністю визначають наявність ШІ в роботі, проте при перевірці дійсно авторського тексту вони помилково вважають його також згенерованим.

1.2. Законодавче регулювання застосування ШІ в наукових роботах

На початку червня 2024 р. Верховною Радою України прийнято за основу проєкт Закону «Про академічну доброчесність», в преамбулі якого зазначено, що він є унікальним в плані перевірки на ШІ. Прийняття цього Закону необхідне для забезпечення високих стандартів освіти та наукових досліджень, сприяння чесності та прозорості у навчальному процесі, а також для запобігання випадкам плагіату та інших видів академічної нечесності.
Він спрямований на забезпечення того, щоб студенти та викладачі дотримувалися етичних норм у навчальному процесі, що сприяє підвищенню загальної якості освіти. Плагіат є серйозною проблемою у багатьох навчальних закладах. Закон допомагає створити механізми для його виявлення та запобігання. Дотримання принципів академічної доброчесності сприяє створенню культури чесності та прозорості в освітньому середовищі.
Основні його тези наступні:

Отже, незабаром застосування ШІ в науковій діяльності буде регулюватись на законодавчому рівні.
Також варто відзначити, що встановлені та доведені наслідки наявності згенерованого тексту в наукових роботах є серйозними:

1. Для студентів, залежно від кількості фактів встановлення порушення:
   – за перше порушення – перероблення наукової роботи;
   – повторне порушення – повторне проходження освітньої компоненти освітньої програми;
   – відмова у виплаті стипендії, участі в отриманні грантів, пільг або навіть відрахування з навчального закладу (за друге порушення впродовж 1 року).
2. Для аспірантів – позбавлення права отримання наукового ступеня.
3. Для науково-педагогічних працівників – від попередження до відстороненні від участі в науковій та педагогічній діяльності навчального закладу та позбавлення нагород, відзнак й звільнення із займаної посади.

2. Сервіси перевірки ШІ в авторських текстах

2.1. Найбільш популярні сервіси, інструменти виявлення штучного інтелекту

В кожному навчальному закладі обрано одну або декілька сервісів для перевірки унікальності авторських текстів, проте, коли мова йде про використання ШІ, можна обрати будь-який. З часом, коли буде прийнятий Закон «Про академічну доброчесність», навчальні заклади визначаться з переліком сервісів для перевірки та визначать кожен для себе найбільш ефективний засіб перевірки плагіату штучного інтелекту. Тому розглянемо ті, які користуються в Україні найбільшим попитом. До речі, у нашому відео на цю тему проаналізовано основні переваги та недоліки цих сервісів:

Отже, лише перевірка на штучний інтелект за допомогою сервісу StrikePlagiarism є платним, причому звичайна перевірка може тривати до 24 годин. тому будьте готові до того, що для отримання звіту потрібно буде придбати ще 1 токен. Для збільшення кількості перевірок на сервісі Smodin потрібно зареєструватись та оплатити свій план – 280 грн. на місяць, 717 або 1951 (залежно від кількості перевірок та додаткових послуг).

В будь-якому випадку, перевірка на штучний інтелект українською мовою доступна в усіх проаналізованих сервісах (тобто доступна послуга ai detector українською).

Для отримання фактичних результатів роботи вищевказаних сервісів перевіримо 2 тексти:

• авторський текст – Конституція України, яка на 100% написана людиною та не містить згенерованого тексту;
• згенерований текст – текст, повністю згенерований штучним інтелектом.

Отже, перевірка частини тексту Конституції України повинна показати 100% авторський контент, а згенерованого тексту – підтвердити факт 100%-го написання його штучним інтелектом.

2.2. StrikePlagiarism

Загалом сервіс пропонує послуги перевірки плагіату у тексті та згенерованого тексту, а також перевірку граматики:

Сервіс StrikePlagiarism вимагає реєстрації, проте при перевірці, для економії коштів, можна обрати лише перевірку тексту на ШІ – без інших видів перевірок:

Сервіс є платним, потрібно придбати токени (максимум – 50). Зазначимо, що при перевірці, для економії коштів, можна обрати лише перевірку тексту на ШІ – без інших видів перевірок:

Звіт про перевірку можна завантажити на сайті, а знаходяться вони в особистому кабінеті у вкладці «Документи». Навпроти перевіреного документу варто натиснути значок «Повний звіт»:

Звіт відкриється в новій вкладці та матиме наступний вигляд (результат перевірки Конституції України на наявність ШІ):

Як бачимо, сервіс недостатньо точно перевіряє авторський текст на ШІ. При цьому можна сформувати різні звіти – на унікальність та ШІ.
Що стосується перевірки згенерованого тексту, сервіс визначає його відсоток на достатньому рівні:

Перевага сервісу полягає в найвищій якості виявлення згенерованого тексту серед аналізованих сервісів.
Недоліки сервісу наступні:

• лише платні перевірки;
• перевірка авторського тексту недостатньо високої якості.

2.3. Smodin

Сервіс дає змогу не лише перевірити текст на унікальність та наявність згенерованих фрагментів, але й переписати його для підвищення унікальності, виконати домашню роботу за допомогою ШІ, перекласти текст, цитувати його та ін. За допомогою сервісу Smodin також можна перевірити ШІ – варто обрати сервіс на сайті «ШІ-детектор вмісту». Реєстрація не потрібна, проте для збільшення кількості перевірок на платній основі вона обов’язкова. Натискання кнопки «Увійти» дає змогу зареєструватись:

В наступному вікні натисніть кнопку «Реєстрація», введіть електронну пошту, створіть пароль та оберіть свій статус (наприклад, студент), мову:

Текст для перевірки можна вставити на сайті або завантажити файл.

При перевірці авторського тексту на ШІ (Конституція України) сервіс дає найкращий результат – 0%:

При перевірці згенерованого тексту отримуємо наступний результат, який є незадовільним:

Перевага сервісу – найвища якість перевірки авторського тексту на наявність ШІ.
Загалом недоліки сервісу наступні:

• недостатня кількість безкоштовних перевірок;
• виявлення генерованого тексту низької якості.

2.4. Neuralwriter

Сервіс дає змогу скористатись наступними функціями:

При роботі із сервісом Neuralwriter для визначення ШІ потрібно обрати опцію «Детектор АІ тексту».
Реєстрація не потрібна. Звіт про перевірку формується відразу на сторінці – справа від вікна, в який завантажується текст для перевірки.

Перевірка авторського тексту (Конституція України):

Перевірка згенерованого тексту:

Переваги сервісу:

• безкоштовні перевірки в необмеженій кількості;
• значна кількість символів для перевірки.

Недоліки сервісу наведено нижче:

• недостатня кількість безкоштовних перевірок;
• виявлення згенерованого тексту – низької якості.

2.5. Zerogpt

Сервіс Zerogpt лише перевіряє тексти на наявність ШІ. Реєстрація не обов’язкова, проте для збільшення кількості перевірок потрібно перейти на платну версію та зареєструватись. Процес реєстрації простий:

Для аналізу згенерованого тексту обирати додаткові опції не потрібно – просто відразу відправити на перевірку:

Звіт формується відразу під текстом.

Перевірка авторського тексту (Конституція України):

Перевірка згенерованого тексту:

Перевагою сервісу є значна кількість символів для перевірки 1 тексту (до 15 тис.).

Недоліки сервісу наступні:

• низька якість підтвердження авторського тексту на відсутність ШІ;
• найвища якість виявлення ШІ у згенерованому тексті.

2.6. Skandy

Skandy – це онлайн-сервіс, який дає можливість виявлення контенту, створеного штучним інтелектом. Він використовує алгоритми машинного навчання для аналізу текстів і визначення їх походження, зокрема – ймовірність створення тексту за допомогою ШІ-інструментів, таких як GPT або інші подібні моделі. Сервіс зручний для освітніх установ, видавництв і роботодавців, які прагнуть перевірити унікальність та автентичність текстового матеріалу. Skandy підтримує різні формати тексту, надає швидкі результати аналізу й інтегрується з іншими платформами для зручності користувачів.

Реєстрація не потрібна – сервіс просить вказати свої дані на назву навчального закладу. Сервіс надає можливість перевірити безкоштовно декілька невеликих текстів, а далі потрібно купувати кредити (вартість – $49,95 за 300 кредитів). Загалом сервіс простий та пропонує лише перевірку на плагіат та наявність згенерованого тексту, проте зручним є можливість використання мобільних додатків для роботи:

Звіт про перевірку можна завантажити як у PDF-форматі, так і на сайті. Так, перевірка частини Конституції України показала наявність 90% згенерованого тексту, отже, результати перевірки незадовільні:

У свою чергу, у тексті, який фактично був на 100% створений штучним інтелектом, сервіс виявив також 90% імовірність створення цього тексту ШІ. Це показує звіт, сформований на сайті:

Переваги сервісу:

• значна кількість символів для перевірки;
• достатня якість виявлення зненерованого ШІ тексту.

Недоліки сервісу наведено нижче:

• одна безкоштовна перевірка (для наступних перевірок потрібно виходити з браузера та входити знову як гість);
• неякісна перевірка авторського тексту.

Таким чином, усі сервіси дають змогу перевірити текст на наявність згенерованого тексту. При цьому усі сервіси пропонують або завантажити файл на сайті, або вставити скопійований текст у відповідне віконце.

2.7. Результативність перевірки ШІ найпопулярнішими сервісами

Далі проаналізуємо, наскільки ефективно ці сервіси можуть відрізнити ознаки генерації тексту штучним інтелектом, використовуючи для цього текст статті 21-30 Конституції України про права та права, свободи та обов’язки людини і громадянина та текст на цю ж тему, згенерований ШІ:

Як бачимо, щодо достовірності результатів перевірки на використання штучного інтелекту статті 2 Конституції України найбільш точним є сервіс Smodin, проте щодо перевірки на плагіат штучного інтелекту він виявився найбільш неточним. На прикладі цих перевірок можна зробити висновок, що жоден із сервісів не є досконалим, тому довести використання ШІ в написанні наукових робіт практично неможливо.

3. Загальний висновок

Щоб найбільш точно визначити згенерований штучним інтелектом контент, краще обрати ШІ-детектор Strike Plagiarism. Він показав добрі реультати як для авторського тексту, так і для згенерованого. Всі інші сервіси показали навіть якщо для одного із текстів відмінні результати, то для іншого незадовільні.