Який AI-детектор використовує Turnitin?

Виявлення AI-письма в Turnitin — це запатентована, внутрішня модель, яку Turnitin розробила самостійно і запустила у квітні 2023 року. Це не перебрендований чи ліцензований інструмент іншої компанії — Turnitin створює й навчає власний класифікатор на великих наборах парних людських і AI-написаних текстів, спираючись на дані студентських робіт, які вже проходять через її сервіс перевірки на плагіат.

З моменту запуску Turnitin розширилася від однієї моделі до комбінації моделей, покликаних позначати безпосередньо AI-згенерований текст, AI-текст, який був перефразований, і AI-текст, змінений так званими інструментами-«хуманайзерами». Компанія повідомляє, що детектор використали для перевірки понад 200 мільйонів робіт у тисячах навчальних закладів.

Модель Turnitin читає розгорнутий текст і оцінює його на рівні речень, надаючи кожному реченню значення від 0 (упевнено людське) до 1 (ймовірно AI-згенероване). Для цього документ розглядається сегментами, що перекриваються, приблизно по 250 слів, а потім ці оцінки на рівні речень агрегуються в один загальний відсоток.

Цей відсоток — оцінка того, яка частка документа, на думку програми Turnitin, була згенерована інструментами AI-письма, а не остаточний вердикт. Сам Turnitin подає це число як привід для перевірки людиною, а не доказ порушення, а незалежні дослідження задокументували помітний рівень хибних спрацювань, включно з вищим рівнем позначок для носіїв інших мов і дуже шаблонної академічної прози. Відсоток — це сигнал, а не висновок.

Ні. GPTZero, Originality.ai, Copyleaks і Turnitin — окремі, конкуруючі продукти, кожен зі своєю незалежно розробленою моделлю виявлення. Turnitin не звертається до GPTZero чи Originality.ai «за лаштунками», і ці інструменти не впливають на оцінку Turnitin.

Саме тому один і той самий текст може отримати різні відсотки AI від різних детекторів: кожен постачальник навчається на різних даних і по-різному калібрує пороги. Модель Turnitin налаштована спеціально для академічного письма і зазвичай описується як консервативна, але це власна система з власними сильними сторонами та сліпими зонами.

Легко сплутати ці дві оцінки, але вони вимірюють абсолютно різні речі. Звіт Similarity перевіряє ваш текст за базою опублікованих робіт, вебсторінок та інших студентських робіт, щоб знайти збіжні чи невигадливі уривки — це виявлення плагіату. Індикатор AI-письма натомість оцінює, яка частка тексту виглядає машинно-згенерованою, незалежно від того, чи є вона оригінальною.

Ці два показники працюють незалежно: позначки AI-письма не з'являються у звіті Similarity, а низька оцінка схожості нічого не говорить про AI-індикатор. Робота може бути 0% схожою (повністю оригінальною) і при цьому отримати високий відсоток AI-письма, або навпаки. Розуміння цієї різниці важливе під час інтерпретації відгуку.

Виявлення AI-письма в Turnitin — це функція, яку контролює навчальний заклад. Її вмикають і адмініструють школи та викладачі, і в більшості налаштувань звіт AI Writing Report повністю прихований від студента. Студенти зазвичай не можуть увійти і самостійно запустити перевірку своєї роботи через AI-детектор Turnitin.

Це означає, що студент найчастіше дізнається свій відсоток AI-письма вже після подачі роботи, від викладача, який вирішив поділитися ним. Офіційного студентського порталу самообслуговування для AI-індикатора не існує — доступ належить закладу на розсуд викладача.