Turnitin은 어떤 AI 디텍터를 사용할까?

Turnitin의 AI 글쓰기 탐지는 Turnitin이 자체적으로 개발해 2023년 4월에 출시한 독점적인 자체 모델입니다. 다른 회사 도구를 재브랜딩하거나 라이선스한 것이 아닙니다 — Turnitin은 자사의 표절 검사 서비스를 통해 이미 흘러들어오는 학생 글쓰기 데이터를 활용해, 사람이 쓴 글과 AI가 쓴 글의 대규모 짝지어진 데이터셋으로 자체 분류기를 구축하고 훈련시킵니다.

출시 이후 Turnitin은 단일 모델에서 벗어나, 직접적으로 AI가 생성한 텍스트, 바꿔쓴 AI 텍스트, 이른바 '휴머나이저' 도구로 변형된 AI 텍스트를 표시하도록 설계된 여러 모델의 조합으로 확장했습니다. 회사에 따르면 이 디텍터는 수천 개 기관에서 2억 건이 넘는 논문을 검토하는 데 사용되었습니다.

Turnitin의 모델은 장문의 산문을 읽고 문장 단위로 점수를 매겨, 각 문장에 0(확실히 사람)에서 1(AI일 가능성 높음) 사이의 값을 부여합니다. 이를 위해 약 250단어 단위로 겹치는 구간으로 문서를 살펴본 다음, 그 문장 단위 점수를 하나의 전체 백분율로 집계합니다.

그 백분율은 Turnitin 소프트웨어가 AI 글쓰기 도구로 생성되었다고 판단하는 문서의 비율에 대한 추정치이지, 결정적인 판정이 아닙니다. Turnitin 스스로도 이 수치를 부정행위의 증거가 아니라 인간 검토를 촉구하는 신호로 규정하고 있으며, 독립적인 연구들은 유의미한 오탐 비율 — 비원어민 영어 작가와 매우 정형화된 학술 산문에 대한 더 높은 표시율을 포함해 — 을 문서화했습니다. 백분율은 결론이 아니라 신호입니다.

아니요. GPTZero, Originality.ai, Copyleaks, Turnitin은 각각 독립적으로 구축된 탐지 모델을 가진 별개의 경쟁 제품입니다. Turnitin은 뒤에서 GPTZero나 Originality.ai를 호출하지 않으며, 이 도구들은 Turnitin의 점수에 반영되지 않습니다.

같은 글이 서로 다른 디텍터에서 다른 AI 비율을 받을 수 있는 이유가 바로 이것입니다 — 각 벤더는 서로 다른 데이터로 훈련하고 임계값을 다르게 보정합니다. Turnitin의 모델은 특별히 학술적 글쓰기에 맞춰 조정되었고 대체로 보수적이라고 평가되지만, 여전히 자체적인 강점과 사각지대를 가진 독자적인 시스템입니다.

두 점수를 혼동하기 쉽지만, 완전히 다른 것을 측정합니다. Similarity Report는 출판된 자료, 웹페이지, 다른 학생 제출물 데이터베이스와 텍스트를 비교해 일치하거나 독창적이지 않은 구절을 찾아냅니다 — 표절 탐지입니다. AI 글쓰기 지표는 대신 원본 여부와 관계없이 텍스트가 얼마나 기계적으로 생성된 것처럼 읽히는지를 추정합니다.

두 리포트는 독립적으로 작동합니다 — AI 글쓰기 표시는 Similarity Report에 나타나지 않고, 낮은 유사도 점수는 AI 지표에 대해 아무것도 말해주지 않습니다. 논문이 유사도 0%(완전히 독창적)이면서도 높은 AI 글쓰기 비율을 받을 수 있고, 그 반대도 가능합니다. 피드백을 해석할 때 이 차이를 아는 것이 중요합니다.

Turnitin의 AI 글쓰기 탐지는 기관이 제어하는 기능입니다. 학교와 강사가 이를 활성화하고 관리하며, 대부분의 설정에서 AI Writing Report는 학생 화면에서 완전히 숨겨져 있습니다. 학생들은 일반적으로 로그인해서 자신의 논문을 Turnitin의 AI 디텍터로 직접 실행할 수 없습니다.

즉, 학생이 자신의 AI 글쓰기 비율을 처음 알게 되는 시점은 대개 제출 후, 이를 공유하기로 한 강사를 통해서입니다. AI 지표를 위한 공식적인 학생용 셀프서비스 포털은 없습니다 — 접근 권한은 교육자의 재량에 따라 기관에 있습니다.