TurnitinはどのAI検出ツールを使っているのか？

TurnitinのAI文章検出は、Turnitinが自社で開発し2023年4月にリリースした独自のモデルです。他社ツールのリブランド版やライセンス供与版ではありません——Turnitinは、剽窃チェックサービスを通じて既に集まっている学生の文章データを活用しながら、人間とAIが書いた大量のペアデータで独自の分類器を構築・訓練しています。

リリース以降、Turnitinは単一モデルから、AI生成そのものの文章、言い換えられたAI文章、そしていわゆる「ヒューマナイザー」ツールで改変されたAI文章にフラグを立てるよう設計された複数モデルの組み合わせへと拡張してきました。同社によると、この検出ツールはこれまでに数千の教育機関で2億件を大きく超える論文のレビューに使われてきたとのことです。

Turnitinのモデルは長文の文章を読み、文単位でスコアを付け、それぞれの文に0（人間である確信が高い）から1（AI生成の可能性が高い）までの値を割り当てます。これを行うため、文書をおよそ250語ずつ重なり合うセグメントに区切って検証し、その文単位のスコアを一つの全体パーセンテージに集約します。

このパーセンテージは、Turnitinのソフトウェアが文書のどれくらいをAIライティングツールが生成したと判断したかの推定値であり、決定的な判定ではありません。Turnitin自身、この数字を不正行為の証拠としてではなく、人間によるレビューを促すためのものだと位置付けており、独立した研究では、非ネイティブ英語話者や非常に定型的な学術文章に対するフラグ率の高さを含め、無視できない誤検出率が確認されています。パーセンテージはシグナルであって、結論ではありません。

いいえ。GPTZero、Originality.ai、Copyleaks、Turnitinはそれぞれ独立した競合製品であり、それぞれが独自に構築した検出モデルを持っています。Turnitinは裏側でGPTZeroやOriginality.aiを呼び出しているわけではなく、これらのツールがTurnitinのスコアに反映されることもありません。

これが、同じ文章でも検出ツールによって異なるAIパーセンテージが出る理由です。各ベンダーは異なるデータで訓練し、しきい値の調整も異なります。Turnitinのモデルは学術的な文章に特化して調整されており、一般に保守的だと説明されていますが、それでも独自の強みと死角を持つ独自のシステムであることに変わりはありません。

この2つのスコアは混同しやすいですが、測定しているものはまったく異なります。Similarityレポートは、あなたの文章を公開済みの著作物、ウェブページ、他の学生の提出物のデータベースと照合し、一致または独創性のない箇所を見つけます——これが剽窃検出です。一方AI文章インジケーターは、その文章が独創的かどうかにかかわらず、どれくらい機械生成のように読めるかを推定します。

この2つは独立して実行されます——AI文章のハイライトはSimilarityレポートには表示されず、Similarityスコアが低いからといってAIインジケーターについて何も分かりません。論文がSimilarity 0%（完全にオリジナル）であっても、AI文章のパーセンテージが高くなることがありますし、その逆もあり得ます。フィードバックを解釈する際は、この違いを理解しておくことが重要です。

TurnitinのAI文章検出は、教育機関が管理する機能です。学校や講師によって有効化・管理されるもので、ほとんどの設定ではAI Writing Reportは学生からは完全に非表示になっています。学生が自分でログインして、自分の論文をTurnitinのAI検出ツールに随時かけるということは基本的にできません。

そのため、学生が自分のAI文章パーセンテージを知る最初の機会は、提出後、それを共有することを選んだ講師から知らされる場合が多いです。AIインジケーターには公式な学生向けセルフサービスポータルは存在せず、アクセス権は教育者の裁量のもと、教育機関側にあります。