TurnitinはChatGPTを見抜くか？ - 方法と報告内容
もしあなたが「TurnitinはChatGPTを検出できるのか？」と疑問に思っているなら、まさにその疑問にお答えします。
この記事は、学生や教育関係者、そして高度なAI時代における学術的誠実性の維持に関心のあるすべての方々に向けて書かれています。
Turnitinの検出技術がどのように働き、何を検出し、どのように結果を報告するのかを詳しく見ていきましょう。さあ、始めましょう！
重要なポイント：TurnitinはChatGPTを検出できるのか？
Turnitinは、ChatGPTなどAIによって生成されたコンテンツを検出できます。提出された文章がAIによって作成されたか、AIで言い換えられたものかを識別するように設計されています。
ただし、TurnitinはどのAIツール（ChatGPTなど）が使用されたか、または誰のアカウントからのものかを特定しません。AI生成コンテンツの有無に焦点が当てられています。
Turnitinは、AI生成コンテンツの検出において98%の精度を誇ります。
検出結果は類似性レポートに表示され、通常、講師のみがアクセスできます。
学生のための代替手段：同様のレポートへのアクセスとして、T-detectorを利用できます。Turnitinの公式データに基づいた分析を提供し、類似度とAIスコアを含むレポートを生成します。これは講師が確認できるものと同様のものです。
Turnitinが検出するコンテンツ
TurnitinがChatGPTなどのAIによって生成されたコンテンツをどのように検出するかを理解するためには、Turnitinがどのような要素を調べているのかを知ることが重要です。
AI生成テキスト：Turnitinは、AIによって生成されたテキストを検出できます。特に、GPT-3、GPT-3.5、GPT-4といったモデルによって生成されたコンテンツかどうかを識別します。
AIによる言い換えテキスト：Turnitinは、AIツールで言い換えられたテキストも検出できます。これは、盗用検出を回避するためによく使われる手法です。
検出対象のモデル
サポートされているモデル：現在、GPT-3、GPT-3.5、GPT-4など、広く使われているAIライティングモデルが検出対象となっています。これらのモデルは、人間が書いたような自然な文章を生成することで知られています。
今後の拡張：Turnitinは、新しいAIモデルが登場するたびに検出機能を更新し、常に最新のAIライティングツールに対応できるようにする予定です。
過去の提出物
Turnitin AI検出インジケーターは、新規の提出物だけでなく、過去に提出された文書についても、再提出されればAI生成コンテンツを検出できます。
検出の仕組み
データベースとテキストの比較：Turnitinは、学術論文、記事、ジャーナルなどの膨大なデータベースを利用して、提出された文書を比較します。これにより、盗用やAI生成コンテンツの可能性を示す一致や類似点を特定します。
文章のパターンと統計分析：Turnitinは、高度なアルゴリズムを使って、AI生成テキスト特有の文章パターンを認識し、人間が書いた文章と区別します。また、文の長さや単語の選択などの構造的な要素を分析して、AIが関与している可能性のある異常を検出します。
引用と参考文献の分析：Turnitinは、文書内の引用と参考文献を調査し、出典が適切に明記されていることを確認します。
文書の分析後、Turnitinは類似性レポート内にAIレポートを生成し、一致したAIテキストを強調表示して、その割合を示します。
TurnitinはChatGPTで生成されたコンテンツをどのように検出するのか
TurnitinのAIライティング検出モデル
Turnitinは、AIによって生成されたテキストを検出するために、次のような詳細なプロセスを採用しています。
テキストのセグメンテーション: 提出された各論文はまず、およそ数百語（約5〜10文）のセグメントに分割されます。
重複分析: これらのセグメントは互いに重複しており、すべての文がそのコンテキスト内で分析されるようになっています。
スコアリングモデル: 各文は、0（人間が書いたもの）から1（AIが生成したもの）のスケールでスコアリングされます。
全体的な予測: すべてのセグメントからの平均スコアを使用して、モデルは、AIによって生成されたと信じられるテキストの割合の全体的な予測を生成します。
TurnitinのAIパラフレーズ検出の仕組み
セグメントがライティング検出モデルによってAIによって生成されたとマークされると、AIパラフレーズ検出モデルはこれらのセグメントを分析します。
パラフレーズ分析: AIモデルが、ある文がAIによって生成されたものの、AIツールを使用して言い換えられたものではないと判断した場合、その文は検出モデルから1のスコア、言い換えモデルから0のスコアを受け取り、AIによって生成されたものとしてのみマークされます。
包括的なスコアリング: すべてのセグメントからの平均スコアは、提出物中のテキストのどの程度がAIによって生成され、AIツールを使用して言い換えられたと信じられているかについての全体的な予測を生成するために使用されます。
重要なことは、Turnitinのシステムは、ChatGPTやその他の特定のAIツールを特にターゲットにしているわけではなく、多くのAIで生成されたコンテンツに対して包括的なチェックを実行することです。
TurnitinにおけるChatGPT生成テキストの検出表示
AIレポートの解釈について
TurnitinがChatGPTなどのAIによって生成された可能性のあるテキストを検出した場合、テキストに「ChatGPT生成」というラベルを付けずに、検出結果が類似性レポートに統合されます。レポートには以下の情報が表示されます。
複合スコア：AI検出とAIによる言い換え検出のスコアを組み合わせた総合的なAI検出スコアです。このスコアは類似性レポート内で強調表示されます。
個別スコア：AI生成コンテンツとAIによる言い換えコンテンツそれぞれのスコアが表示され、より詳細な分析結果を確認できます。
結果のカラー表示
AIライティング検出の結果は、レポートが見やすくなるように特定の色で区別されます。
シアン：シアンでハイライトされたテキストは、AIによって生成された可能性が高いコンテンツを示します。
紫：紫でハイライトされたテキストは、AIによって生成されたコンテンツが言い換えられた可能性があることを示唆します。
AI検出インジケーターについて
類似性レポートを開くと、AIライティング検出機能によって、分析に基づいたインジケーターが表示されます。
青色とパーセンテージ（0～100%）：TurnitinのAIモデルが、AIによって生成されたと判断したテキストの割合を示します。このパーセンテージはドキュメント全体ではなく、長文の文章のみに適用されます。
低いパーセンテージ（*％）：コンテンツの20%未満がAIで記述されている場合に表示されます。誤検出を避けるため、アスタリスクのみが表示され、パーセンテージは表示されません。
グレー（パーセンテージ非表示）：ファイルの種類、サイズ、言語などのシステム要件を満たしていないため、AI検出を処理できなかったことを示します。
処理エラーと制限事項
送信されたファイルがAI検出の基準を満たしていない場合や、処理エラーが発生した場合、Turnitinはエラーメッセージを表示することがあります。AIライティングレポートを生成するには、ファイルサイズ、語数、言語などの要件を満たす必要があります。これらの要件を満たせない場合や、技術的な問題が発生した場合、TurnitinはAI検出を処理できず、ファイルの再送信やサポートチームによる調査が必要になることがあります。
Turnitin類似性レポートとChatGPT文章検出
Turnitin類似性レポートは、長年にわたり提供されている機能で、学生の提出物の独創性を評価します。これは、Turnitinの広大なデータベース（学術論文、書籍、ウェブページなど）に含まれる他の文書と一致するテキストの割合を計算することで行われます。このツールは主に、テキストの類似点を強調し、既存のソースとの詳細な比較を提供することで、盗用の可能性を特定するように設計されています。
一方、TurnitinのAI文章検出機能は、提出されたテキストがAIによって生成された可能性のある割合を評価します。この評価は、類似性スコアとは独立して行われます。AI検出は類似性メトリクスとは連動しないため、一方の結果が他方に影響を与えることはありません。AI検出と類似性レポートは、それぞれ個別にアクセスして確認でき、詳細な分析のためにPDFとしてダウンロードすることも可能です。
TurnitinはChatGPTで作成された文章をどの程度正確に検出できますか？
Turnitinは、AIによる文章が一定量含まれる文書において、誤検出率を1%未満に抑えながら、効果的なAI検出を維持することを目指しています。しかし、TurnitinのAI検出モデルの精度には、いくつかの注意すべき限界があります。
誤検出: このモデルの誤検出率は1%です。つまり、人間が書いた文章100件のうち1件が、AIによって生成されたものとして誤って判断される可能性があります。
検出漏れ: AIで作成されたコンテンツの最大15%を検出できない場合があります。例えば、ある文書の45%がAIで作成されたと判断された場合でも、実際には最大で60%がAIによるものである可能性があります。
コンテンツの条件: TurnitinのアルゴリズムがAIによる文章を効果的に特定するには、少なくとも300語の連続した文章が必要です。そのため、短い文章や、箇条書き、リストといった形式の文章は、正確に分析できないことがあります。
AIによる言い換えの検出は、主要なAI検出機能を補完する目的で提供されていますが、言い換えられていないAI生成テキストを誤って検出したり、言い換えられたテキストを検出できない場合があります。
よくある質問
Turnitinでは、どのくらいのパーセンテージが許容範囲外とされますか？
Turnitinで許容される類似性スコアは、教育機関や課題によって異なります。一般的に、類似性スコアが15%未満であれば許容範囲内、16〜25%は懸念が生じる可能性があり、25%を超えると許容範囲外とみなされることがあります。具体的なガイドラインについては、担当講師にご確認ください。
Turnitinは他のツールで生成されたAIコンテンツを検出できますか？
はい、Turnitinの検出システムは、特定のモデルに限らず、様々なAIツールで生成されたテキストを識別するように設計されています。これには、業界で広く使用されている高度なAIライティングツールも含まれます。
Turnitinは言い換えを行った場合でも、ChatGPTを検出できますか？
はい、Turnitinは、言い換えの程度や方法によっては、言い換えを行ったChatGPTの生成テキストを検出可能です。
教授は、学生がChatGPTを使用したかどうかを知ることができますか？
教授は、TurnitinのAI検出機能を通じて、学生のレポート等でChatGPTまたは類似のツールが使用されたかどうかを特定できる場合があります。特に、コンテンツがAIによって生成されたテキストの既知のパターンと著しく一致する場合に検出される可能性が高まります。
TurnitinによるChatGPTの検出を回避するにはどうすればよいですか？
検出を最小限に抑えるためには、提出物を実質的にオリジナルなものにすることが重要です。ChatGPTのコンテンツを使用する場合は慎重に行い、AIによって生成された素材は、独自の思考とコンテキストに合わせた分析を反映させるように徹底的に修正してください。
TurnitinはChatGPTとQuillBotの両方を検出できますか？
はい、TurnitinはChatGPTとQuillBotの両方で生成されたコンテンツを検出できます。これは、Turnitinのアルゴリズムが、これらのAIツールに典型的なテキストパターンを認識できるためです。
過去に提出した課題について、AIライティングのチェックを再度行うことはできますか？
はい、TurnitinでAIライティング検出が有効になっているアカウントで、過去の課題を再提出して分析することで、AIによって生成されたコンテンツについて再チェックできます。
TurnitinのAI検出機能は、どの言語をサポートしていますか？
TurnitinのAI検出機能は現在、英語をサポートしており、2024年9月以降は、長文のドキュメントとして提出された場合、スペイン語もサポートしています。ただし、AIによる言い換えの検出は、英語の提出物のみが対象です。
まとめとして：
TurnitinはChatGPTなどのAIツールによるコンテンツを検出するのに十分な機能を備えており、AI生成による提出物で学術的誠実性が損なわれないようにします。
必ず、許容される類似性スコアとAI生成コンテンツに関する所属機関のガイドラインを再確認してください。
Turnitinの検出機能についての解説にご参加いただき、ありがとうございました。常に注意深く、オリジナルの作品を作り続けましょう！