Turnitin能否識別AI？ - 分數、工作原理與報告
您好！是否好奇 Turnitin 如何偵測您論文中由 AI 生成的內容？
無論您是正為學期報告煩惱的學生，或是致力於維護學術公平的教師，了解 Turnitin 的運作方式都非常重要。
接下來，讓我們深入了解這個系統的運作原理、偵測範圍，以及資訊的存取權限。現在就開始吧！
Turnitin 是否能偵測 AI？
是的，Turnitin 能夠偵測 AI 生成的內容並產出報告。此功能已於 2023 年 4 月 4 日整合至 Turnitin 服務中，確保透過此平台提交的所有作業，不僅會進行抄襲檢查，也會篩檢 AI 生成的內容。
誰能看到 AI 偵測報告？
AI 偵測報告的檢視權限取決於學校或教師是否已啟用此功能。一般而言，學生無法看到這些報告，報告中包含一個 AI 評分，用於指示內容由 AI 生成的可能性。通常只有教師才能存取這些報告，並可選擇利用這些資訊，來引導後續關於學術誠信的行動或討論。
想知道老師在 Turnitin 上檢查您的作業時會看到什麼嗎？
別擔心，如果您想完整了解您的作業，還有解決方案。「T-detector」等服務能幫助您！透過使用 Turnitin 官方數據，此服務可讓您確切看到老師所看到的內容。您將收到一份報告，其中包含相似度百分比和 AI 偵測結果。對於想要深入了解、理解自身分數，並在最終提交前完善作業的學生來說，這是個很棒的工具。
誰可以使用 Turnitin AI 偵測工具？
只有取得 Turnitin Originality 授權的使用者才能使用 AI 寫作偵測功能。如果您目前使用 Turnitin Similarity、Feedback Studio 或 Originality Check，請與您的 Turnitin 帳戶經理洽談開通選項。iThenticate 2.0 的使用者也可以聯絡帳戶經理，以新增此功能。
自 2024 年 1 月 1 日起，AI 寫作偵測功能將僅限透過 Originality 授權提供。若未取得此授權，使用者將無法查看 AI 分數與報告，即使是過去提交的內容也一樣。不過，已購買 Originality 附加元件的機構，則可檢視所有提交內容的 AI 數據。
在 Moodle、Blackboard 和 Canvas 等 LMS 平台上，AI 偵測功能可在相似度報告中使用，但使用者必須開啟完整報告才能查看 AI 詳細資訊。
Turnitin AI 指標運作方式
概述
當論文提交至 Turnitin 後，系統會立即開始分析，將文章段落切割為每段約五到十個句子。
這些段落經過刻意重疊處理，確保每個句子都能在更廣泛的上下文中進行分析。接著，Turnitin 的 AI 偵測模型會評估每個句子，給予 0 到 1 之間的評分，0 代表該句子可能由人類撰寫，而 1 則代表它是由 AI 所生成。
系統會計算文件中所有句子的平均分數，藉此預測文章中 AI 生成內容的比例。
可偵測的 AI 模型
目前 Turnitin 的 AI 偵測功能包括：
GPT-3 與 GPT-3.5：這是 Turnitin 最早關注的模型，能辨識基於這些技術的工具 (例如 ChatGPT) 所產生的文字。
GPT-4：經過廣泛測試後，Turnitin 確認其系統通常能偵測到 GPT-4 所產生的文字，也就是 ChatGPT Plus。
擴展計畫：Turnitin 正積極努力將其他模型 (如 GPT-4o 與 LLaMA) 納入其偵測功能中，以反映大型語言模型 (LLM) 的持續演進與發展。
偵測能力
Turnitin 的 AI 偵測器專門設計用於識別：
AI 生成內容：這包括直接由 AI 產生的文字內容。
AI 重新潤飾的內容：這指的是先由 AI 生成文字，然後再透過 AI 釋義工具 (如 Quillbot、Grammarly 的釋義工具和 Scribbr) 進行修改的內容。 這項功能提升了系統偵測經過細微修改以規避偵測的文字之能力。
指標與報告
在 AI 寫作報告中，Turnitin 會使用顏色編碼來標示不同類型的 AI 參與，協助教師更有效率地解讀結果。
Turnitin 的模型經過校準，以確保高精確度，只有在至少有 98% 的確定性時，才會將內容標記為 AI 生成。 這種嚴格的門檻有助於盡可能減少誤判，但同時也承認，最高可能有 15% 的 AI 寫作內容無法被偵測到。
LMS 整合
Turnitin 的 AI 偵測功能已整合至學習管理系統 (LMS) 中，例如 Moodle、Blackboard 和 Canvas，並透過相似度報告呈現。 然而，特定的 AI 寫作指標並未直接嵌入 LMS 介面中；使用者必須存取詳細報告才能查看 AI 分數。
偏差考量
Turnitin 了解可能存在偏差，特別是針對第二語言學習者或較不常見的學科領域，因此在設計 AI 偵測模型時，特別強調公平性。 該模型的開發考量到必須盡可能減少對弱勢群體的任何不利影響，目標是在各種學術環境中實現公平應用。
Turnitin AI 報告：分數、視覺指標與百分比
在Turnitin 相似度報告中，「AI 報告」區塊詳細說明了以下兩個特定分數：
AI 生成文字：此分數精確指出內容可能來自 AI 工具，尤其是大型語言模型 (LLM)。
AI 轉述文字：此分數用以識別經過 AI 生成後，再由 AI 轉述工具（如 Quillbot）修改過的內容。
報告中的視覺指標
Turnitin 在報告中使用不同顏色來標示 AI 參與的程度：
青色標示：表示內容可能由 AI 生成。
紫色標示：表示內容是由 AI 生成後，再經 AI 轉述工具修改。
藍色 (0-100%)：顯示提交文件中，可能由 AI 生成的文字比例，主要針對散文形式的內容。
灰色（無百分比）：表示系統無法判讀是否由 AI 生成，原因可能是檔案類型不相容或檔案過大。
錯誤 (!)：表示處理失敗。請重試，或確認檔案符合標準後再次提交。
為避免誤判，AI 偵測分數低於 20% 的情況會特別謹慎處理：
0%-19% (*%)：這些較低百分比會以星號和百分比符號 (*%) 標示，且不會在報告中顯示實際數值。此措施旨在降低將人為撰寫內容誤判為 AI 生成內容的機率。
Turnitin 允許多少 AI 參與？
Turnitin 並未明確規定 AI 生成內容的上限；僅會識別並標示明顯的 AI 參與。AI 生成內容是否可被接受，取決於各機構的學術誠信政策。學生和教職員應參考所屬機構的相關規範，以了解學術作業中 AI 應用的容許程度。
與相似度分數的差異
相似度分數：衡量文件內容與 Turnitin 資料庫中其他來源的相似程度百分比。
AI 偵測百分比：獨立評估內容由 AI 工具產生的可能性。此分數與相似度分數各自獨立運作，僅針對 AI 生成的內容進行評估。
處理 Turnitin AI 偵測的誤判情形
Turnitin 的 AI 寫作偵測旨在達到高準確性，但仍可能發生誤判，特別是對於結構變化不大或大量改寫的文本。如果您認為有提交內容遭到錯誤標記：
提供回饋：使用 AI 寫作報告中的回饋按鈕通知 Turnitin，這有助於長期改善偵測準確性。
考量上下文：針對較長的文件，請評估 AI 生成內容與原始寫作的比例。對於短篇文章，系統可能採取「非黑即白」的方式，將混合內容判定為完全由 AI 生成。
教師裁量權：教師應將 AI 偵測結果與其他評量方式及和學生的討論合併考量，以確保對學生的作品做出公平的評估，並理解此模型在區分 AI 與人工文本方面的限制。
常見問題
Turnitin 的 AI 偵測功能是免費的嗎？
否，自 2024 年 1 月起，Turnitin 的 AI 寫作偵測服務將開始收費。
AI 偵測能分析先前已提交的論文嗎？
是的，若先前提交的作業重新提交以進行分析，且您的帳戶已啟用 AI 偵測，即可檢查其中的 AI 寫作內容。
Turnitin 支援哪些語言？
目前 Turnitin 的 AI 偵測支援英文文件，並自 2024 年 9 月起支援西班牙文長篇內容。然而，AI 意譯偵測功能僅適用於以英文提交的內容。
如何隱藏 AI 報告？
管理員可選擇在 Turnitin 帳戶設定中停用 AI 偵測功能，以直接從結果中隱藏 AI 報告。
AI 偵測技術會隨著時間演進嗎？
是的，隨著 Turnitin 不斷開發和改進其模型，偵測能力和 AI 百分比可能會隨之改變。但除非重新提交特定文件進行處理，否則該文件的 AI 百分比將維持不變。
Turnitin 會將 Grammarly 修改過的文字標記為 AI 嗎？
Turnitin 的偵測器通常不會將經 Grammarly 的基本拼字、文法和標點符號工具修改過的文字標記為 AI 生成。但是，使用 Grammarly 的 AI 驅動生成功能（例如草擬和改寫）所產生的內容，很有可能會被識別為 AI 生成。
結論
總而言之，Turnitin 具備偵測 AI 生成內容的強大功能，為維護學術誠信提供重要工具。
雖然教師能透過報告深入了解細節，學生可能需要參考其他來源以取得相同資訊。
請謹記，Turnitin 的效用取決於貴校如何運用。希望您覺得這份說明分析很有幫助——感謝您的收聽！