ChatGPTによって書かれたものかどうかを確認する方法

ChatGPTやBardなどのAIチャットボットの人気が高まるにつれ、文章が人間によって書かれたものなのか、AIによって書かれたものなのかを見分けるのが難しくなっています。AI検出ツールは数多くありますが、実際のところ、これらのツールの多くでは、小論文や記事、カバーレターなどのコンテンツにおいて「フォールスポジティブ（誤検知）」と「フォールスネガティブ（検知漏れ）」のどちらの結果も出ることがあります。幸いなことに、ChatGPTによって生成された文章か、人間によって書かれた文章かを見分ける確実な方法はまだあります。この記事では、教師や学生、その他の好奇心旺盛なユーザーに最適なAI検出ツールと、AIによって書かれたコンテンツを目で見て見分けるのに役立つコツを紹介します。

知っておくべきこと

OpenAIのText Classifier（テキスト・クラシファイア）やGPTZero（GPTゼロ）、Copyleaks（コピーリークス）などのツールを使用すれば、ChatGPTやLLaMAなどのAI言語モデルの使用の有無について文章をチェックできます。
ChatGPTは、表面上は「完璧」に見えるが、誤った情報を含む文章を生成することがよくあります。
ChatGPTによって書かれたことを示す兆候：説明的な言葉の不足、「まず」や「次に」といった言葉、正しく見えるが意味をなしていない文章など。

方法 1

方法 1 の 3:

AI検出ツールの仕組み

PDF形式でダウンロード

1
AI検出ツールは、テキストがどの程度予測可能かを検証する　ChatGPTやBardなどのチャットボットは、その学習データに基づいて次の単語や文章を予測することによってコンテンツを「書きます（生成します）」。同様に、AI検出ツールも同様の学習データに基づいて、単語や文章、書式がどの程度予測可能かを検出することで機能します。
- 検出ツールは、文章を類似のコンテンツと比較し、その文章がどの程度予測可能かを判断し、その文章を人間によって書かれたものまたはAIによって生成されたもののどちらかに分類します。
- また、これらのツールは、単語の選択やパターンなど、AIによって生成された文章に関連する他の指標、つまり「シグネチャー」を探します。^{[1]X出典文献}
2
AI検出ツールは間違いを犯すことがよくある　ChatGPT検出ツールは役に立ちますが、絶対的なものではありません。AI検出ツールでは、フォールスポジティブの結果が出ることがよくあります。つまり、人間によって書かれた文章が特定のパターンに従っている場合、AIによって生成されたものと判断してしまう傾向があるのです。^{[2]X出典文献}また、学生や他の書き手がChatGPTによって書かれたコンテンツを修正し、AI検出ツールに事実上検出されないようにすることも非常に簡単です。つまり、AIによって生成された文章が検出ツールに引っかからない可能性があるのです。
- 文章がほとんどAIによって生成されたものであることがAI検出ツールから報告されても、その報告だけを鵜呑みにしてはいけません。AI検出ツールを使用するのは、その文章がChatGPTによって書かれたことを示す他の兆候をすでに見つけている場合に限ったほうがよいでしょう。^{[3]X出典文献}
- 複数のAI検出ツールに文章を通すことで、各ツールがどのように機能しているかが分かります。また、フォールスネガティブやフォールスポジティブを絞り込むのにも役立ちます。
広告

方法 2

方法 2 の 3:

AI検出ツールを使用する

PDF形式でダウンロード

ChatGPTの開発者たちによって作られた無料ツールで、文章がAI言語モデルによって生成された可能性がどの程度あるかを予測します。^{[4]X出典文献}AI Text Classifierを使用するには、無料のOpenAIアカウントが必要です。今のところ、文章を貼り付けることしかできませんが、将来的には文書をアップロードできるようになるかもしれません。https://platform.openai.com/ai-text-classifier（英語のみ、現在は利用不可）をチェックしましょう。
AIによる盗作と戦うためにプリンストン大学の学生によって開発されたAI検出ツールです。^{[5]X出典文献}GPTZeroには、文書を貼り付けたりアップロードしたりすることで、ChatGPTなどのAIによって生成された文章がないかチェックするオプションがあり、無料（クラシック）版のツールでは1文書あたり5000文字まで検証できます。教師向けのサブスクリプションを含む有料オプションもあります。このツールは、ウェブブラウザで使用するか、Chrome拡張機能またはWordプラグインをインストールすることで使用できます。^{[6]X出典文献}https://gptzero.me（英語のみ）にアクセスして、無料アカウントを作成しましょう。
AIコンテンツ制作会社によって開発された無料のオンラインChatGPT検出ツールです。同社の狙いは、ChatGPTなどのAIコンテンツ生成ツールを使用する書き手が、公開前に作品を編集し、それがAIによって書かれたものだと分からないようにすることです。^{[7]X出典文献}このツールには25文字以上貼り付けることができます。https://contentatscale.ai/ai-content-detector（英語のみ）で試してみましょう。
GPT-4（ChatGPT Plusでのみ利用可能なOpenAIの言語モデルの最新バージョン）によって書かれたコンテンツを検出する機能を備えた安全で高品質なChatGPT検出ツールをお探しなら、CopyleaksはAIによる盗作をチェックするための様々なサブスクリプションプランを用意しています。有料プランでなくても、ChatGPTやBardなどのAIチャットボットの使用の有無について250文字までの文章を検証できます。^{[8]X出典文献}https://copyleaks.com/ja/ai-content-detectorで試してみましょう。
広告

方法 3

方法 3 の 3:

ChatGPT使用の兆候

PDF形式でダウンロード

1
あり得ない文章や不正確な文章　ChatGPTやGoogle Bardなどの生成AIツールは、幻覚を見たり、事実をでっち上げたりすることが知られています。^{[9]X出典文献}学生や求職者も文章に不正確な情報を含めることがありますが、AIボットは虚偽の情報を極めて信憑性があるように見せます。また、ChatGPTは2021年以降に起きた出来事に関する知識が限られているため、通常、現在の出来事に関する事実に基づいた情報を生成できません。^{[10]X出典文献}文章が非常によく書けているように見えても虚偽の情報が含まれている場合は、AIによって生成された可能性があります。
- AIの使用の可能性ついて文章を検証する場合は、その文章からいくつかの事実をウェブで検索してみましょう。日付や具体的な出来事など、検証しやすい事実を検索してみましょう。
ChatGPTは、文法的には完璧で表面上は素晴らしく見えるが、（実際には）意味をなしていない文章を生成することがあります。これは、ChatGPTが真偽を判断するのではなく、適切な場所で適切な言葉を使用する方法を知っているだけだからです。一見意味をなしていそうなのに、その文章が何を言おうとしているのか理解できない場合は、AIによって生成された文章を読んでいる可能性が十分あります。
作文や小論文を書く多くの学生も作文や小論文の構成を決める際にこのような言葉を使用しますが、ChatGPTによって書かかれたエッセイではほぼ必ずこのような言葉を目にします。AI検出ツールの中には、人間によって書かれたコンテンツにこのような言葉が含まれているために、AIによって書かれたと判定するものさえあります。
Bingに組み込まれたChatGPTは自動的にソースを引用しますが、標準のChatGPTは存在しないソースをでっち上げる傾向があります。^{[11]X信頼性の高い出典文献PubMed Central出典を見る}あなたが教師で学生の作文や小論文を検証する場合や、学生でChatGPTを使用してソースを探す場合は、ChatGPTによって提供されるソースが本物かどうかをもう一度確認しましょう。
ChatGPTなどのAIモデルは、文中の次の単語を予測することで機能するため、非特異的な単語が多くなります。ChatGPTは珍しい言葉を使用して物事を説明する可能性が低いため、全体的に説明的な言葉が不足している場合は、ChatGPTによってコンテンツが生成された可能性があります。^{[12]X出典文献}
学生や求職者、作家は、文章を提出する前に文法の誤りや誤字脱字をすべて見つけようと最善を尽くしますが、「すべて」を見つけることは困難です。一方、コンピューターは、文法的に非の打ちどころのない文章を生成します（たとえその文章が事実でなくても）。
7
迷ったら、ChatGPTに同じような文章を生成してもらう　作文や小論文、手紙などの文章がChatGPTによって書かれたと思われる場合は、ChatGPTにログインし、その文章の要点を基にチャットボットに同じようなコンテンツを生成してもらいましょう。ChatGPTの回答に検証対象のコンテンツと同じ構成が含まれている場合は、その書き手がChatGPTを使用した可能性があります。
- 例えば、AIの使用の有無についてカバーレターを検証する場合は、ChatGPTに「A社のジュニアデベロッパーの求人のカバーレターを書いてください。私は東京工科大学のコンピュータサイエンス学部を卒業し、JavaScriptとRubyが大好きで、過去1年間バリスタとして働いていたことを説明してください」と伝えるとよいでしょう。
- ChatGPTは対話形式なので、引き続きさらなる文脈の提供が可能です（例：「パンデミックのため、大学卒業後すぐにこの業界に飛び込まなかったことをカバーレターに書き加えてください」）。
広告

ポイント

コーネル大学の研究者たちは、人間がAIによって生成されたニュース記事を60％以上の確率で信頼できると誤って判断したことを明らかにしました。^{[13]X出典文献}
ChatGPT検出ツールを使用していて、ツールが文章をAIによって書かれたものと判断した場合は、書き手と話をする前に、ファールスポジティブの可能性を検討しましょう。
ChatGPTによって書かれたと思われるものでも、確信が持てない場合は、書き手と話をしましょう。ChatGPTの使用を非難するのではなく、文章や内容についてもっと質問して、その書き手の知識とコンテンツとの整合性を取りましょう。また、ChatGPTなどのAI文章作成ツールの使用を認めるかどうかを確認するために、文章の作成過程について尋ねてみるのもよいでしょう。
ほとんどのChatGPT検出ツールは、GPT-4、GPT-2、LLaMAを含む他の言語モデルによって書かれたコンテンツも検出できます。
短編小説やレシピ、記事、スピーチがAIによって書かれたか当てるのが得意か試してみませんか？https://roft.io（英語のみ）で「Real or Fake Text（リアル・オア・フェイク・テキスト）」をプレイしてみましょう（ただし、英文のみ）。