中国LLMのAI検出精度: AI or Not対ZeroGPT

中国のLLMであるDeepseek、Kimi、Qwen、Sonoma Sky Alphaを使用して、AI検出ツールの精度をテストしました。AI or NotとZeroGPTの比較では、AI生成テキストの検出能力を分析しました。95の異なる書き込み例を通じて、AI or Notは95%の精度を示し、ZeroGPTは56%の精度を記録しました。

AIとLLMの進化は、学術、専門、研究環境での機械生成テキストの使用に関する理解を必要とします。中国のAIモデルが急速に進化する中で、AI検出ツールが中国ベースのモデルの出力を正確に識別できるかどうかが重要な問題となっています。これは学生、教師、研究者、企業に実質的な影響を与えます。

AI検出器は、AI生成テキストと人間が書いたテキストを比較してパターンを見つけます。さまざまなコンテンツタイプとモデルに基づいて訓練され、AI生成の可能性を示す確率を提供します。AI or NotとZeroGPTは、多様なモデルのテキストを含む訓練を受けています。

中国のLLMからの95のAI生成プロンプトを使用して、精度と潜在的な誤検出率をテストしました。この研究には、Deepseek、Kimi、Qwen、Sonoma Dusk Alpha、Sonoma Sky Alpha、Moonshotなどのモデルが含まれています。中国はAI技術をオープンソースで提供し、開発者が簡単にアクセスできるようにしています。

中国ベースのLLM出力を見逃すAI検出ツールは、学生、研究者、教師、専門家に問題を引き起こします。誤ったテキスト識別は、学生に不公平な罰を与え、AI生成コンテンツを人間の作業と誤認させます。AI or Notは、さまざまなコンテンツソースに対して訓練することで、これらの問題に対処しようとしています。