lynote-ai/ai-text-detector

解決する問題

過信かつ不透明なAIテキスト検出器の問題に対処します。二値の「AIまたは人間」の判断ではなく、リスク推定と説明可能な信号を提供する慎重なトリアージツールとして機能し、スコアを絶対的な証拠と見なすのではなく、人間が情報に基づいた判断を下せるように支援します。

動作方法

このツールはテキストを分析し、リスクスコア（0-100）と判断（例：high_ai_likelihood または insufficient_text）を生成します。重み付きの証拠信号を使用して、テキストがフラグ付きになった理由を説明し、サンプルサイズが小さすぎる場合に証拠を過剰に強調しないよう短文ガードレールを含んでいます。ローカルCLI、Python API、およびCodexやClaude Codeのようなリポジトリ対応エージェント向けのポータブルスキルとして利用可能です。

対象ユーザー

• 教員：生徒の提出物を手動でレビューする前に、慎重な信号が必要な方。
• 編集者：テンプレート化された製品レビューおよびゲスト投稿を発見したい方。
• 信頼と安全チーム：疑わしい長文投稿を手動レビューの優先順位に置きたい方。
• コンテンツQAチーム：人間とAI支援のドラフトを比較し、一般的な表現を特定したい方。

特徴

• 説明可能な出力：スコアとともに、最も強い重み付き証拠信号と注意喚起を提供。
• エージェント対応：コードエージェントやローカルワークフローへの統合を想定したスキルとしてパッケージ化。
• 慎重な設計：高い再現率よりも誤った確信を避けることを優先。特に非常に短いテキストに対しては強い主張を拒否。
• 再現可能な評価：公開されているHC3データセットに対して性能を評価するためのスクリプトを含む。