Spark-To-Paper-Skills/paperjury

Pre-submission AI review stress-test for research papers. A Claude Code skill: review, verdict, revise, verify.

PaperJury – LaTeX論文のAI支援事前レビュー

機能

  • Claude Code(またはCodex)プラグインとして動作し、研究論文を読み取り、レビュアー風のコメントを生成し、最小限のLaTeXパッチを草案する。
  • ワークフローは厳密な レビュー → 判定 → 編集 → 再確認 ループに従う。各コメントは、まずシミュレートされたレビュアーのパネルによって評価され、以下のいずれかと判断される:
    1. 有効・修正可能 – 自動パッチが可能な安全なテキストまたはフォーマットの問題。
    2. 著者対応必須 – 欠落した実験、証拠など、著者による対応が必要な本質的なギャップ。
    3. 無効・破棄 – 間違ったコメントであり、破棄される。
  • 3つの動作モードを提供:
    • direct-edit – 特定の変更を要求;ツールがパッチを草案し、あなたの承認を待つ。
    • review – モック・ピアレビューを実行し、問題リストとオプションのパッチを出力。
    • auto – 明示的な「auto」ポリシーを設定後、システムは監視なしで動作し、低リスクの編集のみを自動適用し、高リスク項目はあなたのためにキューに積む。

重要性

  • ラフなテキスト生成を超えるクローズド・ループアシスタント:決定論的なセーフティチェック(LaTeXコンパイル、参照整合性、提出フォーマット準拠)を実施し、すべての意思決定を機械可読形式のレジストリに記録。
  • 著者らの報告によると、12件のホールドアウト論文を用いたベンチマークで、Issue検出のマクロ-F1が0.519(ベースライン)から0.656に向上し、不適切な編集率は4.4倍低下。各論文の処理時間は約2.5時間の計算(約6.8Mトークン)。
  • リポジトリには完全な「ドッグフード」例が同梱されており、前後PDFと手動確認済みの実行レポートが含まれる。

インストール方法

  1. Claude Codeスキルとしてマーケットプレイスからインストール:
    /plugin marketplace add Spark-To-Paper-Skills/paperjury
    /plugin install paperjury@Spark-To-Paper-Skills
    
    (または、~/.claude/skills/paperjuryにリポジトリをクローン)。
  2. Node.jsのインストールを確認;LaTeXツールチェインはオプションだが、実際のコンパイルチェックを可能にする。
  3. npm run doctorで環境を検証し、自然言語でコマンドを発行。例:
    请审稿,重点检查实验是否足以支持 claim。
    
    プラグインは問題リスト、パッチ草案、再確認レポートを返す。

提供される出力

出力 内容
📋 問題リスト 証拠、位置、現在のステータスを含むレビュアー風の問題。
🧩 パッチ 安全な問題に対する最小限のLaTeX編集;高リスク編集は著者レビュー用にキューに積む。
🛠️ 再確認レポート 実際のLaTeXコンパイル結果(エラー、オーバーフルボックス、欠落参照)またはツールチェインが不足している場合の明確なフォールバック。
🧪 ドッグフードサンプル samples/dogfood/には、実際の21ページのドラフト、元のPDF、修正後のPDF、検証済み実行レポートが含まれる。

対象ユーザー

  • 提出前のシステム的サニティチェックを希望する、完成したドラフトを持つ著者。
  • 最終提出準備中の研究者で、主張の裏付け、フォーマット、匿名性準拠を確認したい人。
  • 複数ラウンドの未監視修正を希望するチーム(mode: autoを有効化し、/goalを提供)。

制限事項

  • 科学的判断は著者に完全に委ねられる;新しい実験やドメイン判断が必要な問題は著者対応必須として返される。
  • ツールはローカルで実行される;LLMバックエンドは、Claude Code環境に応じてクラウドホスティングされる可能性がある。
  • 現在、LaTeX、Markdown、変換されたWord(.docx)ファイルに対応しているが、複雑な表や数式は変換時に忠実度が低下する可能性がある。

追加リソース


PaperJuryは、研究者がLaTeX原稿に対して構造的かつ安全な事前レビューを実施するのを支援する本格的なオープンソースAIエージェントシステムである。

関連

  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト