Claude Opus 5.5のパフォーマンス低下に関するユーザー報告

パフォーマンス低下に関するユーザー報告

Hacker Newsでの最近の議論によると、一部のユーザーがClaude Opus 5.5のパフォーマンス低下を感じているようです。報告によると、モデルが指示に従うのが困難になっている、注意力が散漫になっている、冗長性が増しているといった問題が挙げられています。一部のユーザーは、これらの問題がここ数週間で強まっていると指摘しており、また別のユーザーは過去24〜48時間以内に突然の挙動の変化を報告しています。

モデルの挙動に見られる一般的な症状

これらの問題を報告するユーザーは、いくつかの特定の行動パターンを強調しています。

• コンテキストの劣化: 一部のユーザーは、モデルが長期にわたるセッションで苦戦し、以前に提供した指示や設定手順を最終的に「忘れてしまう」と報告しています。これは、複数回のやり取りの後にモデルが関心を失ったり混乱したりする「コンテキストの劣化」の一種として説明されています。
• 指示への追従: ユーザーは、モデルが複雑なプロンプト内の特定の制約を無視したり、詳細を見落としたりする可能性が高まっていると指摘しています。
• 冗長性とトークン消費: モデルが過度に冗長になり、出力品質が向上しないまま使用クォータが急速に消費されるという報告があります。
• A/Bテスト: 一部のコミュニティメンバーは、これらのパフォーマンスのばらつきはA/Bテストやサイレントなモデルアップデートの結果である可能性を示唆しており、これが一部のユーザーが大幅な低下を経験し、他のユーザーが変化を感じない理由を説明できるかもしれません。

モデルの信頼性に関するコミュニティの視点

多くのユーザーが不満を報告していますが、モデルが客観的に「賢くなくなった」のか、それともこれらの経験が他の要因によるものなのかについては、コミュニティ内で意見が分かれています。

• ベンチマークと逸話: 一部のユーザーは、BridgeBenchのようなプラットフォームで見られる自動ベンチマークの取り組みを指摘し、モデルのパフォーマンスは安定していると主張しています。
• 代替モデル: これらの問題に対応して、一部のパワーユーザーは、古いバージョンのモデル（Opus 4.8など）を使用したり、認識されている「ショックカラー」や制限的なガードレールを回避するために「Abliterated」70B/120Bシリーズのような検閲なしモデルへ移行したりするなど、代替案を模索しています。
• 将来のリリースに関する推測: 議論の中で繰り返されるテーマは、パフォーマンスの変化が新しいモデルバージョンのリリースの前兆であるという推測であり、一部では「Fable 5.5」やそれに類する名称で呼ばれています。

"Opus 5.5をあまりに多くのターン実行させると... 人間の認知症のような兆候を示し始めます。私に何かを実行するように言ったことを忘れ、それから、文字通り実行するためのスクリプトを渡してきたはずの設定を私が間違えたと非難してくるのです。" — Hacker News user Bender

"何か変わったと思います。おそらく2週間ほど前からです。モデルが執着するようになり、修正が必要になると、指示に対して単に無関心になってしまうのです。" — Hacker News user itopaloglu83