ワークフローの A/B テストを行わないでください

Claude Code は私の仕事のやり方を完全に変えました。私は設立当初から Anthropic と創設者の研究の大ファンです。ここ 1 週間で私自身のワークフローの低下を経験してイライラしており、この投稿はそのイライラの中で書きました。その後、より正確かつ公平なトーンになるように改訂しました。現在、Hacker News で #1 になっていますが、そうでなければおそらく削除するでしょう。

Anthropic は、Claude Code に対して A/B テストを実行していますが、これにより私のワークフローが積極的に低下します。オプトアウトできればいいのに。

A/Bテストが本質的に間違っているとは思いません。 Anthropic が意図的に誰かの経験を貶めるためにこれを行っているとは思いません。彼らは明らかに最適化を試みています。しかし、テスト設計は重要であり、理由を理解せずにプラン モードなどのコア機能の認識される動作を変更すると、私のエクスペリエンスが低下します。

私はクロード コードに月額 200 ドルを支払います。これは私が仕事をするために使用するプロフェッショナルなツールであり、それがどのように機能するか、そしてそれを構成する機能についての透明性が必要です。私が必要としないのは、アプリケーションの重要な機能が予告なしに変更されたり、オプトインなしで中断を伴うテストにサインアップされたりすることです。私たちはこれらのツール (AI) をどのように操作するかについて責任を負う必要があり、それができるようにする必要があります。透明性はその重要な部分です。構成可能性はその重要な部分です。

毎日、エンジニアはクロード コードのリグレッションについて不満を述べています。場合によっては、知らないうちに A/B テストを受けている可能性があります。

証拠

[REMOVED] 私は誰もが同じような道を歩むことを奨励したくありません。何が起こっているのかを本当に知りたかったのですが、Hacker News に注目が集まっているため、詳細を削除することにしました。

私の計画は、文脈のない簡潔な箇条書きとして戻ってくるようになりました。私はクロードに、なぜそのようなひどい計画を書いているのか尋ねました。それは、計画を 40 行にハードキャップし、コンテキストセクションを禁止し、「ファイルパスではなく散文を削除する」という特定のシステム指示に従っていると私に言いました。

これは、透明性と責任ある AI の導入とは真逆の行為です。 AI ツールには、透明性を低下させるのではなく、さらなる透明性が必要です。自分のプロセスを所有し、人間と協力して AI をガイドする能力が必要です。