Split work AI and separate QA AI for documents
Citing Anthropic data that manual step review catches only 14% of errors, the post shares a three-step method using Opus 5.5 or Gemini 4 Argon as an independent QA chat.
今週Anthropic(Claude公式)が立て続けに発表した新機能と、その裏にある検証データを繋げて見てみると、僕たち会社員の「仕事のやり方」が根底からひっくり返ることがわかる。 まず昨日(10/23)、Claudeに長時間のリサーチや重い作業を裏で丸ごと走らせ、完了した時だけ報告させる新機能「MCP Tasks」が解禁されて50万表示を超える反響を呼んでいる。 さらにその前日には、来週からWeb版・デスクトップ版・スマホ版のすべてで「人間がいちいち各ステップを手動で承認する仕組み」をやめ、デフォルトで「Auto mode(自動モード)」に切り替えると発表された。 なぜAnthropicはここまで徹底して「人間の途中チェック」を排除し始めたのか? その根拠として公式が引用している、8月のテスト結果の数字がすべてを物語っている。 ・人間が1ステップずつ手動で見て承認した時:危険なミスを【14%】しか見抜けなかった ・作業AIとは「別のチェッカーAI」に監視させた時:危険なミスを【89%】見抜いた 14% 対 89%。 人間が途中でちまちま画面を見てチェックするより、AIに作業を一気に走らせて「別のAI」に検品させた方が、6倍以上も正確にミスを防げるという事実がすでに証明されていたんです。 これ、エンジニアだけの話じゃない。 普段職場でAIに企画書やスライド、メールを作らせている会社員全員にそのまま刺さる話です。 正直に言います。 「AIが出したものは、人間がこまめに目で見てチェックしましょう」 ……これ、職場では完全に破綻しています。 途中でちまちま口を出してAIの足を止めるわりに、いざ5,000文字の綺麗な下書きが出てくると、夕方の疲れた目では「承認疲れ」を起こして「うん、まあ良さそうだな」とスルーしてしまう。 そして会議で、数字の矛盾やロジックの穴を突かれて撃沈する。 Anthropicの一連のアップデートが僕たちに教えてくれている結論は1つです。 「人間が途中でちまちま介入して、自分の目で検品するのをやめろ」 僕が今、職場で資料やスライドを作る時にやっているのも、まさにこのAnthropicの仕組みをそのまま真似した【作業AI × 別室の検品AI】の分業です。 ブラウザの画面だけで今日からできる、3つのステップをシェアします。 ━━━━━━━━━━━━━━━━━━ ミスを89%潰す「別チャット検品」の型 ━━━━━━━━━━━━━━━━━━ ① 作業は途中で止めず、一気に走らせる 1行ずつ人間が手直ししない。前提とゴールを渡したら、まずは最後までAIに下書きを走り切らせる。 ② 検品は「全く別の新しいチャット」を開いてやらせる 資料を作らせたチャットで「おかしいところない?」と聞き返してもダメ。作った本人のAIには「自分の作品を肯定するバイアス」がかかっているから。 Anthropicが「別の分類器(Separate classifier)」を使ったのと同じように、これまでの文脈を知らない【真っ白な別チャット】を新しく立ち上げる。 ③「厳格なQA担当(独立評価者)」として監査させる 新しいチャット(Opus 5.5 や Gemini 4 Argon など一番賢いモデル)に成果物を貼り、こう投げる。 「あなたは制作者とは別の、極めて厳格な品質管理(QA)責任者です。 以下の資料を、役員会の決裁基準で冷徹に監査してください。 1. 5秒で結論とイシューが伝わるか 2. 主張と根拠のピラミッドに論理破綻はないか 3. 数字の定義や前提に曖昧なごまかしはないか 突っ込まれる穴をすべて洗い出してください」 ━━━━━━━━━━━━━━━━━━ これだけで、人間の疲れた目では86%見落としていた「論理の穴」や「数字のズレ」が、秒で10個くらいあぶり出されます。 人間は、その洗い出された急所だけを見て最終判断すればいい。 AIの横で付きっきりになり、疲れた自分の目で文字を追うのはもうやめよう。 「作るAI」と「疑うAI」の部屋を分けた瞬間、手戻りは消え、仕事は1回で涼しい顔して通るようになります。
This post quotes another post: x.com/claudeai/status/2113360845409583307