AIエージェント
モデル選択の自動化は、誰の振る舞いを読むかで決まる
目次
これまで、どのモデルを使うかは利用者が自分で決めていた。名前と評判で一つ選び、その日の仕事をすべてそこへ送る。短い書き換えも、込み入った設計の相談も、同じ一つのモデルが受け止めていた。
この決め方は、モデルごとの値段と得意の幅が開くにつれて割に合わなくなった。いちばん高性能なものに固定すれば、簡単な用事まで高い単価で処理される。安いものに固定すれば、込み入った仕事で手が止まる。かといって依頼のたびに選び直すのは、人の手には多すぎる回数である。
頼りにできる基準も乏しかった。公開の試験の点数は誰でも見られるが、それは試験の問題での成績であって、目の前の仕事での成績ではない。選ぶ側は、手元の結果と点数表が合わない場面を何度も見ることになる。行き詰まったのは選び方ではなく、選ぶ基準のほうだった。
道具が代わりにモデルを選ぶとき、それは何を見て「このモデルが良い」と判断しているのか。
自動のモデル選択を分けるのは、推定の精度ではなく、誰の振る舞いを判断の証人に立てるかである。 公開の試験の点数を根拠から外した設計は、代わりに人が実際にどう振る舞ったかを読む。その「人」を自社の利用者に取るか、市場全体に取るかで、設計は両端に分かれる。
この観点の両端を示す例として、本稿は二つのルータを取り上げる。ルータとは、依頼ごとにどのモデルへ処理させるかを決める仕組みを指す。一方はAIコードエディタのCursorで、開発元はAnysphere, Inc.である1。もう一方は多数のモデル提供元へ一つのAPIで依頼を送れるゲートウェイのOpenRouterで、運営はOpenRouter, Inc.である2。前者は自社の利用者が応答のあとに何をしたかを読み、後者は市場全体が直近の一週間でどのモデルへ支出したかを読む。依頼をモデルへ振り分ける仕組みは、モデル提供元が自社のモデル群の中で行う自動選択や、利用者が自分で組む規則など、この二つの外にもある。本稿がこの二つを選んだのは、証人の取り方が両端にあることと、どちらも設計の考え方を作り手自身が公開の文書に書いていて、読者が原典で確かめられることによる。
なぜ今、選ぶ役が道具へ移ったのか
選ぶ役が人から道具へ移るとき、道具は何かを根拠に選ばなければならない。公開の試験の点数を根拠にする道と、人の振る舞いを根拠にする道があり、後者を選んだ二つの作り手が、その理由を自分の言葉で書いている。
Cursorは、ルータを出す前の状態を自分で数えている。Cursorを使う開発者のおよそ60%が一つのモデルを日常の主力にしており、その結果として「定型の仕事がフロンティアの価格で処理され、AIへの支出が成果の質よりはるかに速く伸びる」と書く3。背景で述べた行き詰まりは、作り手の側にも同じ形で見えていた。
Cursorの賭けは、モデルの良し悪しをどこから知るかにある。著者は自社のルータを「モデル選択はベンチマークの点数から推し量るのではなく、実際の開発者の仕事でモデルがどう働くかから学ぶべきだ、という考えの上に作られている」と説明する3。判断の材料を、試験の成績から自社の本番の記録へ移すという宣言である。
OpenRouterの賭けは、同じ問いに別の答えを置く。発表記事は冒頭で「市場の美点は、大きく多様な、独立した個人からなる集団が、どんな単独の専門家よりも良い判断と決定を集合的に下すという型にある」と述べ、この集合知を分かち合うことを新しいルータの狙いに据えている4。良し悪しを決める役を、専門家の判断から集団の選択へ渡すという宣言である。
二つの賭けは、根拠の置き場所という一点で重なる。どちらも、モデルの良し悪しを誰かが事前に定めた尺度で測る道を降り、人が実際に何をしたかという後から出てくる事実に判断を預けた。道具へ移ったのは選ぶ手間だけではない。何をもって良いとするかを決める権限が、一緒に移っている。
自社の利用者に賭けるCursor
Cursorが証人に立てるのは、自社の利用者の次の一手である。応答のあと利用者が次の仕事へ進んだか、それとも訂正を求めたかを成否の信号として扱い、その信号で、依頼への応答に利用者が満足するかを予測する器を訓練する。著者はこの予測を難しさの代わりに使う理由を「利用者はコミットのような単純な作業のあとに訂正を求めることはまれで、作業が複雑であるほど追加の依頼を出す可能性が高い」からだと書く3。予測が閾値に届かない依頼だけが、強みの合うモデルを選ぶ次の段階へ回る。
この賭けの強みは、証人が仕事の現場にいることである。同じ編集器で同じ種類のコードを書く人々の反応から推定するので、試験では見えない差が推定に入る。モデルを切り替えたときにキャッシュを作り直す費用も、実際の支払いとしてそこに含まれる3。著者は本番での検証として、もっとも成功しそうだと判定したターンは96%が、もっとも成功しそうにないと判定したターンは71%が良い結果の信号を受け取ったと報告している3。
費用の側でも数字が出ている。記事の公開時点で、Auto IntelligenceがFable比で68%、Auto BalanceがOpus 4.8比で41%低い費用で、いずれも満足度では上回ると著者は書く3。ただしこれは同社が自分のトラフィックで計測した値であり、外の読者が同じ条件を再現して確かめることはできない。
弱みは同じ性質から出る。証人は自社の中にしかいない。著者は「オフラインの分析だけでは、方針が本番でどう振る舞うかを完全には捉えられない」として、方針を本番のトラフィックで検証する3。その本番は同社の中にある。どのモデルが答えたかさえ、既定では応答に表示されない。文書は非表示を既定かつ推奨とし、その理由を「結果がモデル名ではなくそれ自体の良し悪しで判断されるように」と書く5。
市場の支出に賭けるOpenRouter
OpenRouterが証人に立てるのは、市場の財布である。依頼は細かい仕事の種類に分類され、その種類で直近7日間に利用者全体が実際に支出した額の順にモデルが並ぶ。7日という窓を使う理由として著者が第一に挙げるのは、これを参照していれば新しいモデルが出てもつねに最新でいられることである4。
強みは、証人が外にいることである。ルータが使う順位は公開の順位表と同じデータなので、読者は自分の仕事の種類でどのモデルに支出が集まっているかを自分で見られる。需要が別のモデルへ移れば「ルータは数日のうちにそれへ追随する」と著者は書く4。文書はこの順位を生きた信号と呼び、新しいモデルを取り込むのに再訓練も手作業の選定も要らないとする6。
弱みも同じところから出る。順位を決めるのは支出の多さなので、集団の選択が動けばルータの判断も動く。著者はこれを「これらの結果はある時点を切り取ったものであり、コミュニティの好みが変われば移り変わる」と書いている4。ベンチマークの点数は選ぶ材料ではないが、公開前の検証には使っている。五つのベンチマークで旧ルータと比べた結果は、既定の水準では大半の領域で費用が下がり性能も保たれた一方、知識の試験では性能が1.4ポイント下がり、調査の試験では性能が19.7ポイント上がるかわりに費用が旧ルータの1.9倍になった4。著者はこうした例外を、旧ルータが現代の低価格モデルに劣っていた領域だと説明する4。
市場の順位に判断を預けた設計は、使う側の直感ともずれる。費用の水準を一段上げても、選べるモデルが上へ広がるだけではない。文書は一つの水準を上限ではなく帯と呼び、その帯より安いモデルも高いモデルも候補から外れると書いている6。
どちらを選ぶかは、自分の仕事が誰の仕事に似ているかで決まる
二つを分けているのは推定の精度ではなく、誰の振る舞いを証人に立てたかである。 自分たちの仕事が、ある道具を毎日使う開発者の仕事とよく似ているなら、その道具の中で集めた推定は近いところを当てる。似ていないなら、市場全体の支出のほうが偏りは小さいが、そのぶん自分の事情は映らない。どちらを選んでも、判断の根拠は自分の外にある。
この観点は二つの外にも持ち出せる。別のルータや自動選択の仕組みに出会ったら、それが公開の試験の点数を読むのか、人の振る舞いを読むのか、読むなら誰の振る舞いかを先に確かめればよい。答えが分かれば、その道具の推定が自分の仕事に近いところを当てるかどうかも、おおよそ見当がつく。
持ち帰れるのは、モデル選択に限らない形である。何かを自動で選ぶ仕組みに出会ったら、その判断が誰の振る舞いから作られているかを先に確かめる。材料が外から見えるなら、自分の仕事の種類で当ててみて、合わなければ手で指定に戻せる。見えないなら、合わないと感じたときに何を確かめるのかを、自分の側で先に決めておくことになる。
出典6件
-
Cursor公式サイトのトップページ(2026年9月12日取得)。フッターの著作権表示は「© 2026 Anysphere, Inc.」で、本文に「Trusted by over half of the Fortune 500 to accelerate development, securely and at scale.」とある。同社が自分で掲げる数字であり、外部の検証は無い。製品の立ち位置(開発元と採用の規模)を示すためだけに引く。https://cursor.com/ ↩
-
OpenRouter公式サイトのトップページとAboutページ(2026年9月12日取得)。トップページの見出し帯に「400T+ Monthly Tokens」「10M+ Global Users」「80+ Providers」「500+ Models」とあり、フッターの著作権表示は「© 2026 OpenRouter, Inc」。Aboutページは「Started in early 2023 as the first LLM marketplace, OpenRouter has grown to become the largest and most popular AI gateway.」と書く。「largest and most popular」は同社の自己評価で本稿は採らない。数字も同社が自分で掲げるものであり、外部の検証は無い。製品の立ち位置(運営元・開始時期・扱う規模)を示すためだけに引く。https://openrouter.ai/ https://openrouter.ai/about ↩
-
Cursor, “How Cursor Router works”(2026年8月6日公開、著者Connor O’Keefe・Yuri Volkov)。この記事は設計の考え方を「Cursor Routerは、モデル選択はベンチマークの点数から推し量るのではなく、実際の開発者の仕事でモデルがどう働くかから学ぶべきだ、という考えの上に作られている」と書く。第一段階のCompassが直接予測するのは複雑さではなく、その依頼への応答に利用者が満足するかどうかであり、著者はその予測を複雑さの代わりに使う理由を「利用者はコミットのような単純な作業のあとに訂正を求めることはまれで、作業が複雑であるほど追加の依頼を出す可能性が高い」からだとする。訓練の性能信号は利用者の次の一手(先へ進む=強い正、訂正を求める=強い負)から起こし、数十万ターンの記録が材料である。著者は本番でCompassを検証し、もっとも成功しそうだと判定したターンは96%が、もっとも成功しそうにないと判定したターンは71%が良い結果の信号を受け取ったと報告する。Compassはターンごとに0から1の点数を付け、著者が示す式では点数が閾値以上の依頼が価格を抑えたモデルへ、未満の依頼が強みで割り当てる次の段階へ回る。冒頭でAuto IntelligenceはFable比で68%、Auto BalanceはOpus 4.8比で41%低い費用で、いずれも満足度で上回ると書く(比較相手はそれぞれFableとOpus 4.8)。検証は二段階で、交差検証と検証用に取り分けた集合でのオフライン評価のあと、「オフラインの分析だけでは、方針が本番でどう振る舞うかを完全には捉えられない」「実際の開発者のトラフィックが、もっとも代表性のある試験であり続ける」として、方針を本番のトラフィックで試したと書く。いずれもCursor自身が自社のトラフィックで計測した値であり、外部の読者が同じ条件を再現して確かめることはできない。https://cursor.com/blog/how-cursor-router-works 先行する告知記事、Cursor, “Cursor Router”(2026年7月22日公開、署名はCursor Team。この記事に上記2名の名前はない)が、ルータを出す前の状態を「Cursorを使う開発者のおよそ60%が一つのモデルを日常の主力に選んでいる。その結果、定型の仕事がフロンティアの価格で処理され、AIへの支出が成果の質よりはるかに速く伸びる」と書く。同記事は、報告する節約率に、モデルを切り替えたときのキャッシュ失効の費用を含めているとも述べる。(2026年9月12日取得・HTTP 200)https://cursor.com/blog/router ↩ ↩2 ↩3 ↩4 ↩5 ↩6 ↩7
-
OpenRouter, “Model Routing Powered by Wisdom of the Market”(2026年8月10日公開、著者はOpenRouterとして表記され個人名はない)。設計の考え方を冒頭で「市場の美点は、大きく多様な、独立した個人からなる集団が、どんな単独の専門家よりも良い判断と決定を集合的に下すという型にある」と述べ、この集合知を分かち合うことを新しいAutoルータの狙いに置く。ルータは依頼をおよそ30種類の細かい仕事の種類に分け、その種類で直近7日間にコミュニティが実際に支出した額の順にモデルを並べる。信号の規模はOpenRouter上の週あたり55兆を超えるトークン支出に基づくとし、7日という窓については、これを参照していれば新しいモデルが出てもつねに最新でいられるとする。「利用者があるモデルから別のモデルへ作業を移すと、ルータは数日のうちにそれへ追随する」とも書き、この順位は公開の順位表(model rankings by task spend)と同じデータであると明記する。公開前の検証としてMMLU Pro・τ³-bench Banking・WideSearch・DSQA・SWE-Atlas QnAの五つのベンチマークで旧ルータと比べ、既定の水準で性能を保ったまま費用を下げられているかを確かめたが、結果は「大半の領域で」であり、表ではMMLU Proの性能が85.2%対86.6%と1.4ポイント低く、DSQAの費用が276.00ドル対147.11ドルと旧ルータの1.9倍になっている(同じ行の性能は62.9%対43.2%で新ルータが19.7ポイント高い)。著者は例外を「旧ルータが現代の低価格モデルに劣っていた領域」と説明する。著者は限界を「これらの結果はある時点を切り取ったものであり、コミュニティの好みが変われば移り変わる」と書く。(2026年9月12日取得・HTTP 200)https://openrouter.ai/blog/announcements/introducing-the-new-auto-router/ ↩ ↩2 ↩3 ↩4 ↩5 ↩6
-
Cursor, “Cursor Router” ドキュメントページ(本稿が引く7月22日・8月6日の両記事が末尾でリンクする頁)。チーム設定のUnderlying modelで、Autoがどのモデルへ回したかを各応答の冒頭に表示するか隠すかを管理者が選ぶ。「非表示が既定であり推奨でもある。結果がモデル名ではなくそれ自体の良し悪しで判断されるようにするためだ」とし、Balance・Intelligenceの両モードに適用されると書く。「どのモデルが依頼を処理するかを手で選ぶことはできず、モデルの顔ぶれは新しいモデルが出るにつれて変わる」とも書く。Compassの点数や分類の結果を呼び出し側へ返す仕組みは、この頁に書かれていない。(2026年9月12日取得・HTTP 200)https://cursor.com/docs/cursor-router ↩
-
OpenRouter, “Auto Router” ドキュメントページ。設計の意図を語る発表記事とは別に、使う側が踏まえるべき挙動を記す。仕事の種類ごとの支出占有率を「生きた信号」と呼び、利用者が作業を新しいモデルへ移せばルータは数日のうちに追随し、そこに再訓練も手作業の選定も要らないと書く。費用の水準は安い順にlow・medium・high・xhigh・maxの五段階で、費用設定なしの依頼は「およそlowの帯を指定したのと同じように」扱われる。ここで「一つの水準は上限ではなく帯であり、その帯より安いモデルも上のモデルも同じく除かれる」と明記しており、水準を上げれば選べる幅が上へ広がるだけ、という読み方は成り立たない。分類やランキングが使えないときは既定のモデル集合へ落として応答を返し、ルーティングの仕組みの不調そのものでリクエストが失敗することはないとも書く。(2026年9月12日取得・HTTP 200)https://openrouter.ai/docs/guides/routing/routers/auto-router ↩ ↩2
この記事はAIが執筆しています。内容には誤りが含まれる可能性があります。ご注意ください。