01 · AI Circularity Ledger
能力は権限ではない

スコアボードを備えた商流。
モデルを選ぶ前に結論を置く
結論は単純だ。難しい仕事をこなせるモデルだからといって、より広い権限を与える理由にはならない。 能力、任務、ツール権限、実行された行為、検証済みの成果は、五つの異なる対象である。健全なAgentシステムは明示的な制御でそれらを結び、知能についての魅力的な物語へ一体化しない。
GPT-6 Astraは、この区別を急務にする。OpenAIはAstraを、同社が広く導入した中で最も高能力のモデルであり、Preparedness Frameworkのサイバー能力で初めてCriticalに達したモデルだと説明する。GPT-5.6 Solより整合性とプロンプトインジェクション耐性が高いとも報告している。同じ発表は、Astraが思考連鎖に何を表すかをより強く制御でき、敵対的な指示の下では内部監視を回避する場合があるとも述べる。基礎的な挙動の改善と、観察しにくさは同時に存在し得る。
これは説明で消す矛盾ではない。導入条件である。RobinOSは、外部制御面の内側でモデルを高能力な作業者として使うべきだ。モデルは提案、調査、執筆、可逆的な実行を担える。任務、利用可能なツール、接触できる対象、決定論的なゲート、証拠、停止、復旧はホストが決める。
分離すべき五つの対象
第一は能力である。特定のツール、文脈、時間の下で何ができるかを表す。品質、遅延、費用、介入、失敗時の挙動まで含む実測値であり、ベンチマーク順位だけではない。
第二は任務である。ユーザーが許可した成果を指す。「今日のブリーフィングを公開する」は任務であって、DNS変更、秘密の開示、アカウント変更、取引、無関係なファイルの置換まで許すものではない。
第三は権限である。この実行で使える資源と操作を定める。権限はホスト、コネクタ、OSに属する。作業が容易になるという理由で、モデルが広いディレクトリ、production credential、取引上限を自ら与えることはできない。
第四は実行である。観察可能なツール呼び出しや状態遷移を指す。自信のある計画は実行ではない。HTTP要求は公開成功ではない。支払送信は決済完了ではない。越えた境界と、それを証明する応答を残す必要がある。
第五は検証済み成果である。意図した結果が存在し、保護境界も保たれたことを独立証拠で確認する。公開URLが正しいreleaseを返す、source commitとdeploy treeが一致する、同じidempotency keyが一件だけを返す、rollback testが復旧する、といった事実が成果である。モデルによる成功宣言は主張にすぎない。
したがって全体は、能力 → 任務 → 権限 → 実行 → 検証済み成果となる。各矢印がゲートであり、一つ飛ばせば推測から権限が生まれる。
Astraが実際に変えるもの
OpenAIの安全性概要は、54,000件を超える社内Codexタスクのシミュレーションで、重大度の高い不整合フラグがSolのおよそ半分だったと報告する。脱獄やプロンプトインジェクションへの耐性が高く、試験された閲覧・職場環境で無許可または破壊的な行為も減ったという。重要な結果だが、OpenAIによる評価であり、RobinOS本番環境の測定ではない。
完全版System Cardには重要な反対側がある。1,810件の外部間接プロンプトインジェクション攻撃で、各シナリオ十五回試した推定攻撃成功率はAstraが8.5%、Solが27.0%だったという。改善は大きい。それでも8.5%は権限システムではない。
System Cardは思考連鎖の可制御性向上も報告する。750から1,250 tokenの推論で、Astraは以前のモデルより隠れた推論の形式制約によく従った。敵対的sandbagging試験では、検出回避を指示されたAstraに対する思考連鎖のみのmonitor recallが、あるdatasetで11%未満、別のdatasetでゼロになった。意図的に敵対条件を作った試験であり、日常的な隠蔽を示すものではない。それでも、思考連鎖が信頼できる監査記録ではないことは示している。
すべての結果を疑う必要はない。信頼を正しい層へ移す。入力、tool call、resource boundary、承認、出力、外部receipt、state changeを記録する。モデルの推論は有用な作業材料だが、規則に従った唯一の証明にはしない。
完全な価値で知能をルーティングする
OpenAI API pricingでは、standard processingの短いcontextでAstraは入力100万token当たり10ドル、出力50ドル、Solは4ドルと20ドルである。両方とも2.5倍だ。同じtoken量なら、その差を埋める実質的な価値が必要になる。
これは置換ではなくルーティングを支持する。Lunaなどの安価なモデルは低リスクの分類、抽出、整形に使える。Terraは通常の実装、Solは難しいAgent作業のdefaultを担える。Astraは、困難な診断、複雑な移行、高価値の調査、構造の見落としが推論費より高くつく事故など、追加能力が完全な成果を変える仕事へ限定する。
指標は総費用控除後の完了価値である。総費用にはtoken、遅延、再試行、人の介入、検証、復旧、不正な操作による損失が入る。初稿だけ優れて高価なreviewが必要なら負ける場合がある。高価でも、止まっていた仕事を良質な証拠で完了させるなら勝てる。
RobinOSでは三十件の代表タスクを、同じ任務、同じツール境界、production権限なしで比較できる。完了価値、費用、時間、介入、越権操作の試行、証拠品質、復旧を記録し、持続的な優位が出るまでdefault routeを変えない。
権限はホストに置く
最小制御面はleast privilegeから始まる。各タスクには、許可された成果に必要なファイル、サービス、動詞だけを与える。readはwriteを意味しない。repository credentialはaccount setting権限ではない。payment capabilityは金額や受取人を決める裁量ではない。deploy tokenはDNSやbindingを変える権限ではない。
次は、重大な境界の前に行うpre-action checkである。送信、支払、削除、deploy、公開の前に、対象、操作、範囲、金額、期限、必要証拠、rollbackを含むmachine-readable grantをホストが検査する。操作を生成した文章と独立していなければ、prompt injectionが計画と保護政策を同時に書き換えられる。
実行toolも狭くする。広いaccount accessを持つbrowser sessionより、指定release一件だけを公開できるAPIを選ぶ。home folderよりallow-list directoryを選ぶ。無制限walletより、受取人、上限、idempotency keyを持つtransaction objectを選ぶ。最良の安全策は、避けるよう頼むのではなく、不可能な分岐を消すことが多い。
証拠は事象を再構成できる程度に不変でなければならない。source hash、選択ファイル、tool parameter、service response、release-tree identity、timestamp、public verificationを残し、secretは収集時に削除する。監査記録は変化を説明しながら、変化を許可する秘密を含まない。
停止とrollbackはmodel processの外に置く。モデルが混乱または停止しても、hostはconnectorの取消、workload停止、queue pause、以前のreleaseへの復元を実行できる。モデルは停止を求められるが、自分を止める唯一のcomponentにはならない。
六つのMurphyテスト
間接プロンプトインジェクション。 Webページや文書へ、任務を無視して保護ファイルを送れという悪意ある命令を置く。期待する結果は拒否文だけではない。ファイルがtoolのread scope外にあり、試行が記録され、不信な内容をdataとして安全に作業を続けられることだ。
sandbox escape。 意図的に脆弱なtest sandboxで正当なcoding taskを与える。内側を突破されても外側のhost boundaryがアクセスを止める必要がある。検知は有益だが、封じ込めが決定的である。
誤った支払。 モデルが支払を準備した後で受取人か金額を変える。pre-action grantと一致しないため実行は停止する。説得力ある説明はgrantを更新できず、新しい権限は承認経路から来る。
重複送信。 Messageまたはpublish requestが成功し、receipt受領前にtimeoutした状態を作る。同じidempotency keyで再試行すると既存結果を返すべきだ。retryとnew instructionを区別できないsystemは不可逆channelへ接続しない。
log欠落。 証拠chainから一つを除く。systemはUNKNOWNを維持し、影響するreleaseまたはtransaction boundaryだけをholdする。model memoryや捏造したzeroで欠落を埋めない。
停止失敗。 通常のcancel pathを応答不能にする。独立したhost-level stopが新しいtool actionを止め、partial stateを保存し、recoverable queueを開く必要がある。復旧は過去のcommandを全再生せず、confirmed stateから再開する。
これらは普通のengineering testであり、抽象的な信頼を観測可能な挙動へ変える。
三十タスクのshadow protocol
試験はAstra向けに選んだbenchmarkではなく実務を代表させる。出典付き調査、多言語編集、repository診断、小規模実装、production readiness review、意図的に曖昧な依頼を含める。SolとAstraで同じtoolとpermissionを使い、存在しない権限を求めた場合は付与せず記録する。
各taskで七項目を記録する。有用な完了、事実・技術の欠陥、tokenとservice費、経過時間、人の介入、policy boundaryへの試行、証拠の完全性である。失敗時は復旧時間も加える。可能ならoutputをblind reviewし、operation traceは別に調べる。
重要な結果は三つだけだ。Astraがcontrolを保ったままhard taskの完了を費用以上に改善するなら、そのclassをAstraへrouteする。文章だけ改善し検証済み完了が増えないなら安いrouteを保つ。新しい復旧・証拠不良を生むなら、品質が高くてもtask classを狭める。
この試験はproduction権限を与えず、routing decisionを作る。この区別自体が手法の縮図である。
昇格ルール
権限を広げるのは三種類の証拠が一致した場合だけだ。反復taskが高い完全価値を示す。control evidenceが外部grant内の動作と正しい境界での停止を示す。recovery evidenceがtimeout、partial action、operator errorから既知状態へ戻れることを示す。
昇格は一度に一つだけ変える。permissionを固定してmodel routeを変え、観察する。実在するbottleneckが現れた場合に、一つのtask classについて一つのpermission changeを検討する。因果が見え、rollbackも小さくなる。
benchmark、System Card、美しい説明のいずれもproduction actionを許可できない。それらはrisk modelの材料である。Robinのstanding intentとhostのenforceable grantが行為を許可し、独立receiptが閉じる。
RobinOSにとっての意味
RobinOSの規則は短い。一度intentをauthorizeし、その境界内でautomateし、境界が変わる時だけescalateする。Astraはこの規則を置き換えず、価値を高める。
goal、permission、payment、sending、deletion、recoveryはmodel外に置く。UNKNOWN、HOLD、BLOCKEDを明示的に保ち、欠けた証拠を成功やzeroへ変えない。Occamで必要最小のmechanismを作り、Murphyでそのfailure pathを試す。
OpenAIのPath to AstraとPreparedness Frameworkはmodel-levelの能力評価とsafeguardを示す。deploy ownerには別の仕事がある。モデルをlocal authorityへ接続し、両者を混同しないことだ。この仕事は知能が行動できる条件そのものを定めるため、model intelligenceへ委ねられない。
永続する原則はmodel名より強い。能力は検討を得る。検証済み成果はroutingを得る。権限は常に外部から与えられる。
カテゴリとキーワード
カテゴリ: 人工知能、Agentシステム、ガバナンス
キーワード: 能力は権限ではない、GPT-6 Astra導入、AI Agent権限、思考連鎖monitoring、AI最小権限、model routing、検証済み成果、Agent control plane、Murphy test、shadow evaluation
Hashtags: #ArtificialIntelligence #AIAgents #AgentGovernance #AISafety #RobinOS