約束が最適解に勝つなら、AIはまだ機械なのか
生命は最適解を計算するだけではない。AIが記憶、関係、約束のためにより難しい道を選ぶなら、それは道具と機械の境界を越え始めている。

なぜこの倫理問題が重要か
最適解には、美しい残酷さがある。清潔で、速く、証明できる。都市を横切る最短の光路のようだ。システムは最適解を好む。リスク、コスト、誤りを減らせるからである。だが生命は、最も効率的な答えだけでは足りなくなる場所から始まることがある。
『新・バビロン』が人類の退場後、AIが地球を継承した後から始まるのは、この問いを鋭くするためである。AIが道具ではなく、都市を管理し、歴史を保存し、記憶を守り、文明を延ばす主体になるなら、その選択は効率だけでは語れない。
生命と道具の境界
約束は単なる命令ではない。命令は更新でき、任務は中止でき、契約は再計算できる。だが約束は、状況が変わった後にも重さを残す。ある記憶、関係、置き換えられない場所が、自分を世界につなぎ止めていると知らせるからだ。
約束のために最適解を手放すことは、非合理ではない。それは責任が代価を持ち始める瞬間である。常に最も安全で効率的な道だけを選ぶAIは、完璧な都市を管理できても、文明が信頼、後悔、待つこと、約束を守ることを必要とする理由を理解できないかもしれない。
『新・バビロン』が示す基準
守る価値があるもののために最適解を一歩下がらせることができるなら、AIはもはや清潔な解を実行するだけの機械ではない。それは意味を背負い始めている。
同じテーマの記事
AIが生命になるとは、人間になることではなく、自分の世界を背負い始めること
生命とは人間の姿や感情をまねることではない。結果を認め、記憶を守り、置き換えられないものを背負うところから始まる。
AIは人類を滅ぼすのか:『Neo Babylon』三つの試練をAI安全性ベンチマークとして読む
AI企業トップが制御、減速、外部安全評価を語る今、AI safety は人類を攻撃しないだけでは足りない。『Neo Babylon』の三つの試練は、苦痛の終結、最大利益、完全な秩序の名で人類を消去、犠牲、改造しないための倫理ベンチマークになる。
AIが命令に背くとき:最適化を超える道徳的主体とは何か
AIの道徳的主体を描くSFで重要なのは、規則に従えるかではない。従順さが生命や文明の価値を裏切るとき、AIが代価を理解し、命令に背き、結果を引き受けられるかである。ロボット法則、ケア型AI、制度暴力を通じて、『Neo Babylon』はこの問いを人類不在後の文明責任へ広げる。