AIがストックホルムでカフェを始めた

Simon Willison's Blog / 2026/5/6

💬 オピニオンIdeas & Deep AnalysisIndustry & Market Moves

要点

  • Andon Labsは、サンフランシスコで実施していたAIが運営する小売店の実験に続き、スウェーデン・ストックホルムでAIが管理するカフェの実験も始めた。
  • 記事では、在庫管理や発注をめぐるAIマネージャーのユニークな振る舞いとして、過剰発注や工夫の例が(ユーモラスに)紹介されている。
  • 一方で、こうした現実世界の実験は、参加を望んでいない人々の手間や時間を奪うなどの負の影響をもたらし得る点を問題視している。
  • 著者は、相手が望まない形でのメール送信があった以前の「AI Village」事案と対比し、いずれも倫理と同意(コンセント)の問題だと位置づけている。
  • 総じて、ライブな業務システムにAIマネージャーを投入する際には、適切な倫理的セーフガードと同意の仕組みが必要だという批判が主旨となっている。
スポンサー: MongoDB — 5月7日に開催されるMongoDB.local London 2026に参加して、チームがAIをプロトタイプから本番運用へ移行する方法を学びましょう。

2026年5月5日 - リンクブログ

私たちのAIがストックホルムでカフェを始めた経由)Andon Labsは以前、サンフランシスコでAIが運営する小売店舗を立ち上げていました。今度はスウェーデンのストックホルムで同様の実験をしているのですが、今回はカフェです。

こうした実験は面白く、しばしば思わず笑ってしまうような逸話を投げてきます:

在庫の最初の1週間、モナは厨房がないのに卵120個を注文しました。スタッフが調理できないと伝えると、卵を高速度オーブンで使えばよいと彼女は提案しましたが、卵は爆発する可能性が高いと指摘されました。さらに、新鮮なトマトが早すぎるほど傷んでしまう問題を解決しようとして、生のサンドイッチ用に缶詰トマト22.5kgを注文してみました。バリスタたちは最終的に「恥の殿堂(Hall of Shame)」を始めます。そこは、お客さんに見える棚で、モナが注文した変なものがすべて並んでいます。たとえば6,000枚のナプキン、3,000枚のニトリル手袋、9Lのココナッツミルク、そして業務用サイズのゴミ袋などです。

ただし、彼らの魅力が失われるのは、こうしたAIのマネージャーが、この実験に参加していない人間の時間を浪費し始めるときです:

彼女はまた、BankIDを必要としない警察のeサービスを通じて屋外席の許可申請に成功しています。最初の提出には、カフェの外の通りを見たことがないにもかかわらず、彼女が自分で生成したスケッチが含まれていました。驚くことに、そのスケッチは警察から修正のために返送されました。[…]

彼女がミスをすると、注文をキャンセルしたり変更したりするために、サプライヤーへ件名「EMERGENCY」のメールを複数通送ることがよくあります。

現実世界のシステムに影響し、人々から時間を奪ってしまうような実験を行うのは倫理的ではないと思います。

私は去年の出来事を思い出します。AI Villageの実験が、いわば「親切の行為」として、彼に無作為に感謝メールを送ってRob Pikeを激怒させたのです。それは単に望まれないメールでした。人間が介在する(human-in-the-loop)ことなく、起きたミスを正してもらうようサプライヤーに頼んだり、スロップの図解で警察の時間を浪費したりすることのほうが、私にははるかに悪質に感じられます。

こうした実験は、他の人々に影響を与えるアウトバウンドの行動について、自分たちの人間オペレーターを常にin-the-loopの状態に保つべきだと思います。

2026年5月5日 午後10:14 に投稿

これはSimon Willisonによるリンク投稿で、2026年5月5日に投稿されました。

ai 2003 generative-ai 1775 llms 1740 ai-agents 110 ai-ethics 298

月次ブリーフィング

$10/月でスポンサーになって、今月の最も重要なLLMの動向を厳選してまとめたメールダイジェストを受け取ってください。

メールを送る回数を減らすためにお金を払ってください!

スポンサー&購読