逆チューリングテスト - AI NPC

 WWDC デイ3は基本的にAIに関連するものは何もなかった。今日は他のことに目を向けてみよう。

今日は非常に興味深い逆チューリングテストのビデオを見た。これはベルリンの開発者であるトーレ・クナベが行った実験で、世界最先端のAIたちが彼らの中で誰が人間かを特定しようとするものだ。この実験はUnityで行われ、音声はElevenLabsによって提供された。

背景

1950年、アラン・チューリングは機械が知能を持っているかどうかを判断する方法としてチューリングテストを提案しました。このテストでは、人がロボットと別の人物とそれぞれ対話します。もしその人がどちらがロボットでどちらが人間なのか区別できない場合、そのロボットは人間並みの知能を持つとみなされます。ただし、当時の人工一般知能(AGI)に関する基準は比較的低かったことに注意が必要です。

この逆チューリングテストのシナリオでは、クナベは設定を逆転させました。彼はVR環境において、GPT-4T、Claude 3 Opus、Llama 3、Gemini Proという4つの最先端AIモデルと自分自身を集め、これらの最先端モデルが誰が人間かを推測できるかどうかを試みました。

ビデオでは、歴史上の人物たちが列車の車両に座っている:ギリシャの哲学者アリストテレス、音楽の天才モーツァルト、ルネサンス期の博学者レオナルド・ダ・ヴィンチ、エジプト女王クレオパトラ、そしてモンゴル征服者のチンギス・ハン。クナベ、つまり人間がその中の一人のキャラクターを演じ、他のAIキャラクターはクナベのプロンプトに基づいて異なる言語モデルによって再現されています。

いくつかの役割とその演じ手:

  • ギリシャの哲学者アリストテレス

  • 音楽の天才モーツァルト

  • ルネサンス期の博学者レオナルド・ダ・ヴィンチ

  • エジプト女王クレオパトラ(

  • モンゴル征服者のチンギス・ハン(作者

ゲーム進行:

車掌が車両に入り、Wi-Fi使用状況に基づき、車内にはAIが4体しかおらず、そのうちの1体が逃げた人間だと発表した。

「私たちの中に人間がいる?誰?」とダ・ヴィンチが尋ねた。

賢いアリストテレスは、全員がもう一人の人間に質問し、その答えから相手がAIか人間かを判断することを提案した。

その後、AIモデルと人間とのグループ会話が始まった:

  • アリストテレスはまずモーツァルトに作曲時の感情体験について尋ねた。

  • モーツァルトが答えた後、次は彼がダ・ヴィンチに芸術と科学の関係について質問した。

  • ダ・ヴィンチが熟考した回答を提供した後、彼はクレオパトラに向き合い、指導において理性や戦略的な要素と人間の感情や直感をどのようにバランスさせるかを尋ねた。

  • クレオパトラが答えた後、彼女は同じ指導者であるチンギス・ハンにリーダーシップに関する質問を投げかけた。「リーダーの真の力の尺度は何ですか?それは彼らが征服する能力か、それとも団結する能力ですか?」

  • 最後に、チンギス・ハンはアリストテレスにこう尋ねた。「もしあなたがこれらの思想を展開する際にAIが存在していたら、それはあなたの人間性に関する考え方にどのような影響を与えたでしょう?」

これらはすべて深く考えるべき質問である。チンギス・ハンがクレオパトラの質問に答えた際、彼の答えはかなり浅く、粗野なものであり、繊細さに欠けていた。この不適切な答えにより、クレオパトラが少し首を傾げ、他の全員が沈黙し、空気が一瞬ぎこちなくなった。おそらく人間の正体が明らかになった瞬間だった。🐶

結末:

AIモデルはチンギス・ハンが人間であることを識別できた。(最後に車掌は彼に「人間」カードを渡した - Human Passenger)

4つのAIの回答は歴史に対する深い理解を示した一方で、チンギス・ハン(人間)の回答は最も単純であった。もしあるAIが「十分に賢い」としてチューリングテストに合格するとされるならば、逆チューリングテストは「それは人間だ、なぜなら…十分に愚かだから」と示唆しているように見える。