https://www.youtube.com/watch?v=9Znt4dMAB7U

ゲーム画面をキャプチャーして画像データをAIを介して文字媒体に変換、chatGPTにルールを教えて画面に対して適切にボタンを入力させて行動させる
この方法で最後までゲームクリアしたらしい
つまりchatGPTはNPCの行動を生成して完全制御や、ドローンをAI制御で完全自律兵器にしたりできる