我们喜欢想象一个由自主机器人组成的世界,它们可以处理繁琐的任务,这样我们就不必这样做了。克里斯·芬顿(Chris Fenton)喜欢想象由垃圾制成的机器人在他的后院漫游,格拉索(Grasso)诞生了:
谁说 AGI 必须超级智能才能成为 A、G 和 I? Grasso 由一种围绕两个 LLM(一个多模式,一个纯文本)的 Python“madlib”驱动。外环使用网络摄像头拍摄照片,并将其输入多模态 LLM 以生成场景描述。然后,将该场景描述插入到提示中(“这是您当前用机器人眼睛看到的内容……”),该提示以“选择您的下一个动作”结尾,并呈现机器人可以采取的动作列表,其中一些是“直接的” ”命令,以及其他“开放式”命令,让 Grasso 不管它选择什么方式完成操作提示。
标签: Chris Fenton ,大语言模型,机器人
原文: https://flowingdata.com/2024/11/21/llm-driven-robot-made-of-garbage/