慕尼黑工业大学(TUM)的AngelaSchoellig教授使用ChatGPT开发编排,让无人机群随着音乐一起表演。附加的安全过滤器可防止空中碰撞。研究人员的研究结果首次证明ChatGPT等大型语言模型(LLM)可以用于机器人技术。
网络界面易于使用:博士生MartinSchuck选择一首音乐曲目并输入请求编排建议的文本。在算法检查建议的飞行路径是否可行之前,可以通过ChatGPT工具中的另一个提示向无人机群发出附加指令。
学习系统和机器人实验室的屏幕现在显示了一个模拟机场,六架无人机随着音乐盘旋飞行。如果慕尼黑工业大学学习系统安全、性能和可靠性的科学家喜欢这个编排,他就会登录。不久之后,六架手掌大小的无人机从机器人实验室的地板上起飞。
三个飞行机器人的编排在五分钟内完成
在AngelaSchoellig教授的实验室里,研究团队在一个约40平方米、高3米的房间里安装了6个吸顶式摄像头。地板上用绝缘胶带标记了十字。这些指示无人机的起始位置。一旦计算机验证了可能的编排,他们就可以起飞。
摄像机每秒检测200次四轴飞行器的位置,四轴飞行器配备四个螺旋桨和电机。系统将它们与所需位置进行比较。研究团队使用多达九架无人机实现了学习系统和机器人实验室的“航展”,目前是100%安全的。如果没有特殊的安全过滤器,只有四分之一的演示不会发生事故。
AngelaSchoellig教授将ChatGPT与安全过滤器结合起来用于“飞行机器人之舞”。“ChatGPT人工智能工具主要是为了生成文本而创建的,但它也可以建议编排,”教授说。“然而,它最初对无人机的特性和飞行路径的物理限制一无所知。所以很明显,ChatGPT犯了错误。”
附加的安全算法通过精确地为所提议的编排绘制飞行路径来弥补这一差距,从而完全避免空中碰撞。无人机甚至可以对角地相互接近。Schoellig教授将ChatGPT和旨在使用多个飞行机器人的安全过滤器的总体概念称为“SwarmGPT”。该工具在空中生成过程,同时充当机器人和人类之间的接口,不需要任何专业知识。
ChatGPT的巨大飞跃
大约15年前,当AngelaSchoellig开始无人机研究时,编舞都是手工制作的。我们花了三年多的时间为六架无人机开发前六种编排并让它们启动并运行。“ChatGPT带来了质的飞跃,”Schoellig教授说道。
在过去的三个月里,研究人员对多达9架无人机进行了30多种编排实验。如今,研究人员只需要大约5分钟就可以用三架无人机为30秒的音乐剪辑开发安全的编排。添加的无人机越多,ChatGPT计算所需的时间就越多,提出编排建议所需的时间也就越长。但舍利格确信:“这个概念是可扩展的。”
机器人技术:ChatGPT成为非专家的界面
其他机器人可以通过ChatGPT使用类似的界面吗?对于使用语音控制拾取物体、铺设电缆或开门的机器人来说,这些动作的成功率目前仅为63%、56%和80%。到目前为止,在其他机器人场景中的应用还有些不可靠。
对于AngelaSchoellig教授来说,这是一种激励:“我认为我们的方法在其他情况下也会不断变得更好。”很快就可以通过语音命令对吸力机器人和工业机器人进行重新编程,而无需专业知识或编程技能。