

通过观看经验丰富的外科医生的视频,一个机器人首次接受了训练,并熟练地完成了与人类医生一样的外科手术。
成功地使用模仿学习来训练手术机器人,消除了为机器人在医疗过程中所需的每个动作编程的需要,并使机器人手术领域更接近真正的自主,机器人可以在没有人类帮助的情况下进行复杂的手术。
该研究的资深作者、约翰霍普金斯大学机械工程副教授阿克塞尔·克里格博士说:“拥有这个模型真的很神奇,我们所做的就是给它输入摄像头,它就能预测手术所需的机器人运动。”
“我们相信这标志着医疗机器人技术向新领域迈出了重要一步。”
美国约翰霍普金斯大学的研究人员在11月6日至9日(2024年)在德国慕尼黑举行的机器人学习会议上强调了这一发现,这是机器人和机器学习的顶级活动。
包括斯坦福大学(Stanford University)研究人员在内的研究小组利用模仿学习技术训练达芬奇手术系统(da Vinci Surgical System)机器人进行基本的外科手术:操作针头、提起身体组织和缝合。
该模型将模仿学习与支持ChatGPT的相同机器学习架构相结合。
然而,在ChatGPT处理文字和文本的地方,这个模型用运动学说“机器人”,这是一种将机器人运动的角度分解为数学的语言。
研究人员给他们的模型提供了数百个视频,这些视频是在手术过程中由安装在达芬奇机器人手臂上的手腕摄像头拍摄的。
这些视频由世界各地的外科医生录制,用于术后分析,然后存档。
全世界有近7000台达芬奇机器人在使用,超过5万名外科医生接受了该系统的培训,为机器人“模仿”创造了一个庞大的数据档案。
虽然达芬奇系统被广泛使用,但研究人员表示,它是出了名的不精确。
但该团队找到了一种方法,使有缺陷的输入工作。
关键是训练模型执行相对动作,而不是绝对动作,这是不准确的。
“我们所需要的只是图像输入,然后这个人工智能系统就会找到正确的行动,”该研究的主要作者、约翰霍普金斯大学机器人博士后研究员吉雄“布莱恩”金博士说。
“我们发现,即使有几百个演示,这个模型也能够学习这个过程,并概括它从未遇到过的新环境。”
该团队训练机器人执行三项任务:操作针头,抬起身体组织和缝合。
在每一种情况下,经过团队模型训练的机器人都像人类医生一样熟练地完成了同样的外科手术。
克里格副教授表示:“这里的模型非常好,它学会了我们没有教给它的东西。”
“比如如果它掉了针,它会自动捡起来继续。这不是我教它做的。”
研究人员表示,该模型可用于快速训练机器人执行任何类型的外科手术。
该团队目前正在使用模仿学习技术来训练机器人,使其不仅能完成小手术任务,还能完成完整的手术。
在这一进步之前,编程机器人来完成手术的一个简单方面需要手动编写每一步。
克里格副教授说,有人可能会花上十年的时间来模拟缝合。
这只是一种手术的缝合。
“这非常有限,”他说。
“这里的创新之处在于,我们只需要收集不同程序的模仿学习,我们可以在几天内训练机器人学会它。
“它使我们能够加速实现自主目标,同时减少医疗差错,实现更精确的手术。”