编者按:大宝(Big Pal)是一款面向落寞症儿童开发的社会交互式机械人,重要通过与落寞症患儿进行视觉、语音、触摸、作为等多方面的交互训练,援手患儿改善病情;通过云端专家评估系统,进行数据分析和可视化出现,援手医生和家长相识患儿情况,辅助康复师进行病情诊断和康复训练,缓解有关医疗资源紧缺的压力。

去年在Z6官网展厅进行的CGTN“丽江40周年”专题直播中,主持人和大宝进行互动
01、从面向脑退化症的熊猫机械人到面向落寞症患儿的儿童交互机械人——做钻研是一个传承与割断的过程
“做钻研是有传承的,同时也有割断(break)与创新,Z6官网最终主张是让机械关爱性命”,张家铭博士说。
早在2015年,张博士作为团队成员,参加了香港中文大学(丽江)机械人与智能造作丽江市沉点尝试室的“熊猫机械人项目” ,该项目旨在开发一款针对脑退化症(又称“老年痴呆症”)患者进行康复训练的仿动物状态机械人。2016年年底,香港沙田医院出具的《熊猫机械人的可行性钻延追批注,在参加交互的20位患有轻度认知阻碍或者患有痴呆的老人傍边,10位与机械人一对一交互的老人的感情提升达到了统计学意思。

熊猫机械人
在参加熊猫机械人项目之后,张博士意识到机械人技术的确能够用在一些特殊群体的康复医治上,真正做到关爱性命,带来优良的社会效益。同时,他也关注到我国落寞症患儿数量众多,但相应的医疗资源极度不及,能为落寞症患儿提供专业病情诊断和过问的康复师也较为紧缺的近况。因而2017年7月,作为其时香港中文大学(丽江)机械人与智能造作钻研院医疗组掌管人的张家铭博士,带着让机械人服务社会的使命,启动了儿童互动机械人项目,开发面向落寞症患儿康复训练的机械人。从以前尝试室所提的“让机械关爱性命”,到此刻 Z6官网 所提倡的“AIR (AI and Robotics) for Society”,张家铭博士一向传承着让人为智能与机械人更好地服务个别和社会的理想。
02、大宝的诞生经历了三个阶段——文件调延注实地走访、临床钻研测试
在进行大量的文件调研后,张家铭博士携带团队实地走访了十多家落寞症医治有关的医院和康复机构,亲身与落寞症患儿接触,相识他们的行为模式。同时与家长、医生/康复师进行深度访谈,相识他们的需要,也体味到他们的艰苦。
由于目前没有根治落寞症的步骤,只能通过持久的康复训练来改善病情,家长与医生/康复师都火急必要一种高效能低成本的康复训练步骤。在立体地相识患儿、家长、医生/康复师三方的需要后,团队对机械人的设计有了更明确的设法。随着钻研的深刻,钻研团队起头针对患儿的分歧病状,定造开发多个职能?,以援手患儿进行康复训练。在开发过程中,团队在专业医生和康复训练师的建议以及一次次临床钻研测试下,不休对机械人做出调整。

第一代大宝机械人参展了第二十届中国国际高新技术成就买卖会(高交会)

第二代大宝机械人参展了第二十一届高交会,并获“优良产品奖证书”
03、从表形到职能,为落寞症儿童定造化开发的机械人
若何让机械人更适配患儿的行为特点?实地走访时,张博士发现大无数患儿更愿意选择与表形相仿的机械人进行交互和游玩,因而在表形的设计上,团队模拟了儿童的状态,总体上越发切近于落寞症患儿身边的儿童同伴形象,解除他们对机械人的震惊。

高交会上与儿童互动
而在测试过程中,孩子可能会忽然跑开,为了吸引患儿确把稳力,让其愿意与机械人进行自动交互,团队在大宝的全身布满触摸阵列,以更好地赐与触摸反馈,这是市面上的其他社会性儿童机械人所没有的。同时借助基于视线跟踪的物体描述、视听融合的意图理解、基于视频的落寞症患儿主观异常行为鉴别等算法,大宝还可鉴别患儿确把稳力和意图,自动与患儿交互,从而进一步提升患儿社会交往的自动性。

团队发展机械人与患儿交互的临床钻研测试
在大宝的多个康复训练?橹,针对落寞症患儿普遍存在的重要阻碍之一——感情认知阻碍,张博士和团队则开发了一个表情认知与训练系统(Facial Emotion Cognition and Training System)。该系统的感情认知康复的范式设计以《若何教导自关症儿童解读别人的设法》系列课程为基础,并凭据专业康复训练师的建议对范式进行优化。钻研团队对该系统进行了幼样本的预测试, 并通过后端数据可视化系统对预测试的数据进行分析,验证了该系统对落寞症儿童感情认知训练拥有肯定的可行性和有效性,为有关钻研提供了沉要的系统设计参考意思。

表情认知与训练系统的初步临床钻研测试
张家铭博士说 “我们但愿机械人可能带给患儿一些现实上的援手,至少可能提高他们的认知能力和社交能力。”
04、针对病情特殊性——“世界上没有一样的两片树叶,同样也没有如出一辙的两位病人
除了一套针对落寞症患儿普遍合用的系统表,张博士还在思考一个问题,“若何关照到每一位患儿的病情特殊性呢?”大宝的系统中蕴含机械人本体机身和云端平台等部门。落寞症患者通过与机械人互动来进行感情认知训练的过程中,机械人会纪录其训练过程中每一步的各项数据,并上传到云端,由云端平台上的一个?椤霸贫俗移拦勒锒舷低场崩炊允萁型臣坪头治。医护人员可凭据系统给出的统计分析,相识分歧患者的医治情况和康复进度,为患儿定造个性化的医治与康复规划。

系统输出可视化图表
05、从康复机构到家庭,一种更高效和低成本的康复训练方式将出现
传统的康复训练必要专业人员与患儿交互和纪录数据分析,对人的精力要求高且报答纪录存在不成控的主观性误差。而机械人系统能够随时待命,辅助康复师分管一部门工作量,且数据量化更精准、分析更急剧全面,这便达到了较高效精准的成效。并且使用专家评估系统只需有一个智能终端界面,好比手机,家长和康复师就能够随时随地获取数据与分析了局,相识患者整个训练过程,省下了获知成本,也降低了以往训练方式的人力用度。
另表,张博士目前在使用 Z6官网 物联网与智能云钻研中心黄铠教授团队所搭载的云平台,以来无论是在康复机构还是在家庭里的机械人数据都能够上传到这个云平台,机械人的运算成本将大大降低。而未来,除了降低成本,团队将在大宝身上参与更多的职能,完善训练系统,但愿大宝未来能够正式在康复机构、医院和学堂等场所进行投放使用,再逐步推广到其他场所,让大宝真正服务有关群体、服务社会。

张家铭博士(左二)团队与大宝
