首页>科技研发>Omron Story > AI行李箱,集结五大企业技术,致力于实现共生社会

AI行李箱,集结五大企业技术,致力于实现共生社会


为视障人士的出行与沟通提供支持




根据世界卫生组织(WHO)统计,目前全球存在视觉障碍的人数已上升至约22亿(*1)。为了构建视障人士能够自由生活的社会环境,欧姆龙、ALPS ALPINE、清水建设、IBM日本、三菱汽车等五家来自不同专业领域的企业携手,综合运用最新的AI与机器人技术,共同推进“AI行李箱”项目。本文将向大家介绍各家公司携手合作,整合多项技术,向社会应用的实际投入发起挑战,以期提升视障人士通达性 (*2)的故事。


*1 数据源于World report on vision:https://www.who.int/publications/i/item/world-report-on-vision
*2 通达性:获取信息及服务的方便程度


让视障人士自由出行﹒顺畅沟通

视障人士的数量因事故或老龄化导致的视力下降及青光眼等眼部疾病而逐年增多。据推测,仅在日本国内,就有164万名视障人士,其中18.8万人为全盲视障人士。 (*3)

这些视障人士在日常生活中主要会在以下两种情境下感到不便。一是因视力不佳或失去视力导致无法通过确认地图到达目的地,在道路上行走时无法躲避行人和障碍物,无法实现“自由出行”。二是因无法了解沟通对象的表情等问题导致难以实现“顺畅沟通”。这些都是购物、前往公司或学校及外出旅行等日常生活中不可或缺的要素。

提出凭借技术力量尝试解决这一课题的是14岁失明、自身患有视觉障碍的IBM技术顾问浅川智惠子。浅川是一位积极致力于改善残障人士信息通达性的研究人员。她一贯坚持“研究成果必须要投入实际应用”的工作方针,这次则提出了通过充分运用AI为实现自由出行提供支持的综合解决方案——“AI行李箱”。

浅川表示:“人一旦存在视觉障碍,就无法安心、轻松地单独出行。虽然想要解决这一问题,但将技术实际应用于社会仍要突破很多难关。为此需要企业跨行业融合各自最新的AI与机器人技术。”与浅川有着共同想法的五家企业联合创立了“一般社团法人新一代出行支持技术研发联合体”。为视障人士的出行与沟通提供支持的“AI行李箱”的研发挑战就此开始。

*3 摘自日本眼科医学会研究报告2006-2008《日本视觉障碍的社会性成本》


AI行李箱的构成要素


AI行李箱与欧姆龙DNA的关系

联合体想要研发的AI行李箱旨在为视障人士的独立出行提供帮助,是将可穿戴设备与行李箱型导航机器人相组合的综合解决方案。将通过数据视觉得到的信息与最新的AI和机器人技术结合,相辅相成,除了能够了解周围的情况和有无障碍物之外,还能够识别身边经过的人的面部及表情,并传达给用户,从而为出行和沟通提供支持。通过塑造成行李箱的形态,使得视障人士在日常生活中也能方便携带,在用户身边随机应变,为其提供帮助。

欧姆龙非常认同通过解决社会性课题,运用技术实现创新的项目方针。这一项目无疑也充分体现了欧姆龙自创业初期就一贯秉持的DNA。为此,欧姆龙派出了以技术与知识产权本部研发中心图像感知研究室的山本和夫(Yamamoto Kazuo)为组长的团队,将以往在图像识别领域累积的经验运用到研发工作之中。


研发团队成员(中间:山本和夫)


实现“感知气氛”的顺畅沟通


放置于背包上的小型高速摄像头


欧姆龙负责运用人脸识别技术研发支持与人实现顺畅沟通的功能。具体而言,就是发现自己认识的人,判断能否与之对话的面部识别技术。

首先,设置于用户肩膀上的摄像头能够发现前方5米左右正在向自己靠近的人。该摄像头的图像会使用专为本项目研发的AI实现高度清晰化,对周围人的面部进行实时识别。此外,在他人接近时还会使用AI开展面部识别,判断“对方是不是自己认识的人”,当对方距离用户小于一定范围时,则会使用表情推测功能,通过对方的表情和面部朝向判断“对方是否在微笑”“现在能否跟对方搭话”。最终目标是要形成通过声音、振动通知用户的机制。通过尽可能多地向视障人士提供对方的信息,实现能够“感知气氛”的顺畅沟通。

即便如此,现实中用户经常需要前往室内外等各种场所。随着地点的变化,光照和亮度也会受到影响,可能会难以识别面部和图像。要想在日常生活的各种场景中做到准确感知,还需要面对很多技术性课题。为了解决这些课题,研发成员今后会继续付诸努力。

克服新冠疫情,为打造可持续未来发起挑战

新型冠状病毒的出现为这项“感知气氛的技术”的研发工作提出了新的课题。佩戴口罩和保持社交距离会导致难以对面部和表情进行识别。不过,为了解决这一难题,新技术的研发工作已经开始。

团队负责人山本表达了他们对技术研发的决心。

“作为研究人员,我们要站得高、看得远,领先一步创造新技术,以解决人们遇到的难题。而且,还要让自己研发的技术付诸实际,为社会所用。”

鉴于残障人士需要面对“看不见”“摸不着”等实际困难和需求,电话、键盘等新式沟通工具应运而生。我们在AI行李箱研发中积累的技术经验不仅能够服务于视障人士,还能够为单独出行时需要帮助的人提供辅助。此外,还有助于为沟通提供支持、为人机协同机器人研发等领域提供助益。“AI行李箱”项目经过实证试验后将逐步投入实际应用,致力于打造人们无论有无残障,都能彼此认同、和谐共生的社会。