NEC首度在台展出穿戴AR眼镜新应用,免碰触就能完成手臂虚拟输入操作

2018-01-23 12:25

导读: NEC首度在台展示他们新开发的一款AR穿戴式眼镜ARmKeypadAir,能利用使用者手臂前方自动显示的虚拟操作界面,来协助完成系统输入操作,甚至不用碰到手就能完成操作,不只可用于医疗业,未来也适用于制造、零售等行业。

NEC解说人员现场也以平板装置来进行示范ARmKeypad Air在医疗场景方面的应用。

穿戴式装置与AR应用结合再进化。NEC今日首度在台湾NEC大会展示他们新开发的一款能结合免持式装置作业的AR穿戴式眼镜ARmKeypad Air,让使用者能操作手臂前方自动显示的虚拟操作界面,来完成系统输入操作,甚至不用碰到手就能完成操作,不只可用于医疗业,未来也适用于制造、零售等行业,这也是NEC继日本后第一次在台湾公开展出。

新款的AR穿戴式眼镜ARmKeypad Air,有别于NEC去年推出的ARmKeypad,在操作上能利用智能眼镜搭配AR技术,将虚拟操作界面自动显示在使用者的手臂上,这次透过结合了NEC动作影像辨识技术,即使手不用碰触到也能够直接操作,而不需要另外搭配智慧手表才能用手触控。

使用者只须将手指从空中指向虚拟选单上想要执行的功能,就能进行各种操作,也因为不需使用双手来进行操作,因此未来任何需要采用手持装置来作业的工作场景都能用,如配送人员货物检查等,也因为操作时不用碰到手,即使是对于作业环境有更高无菌需求的场所也能用,如医院手术房等,医护人员可以透过手臂上的虚拟操作界面,来确认医生给予的医疗指示,或是进行投药前的药品和患者身份确认等。

NEC这次也在NEC台湾日活动现场上展示ARmKeypad Air在医疗方面的场景应用,不过记者现场操作ARmKeypad Air时只能进行简易的功能点选操作,还不支援文字输入,另外现场在操作时偶尔也会遇到操作反应不够灵敏或延迟的情况发生。

NEC现场人员也透露,ARmKeypad Air目前还在初期开发阶段,短期内还不会推出商品上市,目前NEC也正和日本医院大学持续展开合作,将ARmKeypad Air运用在辅助护理人员完成医疗处置前的资讯确认等工作。

NEC在台湾NEC活动展场首次展示ARmKeypad Air在医疗方面的场景应用,NEC解说人员现场也以平板装置来进行示范,在操作流程上,只须将平板的摄影镜头对准黏贴在(假)手臂上的QR码,就能在平板镜头视线前方的手臂上,自动显示一个虚拟操作界面来操作。

在医疗场景上,ARmKeypad Air的虚拟操作界面提供有3种功能,由左至右依序是医生医嘱(如交待医疗处置和后续注意事项)、X光片查阅与护理人员投药前的3点确认(护理人员身份确认、病患身份、药品确认),来辅助护理人员做为病患医疗处置前的资讯确认。

在功能操作上,ARmKeypad Air主要将手臂上的虚拟操作界面以颜色区分成上下2个不同区块,画面下面的“绿色区块”是提供选单的功能,可以选择你要操作的选项,只要手指左右移动就能选择,如回前页、下页、结束等功能操作。当选好你要的功能后,只要在将手指移到上方的“蓝色区块”,做点选动作,就能完成执行操作。

连身份确认也能用虚拟界面来完成操作,只要将护理人员、病人和药品各自对应的条码(Barcode)放置到操作界面中间的一个红框处,就能将资讯透过无线网络回传到系统后方进行身份或药品确认,如果比对不一致就会上虚拟界面上出现打叉叉的警示图案,来提醒医护人员注意。

除了能查看病患资讯外,也能直接在手臂上的虚拟操作界面上来显示病人的X光片的影像资料,并能利用手指上下或左右滑动方式来放大局部画面,来查看。

如果觉得显示画面不够大时,只要用手掌遮住手臂上的QR码就会显示画面放大后的效果,方便使用者观看。

尽管现场基于方便展示是以平板装置来显示AR操作界面,不过现场也提供了ARmKeypad Air的穿戴式眼镜样品,让大家可以来试戴,现场人员也透露,ARmKeypad Air并不采用特定厂商的穿戴式产品,企业可以选择搭配其他支援NEC软件与AR技术的穿戴式装置来使用。

NEC在台展出的ARmKeypad Air现场影片操作示范:

相关文章