数据要素产业
十一年苦心钻研,七鑫易维眼球追踪专利数全球领先
想要在虚拟世界获得逼真的视觉体验,需要保证图像的真实,需要利用图形性能强大的显卡实现图像渲染。但不是每一个用户都有着顶级显卡。为了降低对显卡性能的需求,推出了注视点渲染技术:通过对人眼注视点进行图像渲染,对其他区域选择性“忽视”,满足用户对真实图像的需求,获得逼真的视觉体验。这项技术推动着虚拟现实行业的发展。
但注视点渲染技术的核心,是追踪眼球注视点,而这涉及到眼球追踪技术。随着虚拟现实行业的发展与兴起,专注于眼球追踪技术的七鑫易维多次出现在从业者的面前。其合作的企业,包括HTC VIVE、小派、爱奇艺等等。这难免给人造成一种错觉,是否眼球追踪技术只能运用于虚拟现实领域?答案显而易见。七鑫易维在多年的发展中,不断向医疗领域进行着深耕。他们是如何做的?眼球追踪技术在医疗领域可以做些什么?抱着这些疑问,动脉网访谈了七鑫易维创始人黄通兵。
如今大火的眼球追踪,七鑫易维已钻研十一年
随着谷歌、苹果等巨头布局虚拟现实行业,不断对有着眼球追踪技术的企业进行收购。这项技术受到越来越多的关注。但它并非近年才出现的技术。七鑫易维更是在该领域已经钻研了11年之久。
七鑫易维创始人黄通兵,如今正在清华大学EMBA在读,他毕业于沈阳航空航天大学飞行器制造专业,毕业后主要从事飞行器协同设计平台的打造,曾参与C919大飞机等多个国家项目。但在从业三年后,抱着对眼球追踪技术的热诚,他希望在军用、民用领域进一步推广该技术,于是选择了创业。在2009年,其创办了七鑫易维。
黄通兵告诉动脉网,在战斗机等飞行人员的头盔中会应用眼球追踪技术。诸如美国F22等战斗机中,允许飞行员通过眼睛锁定目标。对技术的钻研,使得黄通兵早在创业前,在2008年就申请了“基于机器视觉的输入系统及方法”发明专利。
在2012年引进融资时,其结识了目前身为七鑫易维联合创始人的彭凡。彭凡擅长计算机图像处理,两人当时均希望拓展眼球追踪技术的应用。七鑫易维在发展中不断拓展着团队,目前团队数量70余人,研发人员占据2/3。
目前,七鑫易维的团队成员研究范围涉及核心算法研究、人工智能模型训练、数据采集标注、硬件电路结构、外观设计等各领域。七鑫易维深圳的工厂允许其进行规模化产品生产和测试,并进行上层软件应用的开发。
在十余年中,七鑫易维不断累积着专利,构建起自己的专利壁垒。截止到2020年第二季度,七鑫易维有着407项专利,其中发明专利289项。其眼球追踪技术同族专利数(94项)全球领先。高通因看好其在行业的发展,连续三年对七鑫易维进行了投资。
黄通兵表示,“眼球追踪技术虽然很酷,但是很少出现具备落地到产品层面的公司。”七鑫易维不断实现着产品落地,推出各种设备及其模组。目前七鑫易维的产品横跨安卓、Windows等平台,涉及虚拟现实、增强现实头显设备、手机、平板等。七鑫易维也针对高通骁龙835、845平台进行了优化,使得以手机为载体的虚拟现实应用有着较低延迟。
七鑫易维眼球追踪技术的采样率,高达380帧/s。针对人眼的独特性,七鑫易维从多个数据维度对人眼进行解读,收集来自瞳孔、眼皮、虹膜等大量特征数据。黄通兵也表示,人眼具备复杂性。比如,针对佩戴眼镜的用户、进行过眼部手术的用户,需要进行一些特别的数据处理。而这也是七鑫易维的攻坚方向。
从眼动沟通辅具入手,打造多样化设备
“在2009年,大家对眼球追踪技术并不熟悉。像谷歌眼镜这样的(逐步采纳眼求追踪技术的)穿戴式设备,实际上是在晚些时间才开始出现的。”在刚开始成立公司的时候,黄通兵便表示,“我们把精力集中在刚需人群上。在偏向医疗的领域中,打造了眼动沟通辅具。”
随着谷歌等大厂推出虚拟现实设备,七鑫易维也开始布局虚拟现实领域。此后,凭借技术积淀,七鑫易维也在眼球追踪领域推出了基于人工智能的眼动分析数据产品。目前,七鑫易维的产品,主要涉及眼动沟通辅具、虚拟现实产品、眼动分析数据产品等。
1眼动沟通辅具
眼动沟通辅具,主要涉及眼控平板电脑一体机、头控仪、单/双目眼控仪及配合头控仪、眼控仪的配件。这些设备均由七鑫易维自主生产。眼动沟通辅具的售价从千元到数十万不等。用户可以通过眼动沟通辅具实现文字输入(并可切换为语音)表达自我,甚至进行上网聊天。一名用户,患病前热衷于炒股,在患病后依靠七鑫易维眼动沟通辅具炒股维持着一家的生计。
眼动沟通辅具操作界面
七鑫易维的眼动沟通辅具主要针对渐冻人、高位截瘫、脑瘫患者等,也进行着一些突破。此前,七鑫易维曾与宣武医院完成北京市科委项目,进行脑卒中患者对眼动仪的使用操作研究。目前,七鑫易维在向失能的、行动不便的老人,提供简化的眼动沟通辅具,帮助老人运用技术进行交流或者查阅新闻信息等。
2虚拟现实产品
这里的虚拟现实产品并非单指应用了眼球追踪技术的头显设备,而是指用于医疗领域的相关设备。比如,七鑫易维目前在眼科方面进行的临床研究,针对弱势和斜视,进行诊断以及后期辅助治疗,就是通过VR穿戴式设备与眼球追踪技术结合实现的。
七鑫易维也在展开一些实验。比如检测眼睛瞳孔大小变化,提升配镜过程中的舒适度,相关研究已经发表了论文。这都是建立在采用七鑫易维眼球追踪技术,在与普通眼镜相差无几的设备上进行的。
3眼动分析数据产品
眼动分析的数据产品是基于过往眼动数据的大数据分析实现的。通过眼动数据分析,可以获取用户的心理行为变化。七鑫易维正将其与临床医疗相结合,针对成人、儿童的心理行为认知进行研究。未来,七鑫易维将更多地切入多动症以及自闭症的早期诊断。
目前七鑫易维正在与平安、西班牙初创企业 Braingaze进行多动症疾病(ADHD)的合作,希望能够提供便捷、准确的诊断解决方案。该项目正在和知名大学研究团队接洽中。未来,西班牙团队将会通过采用七鑫易维的眼球追踪技术,在对中国特殊病症候群的治疗中推广此方案系统。
西班牙团队创作的应用用于ADHD的诊断和治疗
布局全球市场,拓展非接触医疗应用
七鑫易维试图成为国际化的公司。其不止瞄准国内市场,更看重在国际市场的表现。七鑫易维的产品,主要出口俄罗斯、欧洲、美国、澳大利亚、日本等。面向日本,其推出了独具特色的老年沟通辅具产品。
黄通兵表示,七鑫易维可提供差异化的解决方案,不单可提供成品设备,也可提供芯片级层面的眼球追踪技术。这允许厂商根据自己的需求进行选择。相对于被苹果收购的眼球追踪技术公司Tobii,七鑫易维认为自己的技术平台更为开放。与国外厂商相比,七鑫易维在国内项目落地上有着地理优势,能够更快地响应。
目前七鑫易维正计划B+轮融资。该轮融资计划用于实现产品生产落地。在未来,七鑫易维计划致力于自闭症、多动症等项目研究。七鑫易维相信其技术可帮助患者及时诊断,把以往凭借经验、感觉的医疗方式,变为通过仪器精准测量诊断,帮助医生辅助诊断及治疗。
黄通兵认为,眼球追踪技术属于人机交互的领域,该技术运用于医疗领域可以解决诸多问题。比如,面对新冠肺炎等传染性疾病,允许实现医疗设备的非接触。医生只需要通过眼球追踪技术,便可无接触操作设备,减少感染的机会。而这也将是七鑫易维的下一个探索方向。