几十元搞定眼球追踪技术，Broken Colors想要绘出你眼神里的秘密

在今年十月份的OC4大会上，Oculus创始人Palmer Luckey在接受群访时，谈到了眼球追踪技术。在他看来，未来的VR头显必将支持眼球追踪技术，但目前面临的问题是无法自动识别佩戴者的两只眼睛，自动帮助用户校准视线。

试想，用户戴上VR头显之前，需要先花几秒钟盯着几个注视点进行眼球校准，而且在体验过程中一旦摘下头显，需要重新校准，不仅麻烦，还将大大降低VR的沉浸感体验效果。

除了无法自动校准，高昂的成本也是挡在眼球追踪技术普及前的“一座大山”。而这个问题，也曾一直困扰着张凯闵。张凯闵是Broken Colors的CEO，曾在卡内基梅隆大学担任研究教授，主攻脑神经和机器学习领域。研究期间，他发现这些问题通过机器学习算法是可以攻克的。

Broken Colors是一个怎样的团队，他们是如何解决这一问题的?带着疑问，87870来到中关村创业大街，和暂从美国回来的张凯闵聊了聊。

眼动追踪技术为何无法普及

今年7月16日，美国市场研究机构Markets and Markets发布了关于眼球追踪市场的分析报告，预计该市场在2023年将达到13.765亿美元的市值，2017年-2023年的年均复合增长率为27.4%。

与此同时，眼球追踪技术一直备受科技大佬和行业资本的追随。2016年10月，谷歌收购了眼球追踪公司Eyefluence;Facebook也几乎在同一时间买下了The EyeTribe;总融资近19亿美金的AR初创公司Magic Leap也在其产品原型中使用了眼球追踪技术;而今年6月份，苹果也将老牌德国企业SMI收入靡下，眼动追踪技术一时被推上资本的风口浪尖。

然而，备受行业看好的眼动追踪技术却一直无法普及。抛却“自动校准”这一技术难题，目前眼球追踪市场的大部分使用者是医疗单位和研究机构，一套眼动追踪技术硬件加软件的价格，动辄数万到数十万美元，普通消费者根本消费不起。

集“眼部、面部、脑电波”为一体的传感器解决方案

“硬件成本太高是主要原因，那我们就自己造。”张凯闵说着，拿出一个VR眼镜盒子和一个形似耳机的脑电波测试仪。

“这是眼球追踪，这是面部识别，这是脑电波测试。之前我们做研究时，需要一个一个分开来测，过程复杂，成本还高，现在我们第一次把这三项测试整合在了一起。”张凯闵告诉我，之前做一次测试，被测者的头部往往要经历一次“五花大绑”，他们便首创了这个可以一次完成多种面部测试的模组。

在张凯闵看来，我们的眼睛、微表情和大脑不会欺骗我们。与之配套，他们还开发了“数据监测后台”。这个软件窗口被划分为三个部分，“热力图”代表眼球追踪，“表情”代表面部识别，“灯泡”代表脑电波状态，能以图闻的形式直观地看到我们在观看影片时的关注点和心理状态。

87君体验了这款产品，戴上头显，在一段MM豆的广告片中，87君的眼睛看向哪里，哪里就以“热力图”的形式出现了色彩聚集。有趣的是，当广告片中MM豆进行搞怪时，屏幕下方的头像由面无表情转向“笑脸”;当剧情发生转折，87君的神经猛地紧绷，屏幕中的“灯泡”也由白变黄到橘黄。

不需校准、几十元搞定眼动追踪技术

我们在体验时发现，戴上头显之前不需要对眼球进行校准，而是戴上的那一刻就实现了自动校准。

在张凯闵看来，无校准追踪技术的技术壁垒有两个：一是要适应同一个用户带的不同位置;二是要适应大多数的使用者。

这是由于，目前大部分眼球追踪技术都仰赖校准来学习用户眼球对于屏幕的对应位置，因此每一次校准都只适用"当前"使用者"当下"的佩戴位置。

而在实际的VR头显使用过程中，当用户左右摇摆头部，或摘下头显重戴时, 会因为不同的佩带位置, 而失去准度。此外，“千人有千眼”，不同的使用者佩戴时, 会因为每个人不同的眼睛大小, 位置和移动方式, 而失去准度。

张凯闵告诉我，团队在实验室研究时惊喜地发现，运用机器学习的概念, 收集多数用户配戴数据来做的数据模型的话，可以通过庞大的数据库，达到无校准追踪。

不必较准，就意味着更容易大规模地普及开，然要要普及，硬件成本又像一座大山般压在了张凯闵眼前。

“目前眼球追踪技术市场的经营模式是高价售卖硬件及软件授权，使用者为硬件买单。但这就容易使得硬件成本完全转嫁到使用者身上，导致依赖硬件来弥补算法的不足。”

在不断地研究中，张凯闵发现，或许之前的道路“走歪了”，眼球追踪不需要依赖高端相机，几十元的相机搭配好的算法反而可以实现更好的追踪效果。

深感眼动追踪是一项真正属于未来的技术，或许是多年来的学术情怀，张凯闵决定一搏。

他毅然从世界上机器学习专业的最高学府——卡内基梅隆大学离开，创办了Broken Colors，而团队的另外两名成员也是来自卡内基梅隆大学，在机器学习、认知科学和神经科学等领域均有数十年的研究经验。今年3月，团队从全球大约1200家VR团队中突围，顺利入驻“HTC VIVE X加速器第二期计划”。

数据变现，眼动追踪的商业思考

要创业，面临的就不再只是做研究这一件单纯的事情了。

“商业环境和学术气氛还是不一样的，过去我们一直在研究如何做好技术，现在也要思考如何让这项技术落地，去变现。”张凯闵表示，最开始他们并不适应这一转变，不过他们决心迈出这一步。

而这次回国，团队便在和悦诚科技的VR电影院探讨这一方案的落地计划。

张凯闵表示，将这一方案引入VR影院可收集用户的观影反馈，了解他们的兴趣点是什么。换句话说，这些反馈就是广告营销中最珍贵的“大数据”。

传统的电影院的经营模式有三：票房、卖品和广告，如何利用创新VR影院的经营模式，在张凯闵看来，“票房”和“广告”是实现突破的入口和出口。

在片源方面，电影院传统的经营模式是支付影片版权费，靠售卖影票拉回收入，没有额外的价值产生。而当电影院采取眼球追踪分析等技术后，可以分析观众观影体验和兴趣点，将这些信息反馈给影片制作者。

对电影院来说，可以凭“数据”换部分“版权费”;对电影创作者来说，可以依据这些数据了解什么内容才是观众喜闻乐见的，进而再创作，实现双赢。

广告收入是影院重要的收入来源，也是影院花心思最多的地方。现在广告营销已不再是传统的“通吃型”投放，而是大数据精准营销，观众注意什么，对什么感兴趣才是吸引广告投放的价值所在。

然而，要想做到大数据收集，必须有足够多的观众佩戴眼球追踪仪。对此，张凯闵表示，“这也就意味着眼动追踪技术必须普及开来，我们现在愿意将技术以低廉的价格卖给院线或者VR/AR 头显厂商, 铺好这个路子。”

正如文章开篇提到，在面对大量眼动追踪公司被收购的命运时，张凯闵坦言，被巨头收购或许是一种不错的命运结局，但每位创业者都有做到上市的“野心”，团队希望能通过生物信号的数字化，来改变人类与技术的交互方式。

张凯闵告诉我们，团队取名为Broken Colors有其寓意所在。Broken Colors是印象派的一种画法，近看是一笔笔的单色调, 远看却融合在一起成为印象。而他们想做的，就是剥开融合眼睛, 表情, 脑电波的层层不同的感知，看到这背后我们真实的想法。