想象一下,当你在手机上观看视频时,注意到视频中出现的某个手机,或者某个汽车,你的眼睛也许盯着看了很久,通过摄像头捕捉到的信息,在视频中途的广告时,你也许会看到这些你感兴趣的产品推荐。或者当你再看《动物世界》时,你盯着自己感兴趣的动物看时,就会立刻为你推送一条关于这个动物的百科资料或是趣闻,这一切都正随着眼球追踪技术和 AI 图像识别技术的发展变成现实。
在手机上对每个人面部和眼球进行追踪与分析,能获取到当前上课时的注意力情况,还有学生们的情绪反应,这样既能够及时调整课堂节奏,同时还能更好在线上互动,在今年八月,沪江网 HILL 实验室(Hujiang Intelligent Learning Lab)就带来了名为「堂果」的试验项目,通过手机摄像头捕捉到的学生注意力和情绪信息,老师们将能像传统课堂那样更好控制教学节奏,提升效率,在一个上万人甚至数十万人的线上课堂中,这一方式将对教学方式做出变革。
掀起感官交互变革
眼球追踪在手机上的成熟应用,离不开各项技术的成熟。
目前眼球追踪的实现手法有三种,但相关技术原理差别不大。Face++工程师告诉极客公园,手机前置摄像头可以根据用户眼球和眼球周边的特征变化进行跟踪,对捕捉到的人眼视线方向进行估计,计算并返回双眼眼球中心位置坐标,以及双眼视线方向向量,实现对人眼视线的追踪。包括前面提到的 Google 的方式,都是这种方式。这种方法的优势在于对设备要求不高,劣势在于黑暗当中前置摄像头会受到很大影响从而无法理想工作。