只需LED无需摄像头,NVIDIA公布轻量级VR眼球追踪方案

只需LED无需摄像头,NVIDIA公布轻量级VR眼球追踪方案hi188|编辑虽然眼球追踪方案在VR中拥有极高的优势,除了直观的眼神交互具备自然和快速等特性外,眼球追踪还可用于改善图型渲染能力,降低对显卡的依赖等,好处多多。眼球追踪对于VR功能的相关阅读:《微软新XR研究成果(二):除了注视点渲染,眼球追踪还能做什么》。但即便到现在,眼球追踪并没有成为VR中的主流技术,当然也受到成本和设备体积等众多因素影响。只需LED无需摄像头,NVIDIA公布轻量级VR眼球追踪方案据青亭网了解,为了进一步降低VR眼球追踪模组的成本,让这项技术变得更加普及,NVIDIA作为计算机图形显卡制造商,其也在参与多项VR项目,例如此前的VRS、和VRSS。关于眼球追踪技术,NVIDIA提到:现阶段眼球追踪技术存在很大的挑战:
  1. 传统眼球追踪技术依赖于成像技术,这对设备功耗要求很高,不适用于VR一体机等移动平台;

  2. 成像设备往往需要复杂的软件体系,这也会额外增加GPU压力;

  3. 传统眼球追踪使用高分辨率图像,会在捕捉、通讯传输、和图像处理等方面存在延迟。


NVIDIA研发小组公布了一套眼球追踪模组的论文,其特点是降低硬件和软件复杂性,从而实现低成本、低功耗(同时带来发热量更低)、计算量低的优势。和其它基于摄像头的方案不同,NVIDIA眼球追踪方案采用一圈红外LED用于向眼镜投射光线,无需摄像头捕捉,而是通过LED光线感知能力实现。据悉,这套方案的核心就是LED。我们平时可能会认为LED是一种发光设备,但LED实际上具有双向性,即:即可发光,也可感光。采用LED的优势就是,成本低廉、且可选颜色种类很多,而且无需定制电路模组就能进行控制只需LED无需摄像头,NVIDIA公布轻量级VR眼球追踪方案原理方面,其通过将高刷新率的红外光线从不同角度投射到用户眼睛,同时用感光LED从多个角度检测眼睛反射红外光的强度,结合其自适应监督模型,从而计算出人眼在VR显示图像中注视的区域。据悉,这也是首个采用LED作为感光系统的眼球追踪方案。根据论文描述:这套方案是目前体积最小,成本最低的眼球追踪方案。论文中公布了两套原型方案。整套系统包括1台智能手机、2个微控制器和少量LED灯组,运行时智能手机屏幕上可实时显示VR佩戴者眼球注视的区域。细节方面,第一套原型机单眼追踪模组共有9个LED灯组,其中3个红外LED、6个LED感光模组;第二套原型机单眼共有6个LED,这6个LED均可作为光源,也均支持感光。这也是利用了LED的双向特性,可以同时发光和感光只需LED无需摄像头,NVIDIA公布轻量级VR眼球追踪方案目前处于原型阶段,技术商用还有一段距离。目前,NVIDIA表示该方案LED中测量误差为0.7度,平均误差1.1度;而目前主流的基于摄像头的方案平均误差0.5度,精度较高,因此存在一些差距。关于其它局限和不足,NVIDIA表示:由于LED感光性相对没有那么精准,因此暂时不适合对于经确定要求较高的VR应用,例如:阅读研究、神经和心理研究等场景;同时和基于摄像头的方案相比,这套LED方案需要更多前期校准工作,初始适配阶段较长;在用户快速移动中如果头显和眼睛位置发生相对位移,也会导致一定误差。综合来看,NVIDIA这套LED眼球追踪方面就是面向移动VR设备而来,其特点很明确,低功耗、低发热量、低运算量,这也给未来VR一体机中搭载眼球追踪技术提供了极大的可能性。尤其是不少人期待的下一代Oculus Quest,在功能性方面下一代VR一体机势必会将VR体验提升到一个新的层级。参考:https://arxiv.org/pdf/2003.08499.pdf

(END)


推荐阅读


只需LED无需摄像头,NVIDIA公布轻量级VR眼球追踪方案


只需LED无需摄像头,NVIDIA公布轻量级VR眼球追踪方案


只需LED无需摄像头,NVIDIA公布轻量级VR眼球追踪方案


只需LED无需摄像头,NVIDIA公布轻量级VR眼球追踪方案


只需LED无需摄像头,NVIDIA公布轻量级VR眼球追踪方案

只需LED无需摄像头,NVIDIA公布轻量级VR眼球追踪方案每天五分钟,轻松了解前沿科技。
——青亭网
只需LED无需摄像头,NVIDIA公布轻量级VR眼球追踪方案
上一篇:这一次,华为必须要做“搅局者”
下一篇:

相关推荐

AOC商用丨为浙江大学玉泉校区提供全屏视讯解决方案!

AOC商用丨为浙江大学玉泉校区提供全屏视讯解决方案!

1539 AOC未来视界

百年大计,教育为本。高校素来肩负着为国家输送优秀人才的重任,如何在现有的教育体制下提升高校教育质量,强化师生的教育体验是高校人士关注的重点。基于浙江大学玉泉校区对强化校区教育建设、提升高校教育设备水平、打造良好教育氛围的核心诉求,专业显示设备提供商及品牌商AOC为此提供全屏视讯解决方案,为广大师生带来良好的视讯体验。方案概述该全屏视讯解决方案以“智能会议平板

新加坡推出新型追踪应用程序  以缓解冠状病毒传播

新加坡推出新型追踪应用程序 以缓解冠状病毒传播

294 E安全

更多全球网络安全资讯尽在E安全官网www.easyaq.comE安全3月24日讯,近日据外媒报道,新加坡开发了一个新的移动应用程序,该应用程序可以在用户感染冠状病毒后进行联系人追踪。据悉,该应用程序名为TraceTogether,可利用Bluetooth信号来检测附近的其他移动设备,从而识别出那些和目标感染者有过密切联系的人员。对此,新加坡政府IT部门表示,

消息人士称东京奥组委开始考虑奥运会延期方案

1796 新华网

  新华社东京3月22日电据路透社22日报道,两位接近东京奥组委的消息人士透露,东京奥组委已经开始草拟东京奥运会延期举行的替代方案,然而日本政府目前的立场仍是奥运会不会推迟。  其中一位据称参与了起草替代方案的消息人士透露,东京奥组委正在制定B、C、D计划,这些计划包括不同的延期时间表,以及相应的成本估算,并称东京奥组委将在3月底讨论这些选择,讨论内容包括缩

工信部印发中小企业数字化赋能专项行动方案 加大对中小企业数字化扶持力度

工信部印发中小企业数字化赋能专项行动方案 加大对中小企业数字化扶持力度

1503 清科研究

来源:工信部为深入贯彻习近平总书记关于统筹推进新冠肺炎疫情防控和经济社会发展工作的重要指示精神,工业和信息化部实施《中小企业数字化赋能专项行动方案》(下称《专项行动》),以数字化赋能中小企业,助力疫情防控、复工复产和可持续发展。《专项行动》明确了行动目标、13项重点任务和4项推进措施。强调着力运用信息技术加强疫情防控,促进企业尽快恢复生产运营;加快发展在线办

狗狗半年内从14公斤瘦到6.3公斤,而治疗方案只要:一把椅子!

狗狗半年内从14公斤瘦到6.3公斤,而治疗方案只要:一把椅子!

844 大爱萌狗控

爱狗人士关注大爱萌狗控只需回复:汪。内容更精彩!让您开心每一天Coco是一只可爱的小黄狗,是七年前铲屎官在海边捡到了,当时它才一个多月大...在铲屎官的精心照顾下,Coco长成了一个体态匀称,乖巧又可爱的小公主。然而,从半年前开始,Coco只要一吃东西就会吐,为此铲屎官每次回家,都要先花一个半小时,清理Coco的呕吐物,因为睡在一起,床单也每天都要换洗...

美媒:特朗普政府正与脸书、谷歌讨论使用用户定位数据追踪病毒传播

370 环球网

【环球网报道记者王博雅琪】新冠肺炎疫情在美国蔓延之际,美国有线电视新闻网(CNN)18日报道称,特朗普政府正与包括脸书(Facebook)和谷歌在内的科技企业讨论,如何利用美国人的手机定位数据来追踪新冠病毒的传播轨迹。不过,这样的消息传出后引发了外界对于感染者信息泄露引发严重后果以及用户个人详细信息被泄露等担忧。CNN说,在《华盛顿邮报》17日首次报道此事后

工信部印发《中小企业数字化赋能专项行动方案》

1077 上海证券报

  上证报中国证券网讯据工信部网站3月19日消息,工业和信息化部办公厅近日印发《中小企业数字化赋能专项行动方案》,方案目标为,坚持统筹推进新冠肺炎疫情防控和经济社会发展,以新一代信息技术与应用为支撑,以提升中小企业应对危机能力、夯实可持续发展基础为目标,集聚一批面向中小企业的数字化服务商,培育推广一批符合中小企业需求的数字化平台、系统解决方案、产品和服务,助

北大培文小学建设工程设计方案公示通过,预计7月开工建设!

北大培文小学建设工程设计方案公示通过,预计7月开工建设!

1247 厦门日报

古有“孟母三迁”,今有“择校而居”,今日厦门西关注度较高的名校——北大培文小学部又传来利好!据漳州台商投资区自然资源局公布,拟对培文小学建设工程设计方案进一步优化,今日公示通过,预计7月开工建设!与北大培文学校近在咫尺的红树湾院子,让孩子在家门口就读知名学校,不再是奢望。本次公示显示北大培文小学部总用地面积27372.08㎡,规划36个班,容纳约1620人!

我们试玩了《生化危机3:重制版》 全面进化的浣熊市
游戏

我们试玩了《生化危机3:重制版》 全面进化的浣熊市

599 游民星空

点击上方“游民星空”关注我们  感谢CAPCOM的邀请,让我们得以在上个月前往CAPCOM本部提前试玩了《生化危机3:重制版》的部分内容。尽管受时间限制我们只体验了完整游戏中的部分内容,但依然能够从中窥得这款游戏的只鳞片爪。  在实际游玩之后,我可以毫不犹豫的说,它与去年的《生化危机2:重制版》一样,足以被视为当下时间点“重制版”游戏的标杆。  单纯从视觉效

美少女救世!这款steam游戏送21万枚激活码号召大家宅起来......
游戏

美少女救世!这款steam游戏送21万枚激活码号召大家宅起来......

1114 手谈姬

疫情肆虐之下,普通人能做的最大贡献莫过于听从钟南山院士“少出门”的劝告,响应国家的号召安心做一个阿宅。为了不让诸多玩家闲出问题来,不少游戏厂商贴心地准备了一系列活动,势必要让大家安心地呆在家里。各大知名厂商使出了浑身解数,扩容服务器、延长春节活动时间、发放福利,既安抚了玩家情绪又赚足了口碑,可以说是双赢。而在大厂纷纷出手之际,Steam上知名的(好像也不算知

跟什么样的男人在一起,女人越变越美?
私房话

跟什么样的男人在一起,女人越变越美?

300 睡前好读物

婚姻决定女人的一生,选择一个好男人,至关重要,有了好男人的滋润,自然心情愉悦,让你容光焕发;选择了坏男人,心生操劳,难免面容憔悴。所以,女人美不美,男人要负一半责任!好男人的标准是什么?以下3种男人,能让女人越变越美丽的!有担当的男人令女人美丽。女人需要的,是一个家,一个温暖的港湾。对于男人,你可以穷,但不能没有担当。所谓的担当,不仅仅是指责任和养家,也是不

震惊!为了恰饭,B社真是可爱呢!蒸汽动力改用新名称!新域名!大富翁10​将于明日发售!PUBG最热门TOP1|10月游戏审批名单
游戏

震惊!为了恰饭,B社真是可爱呢!蒸汽动力改用新名称!新域名!大富翁10​将于明日发售!PUBG最热门TOP1|10月游戏审批名单

1008 Steam社区

今天的新闻大多与恰饭有关~为了恰饭,B社真是...不过我喜欢月费91元,可建私人世界日前B社宣布将推出一项名为“Fallout1st”的高级会员服务,拥有高级会员可以与好友拥有专属的私人世界,会员服务还包含多项专属道具和以及会员奖励。除公布了高级会员外还新增了这些可购买的皮肤和中国动力甲。“美帝必败”四个大字特别醒目...微软游戏部门副总裁跳槽暴雪!刚刚离任

婚姻里,妻子最不需要的是勤快
私房话

婚姻里,妻子最不需要的是勤快

1707 走过笔尖的句子

☝点击"走过笔尖的句子"更精彩知乎上有一个提问,我离婚了,后来老公再娶媳妇,我发现从前什么都不做的他,现在竟然变身家里的大厨,这叫一物降一物吗?点赞最高的回答是,一定是他的现任不擅长家务,这个铁一样的事实告诉我们,女人你越勤快,老公就越懒惰。你越勤快,越容易吃力不讨好,恐怕婚姻越难幸福。1我身边就有这样血淋淋的例子。琪琪是我们朋友圈典型的勤快妻子,每天早上五

临近“双旦”国行NS又添新作送审,外国山寨机竟彻底解决摇杆漂移。
游戏

临近“双旦”国行NS又添新作送审,外国山寨机竟彻底解决摇杆漂移。

127 Switch游戏圈

今天根据上海市新闻出版局网站公示:关于出版和复制境外电子出版物、计算机软件、电子媒体非卖品著作权授权合同登记的申请,《星之卡比新星同盟》目前已经显示为“准予许可”。截止目前国服NS已经有六款游戏送审,分别是:《星之卡比新星同盟》《马力欧卡丁车8豪华版》《超级马力欧奥德赛》《塞尔达传说旷野之息》《耀西的手工世界》《新超级马力欧兄弟U豪华版》(现已过审)提到国行

感人催泪短片《30天的约定》
私房话

感人催泪短片《30天的约定》

1164 教练技术

品牌推广,合作请加微信(或QQ):214091783爱情是两个人感情的交集婚姻却需要两个人的合作经营最感人的陪伴,不是两眼的相望而是从满头青丝到白发苍苍没有完美的婚姻也没有不怠倦的爱情惟有彼此珍惜●●●END●●●