看日报是个好习惯。
厚度仅2.5mm!英伟达宣布与斯坦福大学合作研究VR超薄全息眼镜
据英伟达公司称,该公司与斯坦福大学的研究人员合作,将3D全息图像所需的技术封装到厚度仅为几毫米的可穿戴显示器中。这种2.5毫米的显示屏还不到其他薄型VR显示器的一半,后者通常被称为Pancake镜片,使用一种折叠光学技术,只能支持2D图像。
英伟达表示,研究人员将显示质量和显示尺寸视为一个计算问题来处理,并与人工智能驱动的算法共同设计光学器件。
之前的VR显示器需要放大目镜和显示面板之间的距离来创建全息图,而这种新设计使用了空间光调制器,这种工具可以在用户眼前创建全息图,而不需要这种间隙。其他组件,包括瞳孔复制波导和几何相位透镜则有助于进一步减少该设备的体积。
英伟达补充说,这是与斯坦福大学合作的两项VR项目合作之一,将在SIGGRAPH 2022大会上展示,另一个项目提出了一个新的计算机生成的全息框架,该框架可以提高图像质量,同时优化带宽使用。此外,英伟达还与纽约大学及普林斯顿大学的科学家合作撰写了显示和感知研究领域的第三篇论文,测量了渲染质量如何影响用户对屏幕信息的反应速度。
总的来说,将在SIGGRAPH 2022大会上展示的16篇技术论文代表了英伟达与14所大学的合作,包括达特茅斯学院、斯坦福大学、瑞士洛桑联邦理工学院和特拉维夫大学,跨越了图形研究的广度,在神经内容创建工具、显示和人类感知、计算机图形的数学基础和神经渲染方面取得了进展。
为构建VR火星模拟器,NASA发布众筹比赛
美国国家航空航天局(NASA)目前正在与Buendea合作开发一个超逼真的VR模拟器,该模拟器名为Mars XR,系统采用Epic Games的UE5引擎构建。
该模拟器用于模拟恶劣的火星环境,比如橙色和蓝色色调交替的昼夜循环,时刻变化的天气条件,火星重力环境、漫游者以及超过400平方公里的研究地形等。
近日,NASA针对这个项目在众筹平台HeroX发起了一个MarsXR挑战赛,该比赛要求参与者构建现实资产以及在火星驻扎时可能面临的场景。NASA认为,通过开发一个逼真的火星模拟器,能够为宇航员未来在火星的舱外活动做准备。
图源:NASA
该比赛面向18岁及以上的人开放,不区分团体个人。该项目奖金总额为70000美元,未来将选出20名获胜者,平均每位获胜者奖金为3500美元。
迪士尼之泉与Meta合作,提供《星球大战》VR游戏免费体验
图源:MIXED
Meta为Codec Avatar 2.0开发定制芯片,以使独立头显Avatar更为逼真
据悉,Meta 研究员为Codec Avatar 2.0开发定制芯片,以使逼真的Avatar能在独立头显上运行。
Meta 于2019年展示“Codec Avatars”(Meta 逼真的虚拟化身系统)相关成果。Codec Avatars 由多个神经网络提供支持,借助搭载171颗摄像头的捕捉装置生成。一旦生成,这些Avatar能够被拥有5颗摄像头(两颗在内部观察眼睛,三颗在外部对脸部进行追踪)的原型VR头显实时驱动。
3月展示过后,研究人员还对该系统的多次革新做了演示,比如眼睛更逼真的版本,只需眼睛追踪与麦克风输入的版本,以及真实感最强的2.0版本。
但在像Quest这样的独立头显上使用移动芯片去驱动逼真的虚拟形象并非易事,即使是Meta最新、最高效的模型也只能在Quest 2上以每秒50帧的速度渲染(解码)五个Avatar,这还不包含将眼动追踪和面部追踪输入转换(编码)为Codec Avatar面部状态。
图源:uploadvr
2022年IEEE定制集成电路会议上,Meta发表了一篇论文,其研究人员展示了一种神经网络加速芯片的原型,该芯片“在Codec Avatar模型上对眼球注视行为进行提取更为高效”。
定制芯片位于主板上眼动追踪摄像头输入的附近,并负责将这些摄像头输入转换为 Codec Avatar 状态,以减少移动设备的组件之间传输数据所需的大量能量。研究人员指出,这也有利于隐私和安全,因为通用处理器无法访问原始相机数据。
图源:uploadvr
需要明确的是,这款芯片还只是一个实验,仅处理 Codec Avatars 工作负载的一小部分,而不是一个可在独立头显上使用的通用解决方案,所有其他任务依然由常规芯片组(例如 Snapdragon XR2)承担。
即便如此,Meta 这款定制芯片还是证明了定制芯片解决Avatar问题的可行性。从理论上讲,这一想法可能会在未来得到扩展,用于处理更多针对VR的任务。
英国朴次茅斯大学开设创意和沉浸式扩展现实中心CCIXR
当地时间周三,英国朴次茅斯大学首个专注于开发扩展现实 (XR) 内容的顶尖中心正式启动。
创意和沉浸式扩展现实中心( CCIXR ) 旨在打造下一代沉浸式体验,提供一整套工具来支持 VR、AR 和 MR 技术。
图源:xrtoday
据悉,该中心成立于 2021 年 10 月,可以在全球 XR 行业严重短缺人才的情况下提供研发 (R&D)、培训和工作技能的提升。它还旨在为组织和公司提供关键的 XR 技术,包括培训模块、模拟和其他与元宇宙相关技术。
该项目是与 Solent Local Enterprise Partnership (LEP) 一起开发的,LEP 为其成立贡献了 360 万英镑,旨在促进英国成为 XR 创新的领导者。
CCIXR 提供的一些关键技术包括动作捕捉 (mocap)、体积视频、摄影测量和扫描、音乐和声音技术、游戏、空间计算、编码等。
朴次茅斯大学副校长 Graham Galbraith 教授在一份声明中表示:
CCIXR 是一个“世界领先的设施”,将大学置于 XR 的“创新前沿”,希望开发技术来重塑工作和休闲。作为一所全球性的大学,本次朴次茅斯大学展开的多方合作同样还是一个很好的将大学置于地区增长核心发展位置的最佳案例。
图源:xrtoday
Solent LEP 的主席 Rachael Randall 总结说,伴随着创新技术的研发、生产和深入,创意产业将对地方和国家层面的经济增长做出更多的贡献。
她表示:CCIXR 将巩固该地区“在这个令人兴奋和新兴的沉浸式产业的中心”地位,并补充说它将发出一个“明确的信号”,Solent 将接待全球顶级人才,以发展和建设创意产业。
Spatial与Ready Player Me合作,为元宇宙平台带来全身Avatar
5月5日,专注于元宇宙领域的AR/VR平台Spatial,宣布了一个重要的新发展计划,该平台将进一步向大规模采用和消费垂直领域发展。此外,该公司还宣布了与Ready Player Me的新合作关系,这将为平台带来全身可定制的Avatar,并将使人们在元宇宙中更自由地表达自己并进行互动,还能解锁可作为NFT可穿戴配件资产。
Spatial联合创始人兼CPO Jinha Lee表示:"Spatial坚信开放和可互操作的标准,所以我们很高兴采用一个能使用户的身份在不同体验中保持不变的解决方案。我们的动力是为人们提供一个空间,无论他们是创作者,还是参加派对、看T台秀的人,或是在网上寻找精神平静和言论自由的地方的人。"
图源:Spatial
通过Ready Player Me功能的整合,Avatar将能够在Spatial体验和Web3中更动态地策划展览、举办现场活动和进行社交。Spatial还准备将其逼真的Avatar升级为全身Avatar。此外,Spatial将发布更多与文化相关的服装,包括女性的头巾等配饰,并进一步定制包括非二进制Avatar。Spatial指出,这将是该公司继续探索的领域,帮助人们以符合其身体和文化身份的方式进行互动和表达自己。
图源:Spatial
Ready Player Me的首席执行官兼联合创始人Timmu Tõke表示:"我们非常高兴能将我们的全身Avatar带到Spatial,并为该平台的用户提供一种表达自己的全新方式。"
Spatial还与NFT市场平台Opensea、SuperRare和Rarible建立了现有的合作关系。NFT可以直接在Spatial内查看和购买,该公司最近还宣布支持Polygon(正在推进区块链支持)。据Spatial称,该平台目前拥有超过35万个空间,自12月以来增长了10倍。
吉利手机关联公司星纪时代获AR眼镜专利授权
陀螺科技 5 月 6 日讯,据天眼查最新信息显示,吉利手机关联公司湖北星纪时代科技有限公司获 AR 眼镜外观专利授权。
具体专利产品图如下:
图源:天眼查
据悉,星纪时代成立于 2021 年 9 月,注册资本 7.15 亿元人民币,法定代表人为王勇,经营范围包括 5G 通信技术服务、软件开发、集成电路芯片及产品销售等,大股东为吉利集团(宁波)有限公司,持股比例约 32.3%,李书福占股 6.15%,为疑似实际控制人。
VR陀螺从产业链了解到,目前星纪时代确有 AR 智能眼镜项目,并正与供应链展开积极合作中,更多信息,有待进一步关注。
微软与大众合作,试图把HoloLens引入汽车驾驶中
近日,微软正式宣布在HoloLens 2推出“移动平台”功能,该功能由微软与大众汽车合作开发,大众汽车一直尝试引入头显设备作为车辆的平视显示器。
车辆引入AR眼镜难点在于传感器数据的冲突。此前微软一篇博文透露,AR眼镜使用相机传感器以及惯性测量单元(IMU)来实现运动追踪。不过,该算法运用到汽车上时,这两个传感器读数有可能会发生冲突,因为头显看到的是静态环境,而IMU感知到的则是运动场景。
这个问题是前几年大众试图引入AR眼镜来帮助赛车手在比赛中取得更好成绩时发现的。如今,在这两家企业的合作下,这个难点已经得到解决。它们开发了一个原型系统,该系统能够实现AR头显在车内显示实时信息。
在下面一张图片中可以看到,该系统允许AR眼镜将虚拟对象投影在车内或者车外,HoloLens 2将虚拟地图投影到了汽车的仪表板上,而导航箭头则出现在了路口附近。
图源:微软
此前大众一些车型已经开始应用AR技术,比如它最近推出的一款ID电动汽车,配备了AR平视显示器,该显示器可以将速度、导航指令等数据投射到挡风玻璃上。
Niantic将为AR设备推出城市级规模的Lightship视觉定位系统
近日,Niantic宣布将在5月24日的开发者峰会上发布Lightship视觉定位系统,该系统将形成一个底层的3D世界地图,以便所有设备能共享相同的参考框架。
由于如今许多AR设备能够在环境中利用摄像头进行自我定位,但如果多个设备同时在一个空间,除了对环境定位之外,还需要对彼此定位。也就是说,多个设备需要共享同一张地图,以方便多个用户能参考。
据了解,Niantic Lightship视觉定位系统将以“厘米级的精度”确定现实世界的位置,AR设备利用共享的数字地图可以实现多人游戏等功能。
图源:Niantic
Niantic方面表示,本月底将首先推出该功能,但是是作为Lightship AR开发平台的一部分。目前,该系统只接近“城市规模”,Niantic表示最初价将只选定城市的某些Niantic Wayspots发挥该作用,并计划通过从使用该系统的设备上外包地图数据来扩大视觉定位系统的覆盖范围。
目前看来,Lightship视觉定位系统想要达到世界级规模,仍需一段时间。Niantic可以利用其现有游戏的数据,如《Pokémon Go》和即将推出的《Peridot》来加快绘制速度。
第一时间了解XR资讯
关注VR陀螺官网(vrtuoluo.cn)
VR陀螺的联系方式:
商务合作 | 投稿 :
西瓜(微信号 18659030320)
六六(微信号 13138755620)
推荐阅读
本文来自微信公众号“VR陀螺”(ID:vrtuoluo)。大作社经授权转载,该文观点仅代表作者本人,大作社平台仅提供信息存储空间服务。