星球日报|苹果AR眼球追踪专利发布;索尼看好OLED和Micro LED技术
VRAR星球
今日新闻速览
•苹果最新AR眼球追踪专利公布
•索尼对OLED和Micro LED显示方案表示看好
•基于PICO 头显的沉浸式医疗XR解决方案推出
•豪威科技发布尺寸更小的全局快门CMOS
•基于微软HoloLens 2的医学可视化解决方案推出
•苹果VR版AirPlay专利发布,可无缝扩展显示屏
•Snapchat 平台的AR 滤镜需要付费了
•Meta Quest Store官方年度最佳:40余款作品获奖
•VR游戏学单词,《Noun Town》上线Meta Quest
•冰岛音频解决方案开发商Treble成功融资
01
苹果最新AR眼球追踪专利公布
此前,一直有传言称,苹果正在积极研发某种形式的AR/VR头显或智能眼镜,从苹果近日来发布的专利来看,此言确实不虚。
USPTO最近公布了苹果一项关于智能眼镜的眼球追踪交互专利,据了解,该专利提出了一套基于双目光波导架构的轻量化AR眼镜。其中用于眼球追踪的红外LED可位于太阳穴位置,有点相似LBS激光方案的侧投方案,从而保证波导是“干净”的。根据专利所示的图例来看,这款智能眼镜的设计或许还存在一些问题,镜腿位置可能会由于某些原因产生形变。
对于这个问题,苹果也提出了解决办法,比如将红外LED与图像扭曲数据结合。同理,如果用户佩戴视力矫正眼镜,也需要重新获得一个基准点。
02
索尼对OLED和Micro LED显示方案表示看好
随着2021年“元宇宙”概念的火爆,其主要的硬件载体AR/VR设备成为近一两年来科技创新的重要领域之一,受到了谷歌、Meta、苹果、OPPO、索尼、阿里巴巴、腾讯、小米等科技公司的青睐。在硬件方面,显示技术一直是业界讨论和分析的要点。
近日,索尼在STEF 2022技术交流会上,预测了AR/VR显示方案的未来发展路径。在索尼公布的路径图中可以看到,其认为AR眼镜最初会采用LCoS+平面玻璃材质光波导方案,后期会使用Micro LED替代LCoS,接着还会采用曲面塑料材质光波导,实现更接近眼镜的外观。而在VR显示方面,索尼认为前期将采用LCD+菲涅尔透镜方案,随后将改为OLED屏+Pancake透镜(曲面),并逐渐迭代为OLED+平面液晶透镜方案。
值得一提的是,在此次会议中,索尼还表达了其对于AR眼镜的愿景。
03
基于PICO 头显的沉浸式医疗XR解决方案推出
虚拟现实(VR)技术在诞生之初,或者说大家第一次接触到这个技术,似乎都是VR游戏体验,比如VR过山车、VR电影、VR多人游戏等。但是随着技术的应用拓展,近年来,越来越多的案例表明VR技术已经不是简简单单的娱乐辅助,它在工业、教育、医疗、军事的应用更为广阔。
据了解,欧洲医疗保健平台SyncVR Medical就基于PICO VR头显,为多个国家的医疗机构提供XR解决方案,可以给患者带来沉浸式的VR医疗服务。其平台目前可以提供以下三款产品:可以提供定制ICU体验的Horizon IC,患者通过重新体验个性化的ICU入住情况,可以更快地恢复精神,减少抑郁;专门为医疗保健开发的移动设备管理系统SyncVR Dashboard,使用者可以在XR应用商店中访问一系列的XR应用程序;以及帮助患者儿童分心的VR游戏商店XR App Store。
VR不仅能在治疗过程中分散患者的注意力,而且可以在等待治疗的过程中使用时,还可以帮助他们放松,从而减少治疗前的焦虑和恐惧。
04
豪威科技发布尺寸更小的全局快门CMOS
目前,在VR一体机中的SLAM定位和手势手柄追踪都是基于低分辨率的单色CMOS完成地,这些产品已经可以很好地完成视觉识别等用途。但是,还可以再更进一步。
今天,美国老牌巨头豪威科技(OMNIVISION)宣布推出了一款全新的全局快门CMOS,型号为OG0VE,特点是比尺寸比上一代见效26%,同时能效提升50%。OV的OG0VE采用了OmniPixel 3-GS技术,像素仅3微米,CMOS尺寸3.6mm×2.7mm,分辨率为640×480,在VGA/60FPS模式下功耗低于34mW(豪瓦)。并且,这款新的CMOS采用全局快门架构,在弱光环境下也具有较高的灵敏度,从而满足AR/VR的SLAM、手势等需求。
在未来,OG0VE将使用于AR/VR/MR头显,以及无人机、机器视觉和条形码扫描等领域。
05
基于微软HoloLens 2的医学可视化解决方案推出
随着技术的发展,越来越多的医疗机构开始采用3D全息技术作为手术规划的工具。近日,德国医疗技术公司apoQlar宣布,他们基于微软HoloLens 2的医学可视化解决方案VSI HoloMedicine已获美国FDA 510(k) Class II许可。据了解,美国是第30个向apoQlar产品提供医疗认证的国家,而apoQlar计划于2023年第二季度通过佛罗里达州迈阿密的子公司分销VSI HoloMedicine。
基于微软HoloLens 2的VSI HoloMedicine可以利用3D全息技术为外科医生提供了近乎“x射线视觉”的感知能力。任何医疗领域的医生现在都可以在手术室内外以3D方式规划手术,并可视化医疗数据。这对于帮助改善患者的手术结果,并为外科医生提供先进的手术规划工具等都很有利。
目前,这家公司正在进行A轮融资。融资成功之后,或许其产品的技术和国家覆盖程度还能继续拓宽,将有更多的患者受益。
06
苹果VR版AirPlay专利发布,可无缝扩展显示屏
苹果近期的推出的专利确实不在少数,据USPTO公布的最新消息显示,苹果另有一项曾在欧洲提交的智能眼镜CG场景相关专利,目前已有后续进展。
该专利的摘要显示,这是一个基于AR/VR眼镜的虚拟屏幕扩展功能,也就是说,它可以将AR/VR作为Mac、MacBook、Apple TV的虚拟屏幕,并支持无缝扩展。从专利看来,这似乎是AR/VR版的AirPlay模式,在未来,这个功能可能会成为苹果AR/VR的杀手锏之一,毕竟苹果拥有强大的生态间交互体验。
关于这款专利的功能,以图示为例,通过虚拟大屏扩展显示基本就是这样的效果:图中202为用户,204是物理显示屏,460和461是虚拟的扩展显示屏,204屏幕上的内容410和411都支持移动到虚拟屏幕上。
07
Snapchat 平台的AR 滤镜需要付费了
随着科技的进步,AR技术领域也在不断发展,Snapchat AR 虚拟电商正是一个很好的例子。作为AR应用的元老级玩家,其平台上的AR滤镜俘获了大多数年轻人的心。抖音前阵子特别火的哭脸特效,就是搬运自Snapchat的一款效果。
近日,Snap 在年度 AR 开发者大会 Lens Fest 2022 上宣布推出了一项新功能,允许选定的开发人员出售其 AR 滤镜的高级升级版。用户可以使用 Snapchat 的官方应用内货币 Snap Tokens 购买其他内容,例如数字商品、AR 效果和工具。作为初始试点计划的一部分,该公司目前正在与一组创作者和开发人员封闭测试该功能。
对于新增加的付费功能,Snap 在官方更新中表示:“AR 是当今 Snapchat 体验的核心,随着时间的推移,我们看到硬件有更大的机会将其带入一个新的维度。我们的目标是通过眼镜让 AR 更加自然,让你用手与周围的 AR 互动。先进的硬件和软件、分销渠道以及我们通过 Snap AR 平台支持增长的方式共同推动了我们全球 AR 社区的创造力和业务。”
08
Meta Quest Store官方年度最佳:40余款作品获奖
2022年就要结束了,作为一年的总结,各大评选和颁奖活动正在陆续举办。近日,Meta官方也评选出了Quest Store在2022年的各类最佳作品,共10个奖项。其中,除了“最佳游戏”和“最佳应用”外,其他8个奖项都分别有多款作品入围。
2022最佳游戏的获奖者《The Last Clockwinder》,是一款由美国的Pontoco工作室开发的解谜类游戏,画面风格清新靓丽,玩法简单富有趣味性。这款游戏虽然是由小型制作团队开发的,却成为了6月初VR游戏界的一匹黑马,收获了来自玩家的诸多好评,其在Steam的好评率为98%(155评价),Quest的五星率为87%(239评价)。
而最佳应用的获奖者《LES MILLS BODYCOMBAT》,则来自于西班牙开发商Odders。据了解,这款应用程序是Les Mills健身品牌的虚拟扩展,具有高能量武术启发式锻炼。其虚拟课程将迎合所有人的需求,提供从初级到高级的30种锻炼选项。应用将配备两位教练以及五个梦幻般的锻炼环境,包括火星、新城、罗马、日本和苔原。Les Mills表示,更多的环境也在开发中。
09
VR游戏学单词,《Noun Town》上线Meta Quest
从小到大,我们学习外语,背单词时都用过哪些工具?纯书面的死记硬背,抄三遍默写三遍?还是百词斩、扇贝、新东方绿皮书?科技真的可以改变生活,现在,出现了一种更有趣的背单词辅助应用,或许可以试试寓教于乐。
近日,VR语言学习应用《Noun Town》现已面向Quest 2和Quest Pro发布,PCVR版本将于12月15日推出。该应用支持日语、法语、西班牙语、意大利语、德语和汉语。用户通过与岛上的物品互动、完成迷你游戏来学习选择的语言。比如,浏览一家杂货店,挑选一件商品,然后该物品的单词就会出现,之后用户可以用Quest麦克风向应用重复该单词以进行验证。
虽然,《Noun Town》只设计了一些单词和短语,但是作为积累词汇量的辅助应用,又有趣又有实在的效果,还是很不错的。
10
冰岛音频解决方案开发商Treble成功融资
对于一款沉浸式的VR游戏来说,虚拟环境的背景音效如何,是其是否体验良好的一个很重要的因素。如果声音不能反映日常的音频体验,玩家在虚拟场景中就会感到不真实,无法沉浸下去。对于相关技术,很多公司都有专门的研究。
据了解,近日,冰岛元宇宙音效体验初创公司 Treble宣布,其已经完成了550万欧元的种子轮融资(约人民币4025万元)。这家公司成立于2020年,目前已经开发了一个专门面向游戏开发等场景的声音模拟平台,从而帮助游戏开发者在虚拟场景中创建逼真的声音模拟效果。或者用于帮助建筑师,提前了解声音在房间中的反射效果等等。现在,Treble的声音模拟平台已经打通了3D建模软件、游戏引擎,让声音通过图形化的方式进行展示出来,让开发者更好的了解声音效果。
目前,Treble声音模拟平台还在内测阶段,预计到2023年发布正式版。
文/R星人