Meta的新技术,可能会改变MR行业的未来

苹果 Vision Pro 会是未来吗?放在今天依然是一个极具争议的问题,甚至在 Vision Pro 正式推出发售之后,可能也很难达成共识。

另一个毫无疑问的现实是,不管是 VR、AR 还是 MR,XR 头显还有很多需要攻克的技术和工程难题。就说如今,头显稍一用久容易头晕的问题还是存在,这就涉及到了方方面面的问题,包括屏幕分辨率、延迟、亮度以及焦距等,本质上还是大脑不觉得画面足够「真实」。

虽然苹果 CEO 库克在发布 Vision Pro 时将其誉为开启空间计算时代的「革命性产品」,但实际上 Vision Pro 也不是很「空间」,至少还无法调节焦距,用户看到的画面始终聚焦在一个固定的焦距处,容易导致眼睛疲劳。


(资料图)

不过就在 8 月 6 日开始的计算机图形学顶级年度会议 SIGGRAPH 2023 上,Meta 就展示了两台原型头显—— Butterscotch Varifocal 与 Flamera。当然,我们与其将这两台头显视为产品原型,不如看成 Meta 正在探索的两种技术的展示。

Butterscotch Varifocal 与 Flamera,图/Meta

值得在意的是,Butterscotch Varifocal 将展示接近视网膜的分辨率和变焦光学器件,而 Flamera 则证明了一种实现「透视」真实世界的全新方法。

尽管 Meta 表示这些原型头显上的是技术「可能永远不会进入消费级产品」,但或许也会通向 VR、MR 乃至 AR 的未来。

01

从 25cm 到无限远

真正的「空间」

SIGGRAPH 对大众来说可能名声不显,但却是计算机图形学的顶会,除了论文、学术界与产业界的合作交流,每年都会有研究团队在会上展示计算机图形硬件和软件方面的突破。

去年的 SIGGRAPH 大会上,Meta 就展示了一款 HDR 头显原型 Starburst,峰值亮度达到了惊人的 20000 nit。作为比较,苹果 Vision Pro 的峰值亮度传闻达到了 5000 nit,其 HDR 显示效果已经让一众体验者相当惊艳。

然而相比 Starburst 上的超高亮度,今年两个头显原型上的技术还是更让人在意一些。

对头显有一定了解的读者应该都知道一个参数——PPD(角分辨率,即视场角中每度的像素数),类似于手机上我们常说的 PPI(每英寸像素),关乎实际入眼画面的精细程度。总而言之,如果说手机屏幕的 PPI 达到 326 以后就能称为「视网膜级」,那在头显产品的屏幕上,一般认为 PPD 要达到 60 才能达到「视网膜级」的视觉效果。

Vision Pro 和库克,图/苹果

但在现实中,即便是搭载索尼单眼 4K(双眼 8K)Micro OLED 屏幕的 Vision Pro,参照 Meta Quest Pro(22 PPD)进行估算,距离 60 PPD 也还有一定的差距。

苹果官方宣称 Vision Pro 屏幕共有 2300 万像素(双眼),是 Meta Quest Pro 屏幕像素的三倍多,但具体到每度视场角看到像素数,即 PPD,倍数肯定要小于分辨率的倍数,技术社区 Hacknews 上有人计算得出 Vision Pro 应该在 34 PPD 左右。

而 Butterscotch Varifocal 在上一代原型机的基础上,不仅扩大了视场角,说是也实现了视网膜级别显示的 60 PPD,但要如何实现如此高像素密度的显示屏幕以及算力驱动,目前还不得而知。

同时还有一个对业界来说可能更加重要的技术——变焦。

包括 Vision Pro 在内,目前所有已知的头显的画面都是固定焦距(通常是 1m),屏幕光线没有深度信息,辐辏和调焦的位置发生了分离,从而产生视觉辐辏调节冲突(VAC 问题),引发视觉疲劳、晕眩等问题。

与之相对,实现变焦可以让 VR 体验变得更加真实,视觉上的使用感受也会更舒服。而从 Meta 放出的视频来看,Butterscotch Varifocal 显然是加入了变焦电机,再配合眼动追踪技术,实现了 25cm 到无限远的自动变焦调节。

变焦电机,图/Meta

事实上,不少厂商都尝试在头显设备中实现动态变焦的效果,至少从 2019 年开始,苹果就一直在探索动态变焦显示技术,其中一种方向就是多透镜的 Pancake 方案,通过调整透镜折射率来调节焦距。早前传闻中 Vision Pro 就会采用这项技术,但目前来看并没有用上。

至于即将展出的另一台头显原型 Flamera,则是在目前主流的彩色透视方案外,开辟了一条新的技术路线。

02

彩色透视的未来

一定要大算力?

众所周知,Vision Pro 和 Quest Pro 都是通过对外的摄像头拍摄真实世界,再将画面「拼接」显示在内侧屏幕上,实现用户戴着头显也能看到周围环境,甚至实现 AR 体验。

说起来容易,实现难度极高,Quest Pro 全彩透视的糟糕体验就曾被近眼显示专家 Karl Guttag 炮轰。Vision Pro 目前来看完成度要比前者更高,此前雷科技的文章中,我们就综合了国内外体验者的说法:

「虽然与人眼观看真实世界还有明显差距,但 Vision Pro 不仔细看已经非常接近了,转头也感受不到明显的延迟。」

图/苹果

唯一的问题是,不管是苹果宣传视频中的人物,还是首批体验的媒体和博主,基本都是在固定位置上体验 Vision Pro,只能证明 Vision Pro 在静态下已经有了足够优秀的表现。但当人走动起来,一切计算都会变得更难、更复杂。

这也引出了目前主流方案的问题,由于这些摄像头与用户真正的眼睛位置不同,必须使用图像处理算法以及大量算力来重新「拼接」摄像头拍到的画面,然后显示到屏幕上。这个过程会增加延迟,还会导致视觉伪影。

Flamera 则是想通过一种全新的光学设计,直接捕捉与肉眼看到相同的光线。

「通过从头开始设计头显,而不是修改现有设计,我们最终得到了看起来非常独特的设计,但可以实现更好的图像质量和更低的延迟。」Meta 科学家 Grace Kuo 说。

Flamera,图/Meta

按照 Meta 公布的工作原理,Flamera 与传统光场摄像头不同,在阵列中每个透镜后面都放置了一个孔径(相当于光圈)。这些孔径物理上阻挡了不必要的光线,只有需要的光线能够到达眼睛,同时将有限的传感器像素集中在光场的相关部分,从而产生更高分辨率的图像。

工作原理,图/Meta

最后,原始传感器数据最终看起来像小圆点,每个圆点只包含头显外部物理世界「视图」的一部分。Flamera 将进行重新排列,估计一个粗略的深度图,实现基于深度的图像重建。

得益于此,Flamera 理论上可以实现更低的延迟和更少伪影的透视效果。换句话说,通过头显看到的画面更接近真实的物理世界,实现更好的 MR 体验。

03

写在最后

Butterscotch Varifocal、Flamera 上的技术会改变头显的技术路线吗?眼下可能都还很难判断。

就像前文所提,Meta 也明白,这两台头显原型更多是承担了技术展示的需求,距离解决工程实现问题和量产还有很长的路。

同时 Meta 也没有「把鸡蛋放在一个篮子里」。并没有迹象表明要专注在变焦电机与无重投影的技术路线上,变焦电机的机械式方向始终存在可靠性方面的问题,不仅是面向消费者需要得到足够的信任,在量产环节上可能也要面对更大的挑战。

在此之前,已经有太多消费电子产品证明了「机械」 这条路上的坑,比如全面屏进程中的升降式镜头。

倒是无重投影确实给 MR 提供了一种很新的思路,可以避开对算力的高要求,同时减少延迟和视觉伪影。悬念在于实现的难度和效果,这可能就需要等到日后才能见分晓了。

标签:

Meta的新技术,可能会改变MR行业的未来

Flamera是想通过一种全新的光学设计,直接捕捉与肉眼看到相同的光线。

08-24 09:34:46

《2023年轻情侣同居调查报告》发布:女生开始逐渐掌握“同居主动权”

百合佳缘集团联合“后浪研究所”共同发布了2023七夕婚恋观调查报告——

08-24 08:38:04

是割地停战换入约还是反抗到底?乌克兰公布民调结果

据乌克兰独立新闻社8月23日报道,2023年8月9日至15日,伊尔卡·库切里

08-24 07:03:02

通宝能源(600780):8月23日北向资金增持3.49万股

8月23日北向资金增持3 49万股通宝能源。近5个交易日中,获北向资金增持

08-24 03:56:11

顺应时代潮流 展现大国担当——习近平主席在2023年金砖国家工商论坛闭幕式上的致辞引发国际社会热烈反响

新华社北京8月23日电题:顺应时代潮流展现大国担当——习近平主席在202

08-23 22:44:56

炬芯科技:2023年半年度净利润约2470万元 同比下降31.47%

炬芯科技(SH688049,收盘价:29 07元)8月23日晚间发布半年度业绩报告

08-23 21:04:41

井陉县人民政府征收土地 预公告

井陉县人民政府征收土地预公告,井陉县,预公告,人民政府,征收土地

08-23 19:18:12

合景悠活正式进驻唯品会南沙物流园区 首入广州地区物流园项目

唯品会南沙物流园坐落于广州市南沙区万顷沙镇保税港区,业态为物流产业

08-23 18:03:50

协议离婚注意什么细节

协议离婚注意的细节是双方订立的离婚协议书必须是书面协议,且双方的真

08-23 16:37:13

62岁费翔晒“大胸肌”,背后3套顶奢豪宅吓傻网友:Oh,Daddy!

这个夏天,大家有觉得很热很辣吗?热辣就对了。尤其是看到浓烈的混血,

08-23 15:21:09

谷爱凌代言淘淘氧棉(谷爱凌代言)

1、上汽通用汽车凯迪拉克品牌。2、9月3日,上汽通用汽车凯迪拉克品牌宣

08-23 14:08:08

董兰坤(关于董兰坤简述)

,你们好,今天0471房产来聊聊一篇兰坤,兰坤简述的文章,网友们对这件

08-23 12:15:34

自然资源部:今年1-7月成功预报地质灾害132起 避免可能因灾伤亡1606人

【自然资源部:今年1-7月成功预报地质灾害132起避免可能因灾伤亡1606人

08-23 11:12:32

研究显示:空气污染或增加患痴呆症风险

参考消息网8月22日报道据美国《福布斯》双周刊网站8月14日报道,研究显

08-23 09:31:27

Woj:球员工会将就哈登被罚事件向联盟仲裁委员会提起申诉

直播吧8月23日讯据Woj报道,哈登因公开炮轰莫雷,被联盟罚款10万美元。

08-23 08:46:25

普诚科技工业园项目厂区主体结构全面封顶

近日,厦门普诚科技工业园项目主厂房及宿舍楼主体结构全面封顶,标志着

08-23 06:58:07

油豆腐怎么炒好吃简单做法

关于油豆腐怎么炒好吃简单做法的内容,包含油豆腐怎么炒好吃家常菜做法

08-23 03:07:56

研究:HPV相关口咽癌患者采用低强度治疗,可实现减“毒”不减“效”

放化疗“毒副作用”是影响口咽癌患者生存质量的重要难题。如何在确保化

08-22 22:31:02

神奇制药股东迈吉斯质押1035万股 用于经营资金周转

挖贝网8月22日,神奇制药(证券代码:600613)股东贵州迈吉斯投资管理

08-22 21:04:44

男篮将发兵世界杯,篮协特事特办稳住周琦 郁闷的只有去新疆的赵睿

半夜抛出个重磅炸弹,新疆与广东谈妥,周琦赵睿互换东家,这一消息已被

08-22 19:28:52

一个人最高级的情商:把扇子挡在脸上

作者:太棒了(富书作者)《鬼谷子》有言:“圣人之道,在隐与匿。”生

08-22 18:22:15

犒赏自己一下EchoShow8优惠亚马逊42%折扣

提供超过40%折扣的优惠确实很难忽视,所以您不能指望我们会错过这一优

08-22 17:17:00

美国大麻已成庞然大物 政府不作为助长危害

据中国日报网报导,《华盛顿邮报》(The Washington Post)网站8月17

08-22 16:07:31

“爱心学堂”温暖童心

▲志愿者给学生辅导功课。摄影丨江西日报全媒体记者侯艺松江西新闻客户

08-22 15:06:34

来广州天河珠村,看“中国乞巧第一村”如何玩转七夕?

近日,由广州市文化广电旅游局主办,天河区文化广电旅游体育局、广州市

08-22 14:12:09

四川省中医药标准化技术委员会换届会议暨2023年度标准化专题培训会在蓉举办

8月21日,四川省中医药标准化技术委员会换届会议暨2023年度标准化专题

08-22 12:34:08

北京美莱王志强脂肪填充怎么样?手术价格、案例、口碑首度曝光!

一、王志强脂肪填充怎么样王志强医生是一位在脂肪填充领域实力强大的医

08-22 11:34:14

台江县南宫镇:禁毒宣教携手共筑防毒墙

“大家看宣传册里的这些图片,都是毒品,一旦沾染追悔莫及,不但危害自

08-22 10:55:10

翩跹舞姿亮相中原 31支队伍齐聚郑州角逐省广场舞大赛冠军

21日下午,“新时代新征程新风貌”十大群众文化活动暨河南省第二届惠民

08-22 10:15:03

雾灯是干什么用的_雾灯

1、机动车的雾灯的特点是:特别的醒目;引人注意;有效提高行人和车辆

08-22 09:26:46

焦点访谈:高薪招聘?骗人陷阱!

央视网消息(焦点访谈):现如今,很多年轻人熟悉网络,这是他们找工作

08-22 08:15:34

聚焦网络订餐 守护“舌尖安全”

打开手机App,动动手指,就可以选购自己喜欢的食物,然后坐等美食到来

08-22 06:45:42

青莲居士寓意(青莲居士滴仙人)

很多人对青莲居士寓意,青莲居士滴仙人不是很了解那具体是什么情况呢,

08-22 03:02:53

国家发改委等四部门发布公告 遏制今年“天价”月饼

国家发改委等四部门发布公告遏制今年“天价”月饼---中国经济网北京8月

08-21 22:25:39

usb怎么连接手机OPPO(usb怎么连接手机)

诸多的对于usb怎么连接手机OPPO,usb怎么连接手机这个问题都颇为感兴趣

08-21 20:59:54

8月21日碧兴物联(688671)龙虎榜数据

沪深交易所2023年8月21日公布的交易公开信息显示,碧兴物联(688671)

08-21 19:27:45

洋葱学园入选2023教育部智慧教育示范区“智慧教育优秀案例”

8月18日-20日,“2023全球智慧教育大会”在京隆重举行。大会由北京师范

08-21 18:19:18

蒋叔程过访余以病未面复见寄一律次韵答之(关于蒋叔程过访余以病未面复见寄一律次韵答之简述)

,你们好,今天0471房产来聊聊一篇叔程过访余以病未面复见寄一律次韵答

08-21 17:25:10

NYMEX原油上看82.28美元

周一(8月21日),国际油价上涨,由于沙特阿拉伯和俄罗斯出口减少,全球

08-21 16:33:52

不是188!第三方网站《黑神话悟空》定价信息已清除

昨天,第三方数据网站EpicGamesdb显示《黑神话:悟空》国区定价仅为188

08-21 15:34:25

内容正在升级改造,请稍后再试!

内容正在升级改造,请稍后再试!【免责声明】本文仅代表合作供稿方观点

08-21 14:20:23

哆啦A梦:胖虎进屋就推倒了哆啦A梦,原来是为了自己的妹妹胖妹

胖虎是个急性子,他本来对胖妹有烦恼的事情很郁闷,现在忽然想到了可以

08-21 13:09:30

卫龙在四川成立麻辣宗师品牌公司

天眼查App显示,近日,四川麻辣宗师品牌管理有限责任公司成立,法定代

08-21 12:06:58

网贷逾期暴力催收该怎样处理

根据目前的规定,网络贷款平台以及其委托机构,不可以通过暴力、恐吓、

08-21 11:13:07

手机老是收到垃圾短信怎么回事 安卓苹果垃圾短信拦截设置方法汇总

导读:以下由小编为大家带来手机老是收到垃圾短信怎么回事安卓苹果垃圾

08-21 10:10:07

【科技早报】董明珠首次回应格力落榜世界 500 强;X平台将移除“拉黑”功能

8月20日消息,苏宁易购在近日举办的合作伙伴发展大会上表示,在原有36

08-21 09:11:09

安徽:督导“长牙齿” “双减”见实效

督导“长牙齿”“双减”见实效安徽省人民政府副省长任清华  安徽省委

08-21 07:40:04

2023年首届中国研究生企业管理创新大赛总决赛将在上海大学举行

今年11月下旬,首届中国研究生企业管理创新大赛总决赛将在上海大学举行

08-21 03:56:46

丰田普拉多胎压怎么复位(丰田普拉多胎压灯怎么消除)

想必现在有很多小伙伴对于丰田普拉多胎压灯怎么消除方面的知识都比较想

08-20 22:03:00

新增产能陆续扩产 宁新新材上半年营收增长67%

8月18日晚间,北交所公司宁新新材披露上市后首份半年报。报告期内,公

08-20 19:51:34

新手rap弹舌怎么练_rap怎么样弹舌图解
海油工程:上半年净利同比增103.81%
玉门绿色能源“风光”无限
男子开改装车进境被查!发动机竟藏780个CPU:价值超百万
春风风人文言文翻译(春风风人)
这些行业将迎来新机遇!政策密集出台,投资者热捧,多家公司业绩报喜,机构看好未来发展前景|宏观看点
金圣宫娘娘人物性格(金圣宫娘娘)
大理经开区重大产业项目攻坚跑出“加速度”
加油站敦促以低于政府规定的价格出售燃料
黑暗光年折扣版坐骑,白蛇传奇,西游传奇坐骑最新时装神兽蚣腹
中国地震台网自动测定:四川内江市市中区附近发生4.3级左右地震
中国算力大会盛大启幕,云天畅想参与发起“智能算力创新联合体”
长远锂科:8月18日融券净卖出30.53万股,连续3日累计净卖出51.31万股
西安等14城市,将实现住房公积金互认互贷
8月18日基金净值:富国中证农业主题ETF最新净值0.7505,跌1.64%
五项主要任务、八个重点工程!河南省建设制造强省三年行动计划出炉!
利雅得胜利vs布赖代合作首发:C罗、马内先发,布罗佐维奇出战
湘潭市税务局二分局:税务文化大餐有滋有味
消息免打扰是什么意思
行业进入淘汰洗牌期,千亿建筑陶瓷市场,谁最有望成为龙头?
《纽约时报》:别再用我的内容训练AI 具体是怎么回事?
蔚来欧洲首座换电站启用:换电时间缩短20%
samsonite什么牌子
机械键盘翘边怎么办图解_机械键盘凹进去怎么办
2023珠海养老金计算及领取最新消息,珠海社保交满15后退休可以拿多少?一文教你轻松计算
爱威科技:8月17日融资买入60.4万元,融资融券余额4653.84万元
深化金融支持 服务民企再加码 发挥财政资金对小微企业融资杠杆作用
参会客商纷纷为濮阳氢能公交车点赞
迪马:巴萨与马竞在推进菲利克斯谈判,租借费700万-800万欧
审时度势的领导技巧(关于审时度势的领导技巧介绍)
北京亦庄打造机器人产业综合集聚区
dnf官方电台(DNF电台的二然去那了)
特殊符号怎么在键盘上打出来 特殊标点符号怎么用键盘打
当塞维利亚罚丢最后一粒点球,这位女球迷双手掩面,...
顺威股份(002676)8月17日主力资金净卖出472.36万元
奇精机械:新能源车六合一电驱动系统零部件项目预计8月小批量供货
美联储7月会议纪要暗示或再加息 市场期待的确定性答案落空?
EDG管理层透露,想过签约小虎,但是他拒绝加入拿过冠军的战队
下花园区:诚信服务助推文明景区建设
识楼丨北京天誉:于繁华深处凝萃当代东方雅居
8月16日基金净值:泓德优势领航混合最新净值1.5946,跌1.29%
新技术新跨越 厦门海岸迎来新地标
电瓶充电发热冒气正常吗 电瓶充电发热是怎么回事
7月份商品住宅销售价格小幅波动
归来仍是“少年”|海归创业者赵頔:用青春和热血为制造强国建设贡献最扎实的力量
嘉善复旦研究院今开园!
人工智能系统改善乳腺癌检测
ST有棵树(300209)龙虎榜数据(08-16)
梁山县馆驿镇开展“拥军联盟”成员单位授牌活动
台防务部门紧盯:解放军军机16架次、军舰6艘次在台海周边活动
x 广告
x 广告

Copyright ©  2015-2022 时代纤维网版权所有  备案号:   联系邮箱: 514 676 113@qq.com