AR 和 AI,将迎来一个相互成就的机遇。 今年的 CES,必定离不开两个关键词,XR 和 AI。 就在开幕前两天,1 月 8 日,苹果公布将于 2 月正式出售客岁推出的夹杂现实头显产物,Apple Vision Pro。 这让 XR 产物再次成为了今年 CES 的焦点,曩昔数年,一切人都在期待 XR 的「iPhone 时辰」。随着苹果正式入局,期待被带向一个至高点。 今朝 XR 市场的热度很高,资金和关注度的高潮高涨,但仍然鲜有一款产物能做到「一锤定音」。从几百元的音频眼镜,到数万元的 Apple Vision Pro,厂商都还处于摸索的阶段。并没有出现一款产物,像 iPhone 之于智妙手机一样,界说一个明白的未来形状。 市场期待的,与其说是某一个品牌的某一款产物,不如说是一个真正可用、有用、好用的产物范式。 曩昔十年,XR 范畴的焦点一向集合在 VR 头显上,AR 眼镜的技术线路,在几家大厂尝试并失利以后,一向处于被轻忽的行业「背阴面」。 但随着技术和市场的成长,AR 产物范式的表面正逐步浮出水面,变得愈发清楚。就在今年的 CES 上,雷鸟创新展现了旗下最新一代的 AR 眼镜产物雷鸟 X2 Lite,不但实现了双目全彩显现,还将整机重量降到了 60g 左右,几近到达了普通墨镜的水平。 雷鸟 X2 Lite | 来历:雷鸟创新 与此同时,AI 大模子技术的出现,也为 AR 眼镜的未来,供给了一些全新的利用思绪。 01 重回正轨的 AR 眼镜 自 2015 年,上一波 XR 高潮起头,头显装备的主旋律就一向是 VR。 不管是早期的 Steam VR、PS VR,还是后来被 Meta 收买的 Oculus,他们产物的焦点利用都是游戏,要把用户置于一个虚拟天下。 2020 年,随着居家办公、文娱成为一大趋向,「元宇宙」概念起头风行,并终极致使 Meta 决议 all-in 元宇宙,掀起了第二波 XR 高潮,影响了一整代 XR 产物的设想思绪。 到明天,大部分具有 AR 才能的头显,包括 Oculus、Pico 的产物,以及 Apple Vision Pro,采用的都是「摄像头拍摄,头显内屏幕显现画面」的 VST(video see-through)计划。 这类 MR 产物虽然具有一定的 AR 才能,但从设想上,它们全都以「头显」的形状显现,仍然是「仅限于在室内利用」的装备。 与此同时,也有很多厂商在摸索 AR 的另一条路——OST(optical see-through)计划,尝试打造一款实在的「全天候 AR 眼镜」。 与 VST 是将里面的物理天下以视频化的方式投入人眼分歧,OST 是让物理天下以光学透视的方式进入人眼,并经过设惫亓光机叠加数字信息,从而实现增强现实的结果。明显,从硬件的终极形状上看,OST 才是 AR 的最优处理计划。 AR 的本质是真假融合,OST 以高透过率的光学计划,让虚拟画面间接投映在现实天下中,可以大大削减了对装备的提早、坐标定位、传感器、算力、功耗等方面要求。 十几年前,最早将 AR 概念带入公共视野的谷歌眼镜采用的即是 OST 计划,尔后包括微软的 HoloLens,以及明星创业项目 Magic Leap,也相沿了这一计划。 但这些曾被寄与厚望的 AR 项目都在消耗市场遭受了困难,终极转战 B 端。其缘由,不可是本钱太高、售价动辄数千美圆,且显现、佩戴等体验差强人意,利用处景也很是有限。 OST 计划最大的困难在于光学显现。 早期谷歌眼镜采用的棱镜计划,投射出来的图像尺寸小、亮度低、存在较大畸变,棱镜镜片的厚度、重量也很大。以后也出现过 Birdbath、自在曲面、全息透视等光学计划,各自都有优点,但也都各自存在视场角、亮度、清楚度、重量等方面的短板,没法支持一款真正可以到达「通用级」的装备。 在各类光学计划中,天花板最高的还是光波导计划。简单来说,其道理是经过在通明的镜片内部构建可供光芒传布的通路,将微型显现模块发出的光,指导至镜片的显现地区,叠加在用户的视野上。 除了光学系统,显现更是一大技术困难。它必须充足小、功耗充足低,但同时又必须供给超高的亮度,才能保证在户外超强的布景光下,用户也能看清眼镜上显现的内容。普通的 LED 显现技术难以微型化,硅基 OLED 则达不到充足的亮度。能到达 AR 眼镜要求的光机,MicroLED 是最优解。但 MicroLED 全彩化计划方面整体技术难度较高、且量产良率低,今朝市道上的产物根基只能做到单色。 雷鸟是最夙起头尝试将全彩 MicroLED 技术利用到消耗级 AR 眼镜上的公司之一。经过将红、绿、蓝 3 个单色 MicroLED 屏幕分解彩色显现计划,雷鸟打造了出了第一代超小型全彩 MicroLED 光引擎,并实现了全画幅像素微米级的高精度对齐。2021 年 10 月,雷鸟公布了第一代双目全彩 MicroLED AR 眼镜——雷鸟智能眼镜先锋版。 尔后,雷鸟又自研了全彩 MicroLED 量产处理计划,并连续在全彩显现、光波导亮度、全自研光引擎紧密及小型化等关键技术上停止攻坚,将 OST 显现技术从尝试室推向市场。 02 消耗级 AR 眼镜 的产物新范式 这一系列 OST 显现技术的创新,集合表现雷鸟旗下的两款真 AR 眼镜上——雷鸟 X2 和雷鸟 X2 Lite。 雷鸟 X2 是雷鸟创新客岁公布的产物,也是全球首款量产和出售的双目全彩 MicroLED 光波导 AR 眼镜,它能实现>85% 的镜片透光率、1500 nits 的峰值入眼亮度,和 3D 全彩显现,即使在阴沉的室外,也能清楚显现内容。 而雷鸟 X2 Lite,是 X2 的迭代版,整机轻量化有了周全提升。全彩光引擎经过新一轮极限缩小,重量下降了 30-40%,连系波导设想、材料创新上的冲破,以及全新的产业设想,雷鸟 X2 Lite 的整机重量畴前代的 119g,下降到了 60g 左右。这个重量已经低于很多时髦板材眼镜,对用户来说,则意味着它可以实现全天候的无负担配戴。 来历:雷鸟创新 光学显现系统的改良,为 AR 眼镜供给了一次「重回正轨」的机遇。明天的 AR 眼镜不再粗笨,显现结果也有了充实保障。 而在利用层面,陪伴着硬件形状简直定和芯片算力的提升,AR 眼镜利用处景的界说也在变得越来越清楚。从面临面翻译、AR 导航,到 Widgets 小组件和昂首显现……AR 眼镜的利用处景并不像 MR 头显一样,与手机、电脑相互排挤,而是可以全天候佩戴,融入用户当下的数字生活,与手机电脑协同工作,互为补充。 假如与此前的小我计较装备相比,MR 头显更像是「台式机」,AR 眼镜则像一款移动装备。在履历了十几年的寂静,持久被疏忽以后,AR 眼镜终究回到了成长的正轨上。 除了大幅改良光学计划,雷鸟 X2 Lite 还有另一项关键的技术,是其搭载的与高通合作的新一代 AR 芯片——骁龙 AR1。 AR1 是高通专门为 AR 眼镜打造的芯片平台。斟酌到 AR 眼镜产物极致的轻量化需求,AR1 把能效控建造为一个关键的目标停止了优化,芯片自己的体积也大幅缩小,这也是 X2 Lite 能相比前代产物减重一半,并仍然能连结杰出散热的缘由之一。 此外,AR1 搭载了高通的第三代 NPU Hexagon,大大提升了神经收集的计较才能,这帮助 X2 Lite 更好地优化图像和光学的算法,从而下降提早并提升了终极的佩戴体验。 03 大模子为 AR 带来新的能够性 除了硬件自己,雷鸟 X2 Lite 的另一个严重的更新是 AI 才能的加持——雷鸟 X2 Lite 加入了 AR 眼镜的大模子语音助手 RayNeo AI。 Reyneo AI 将传统的系统语音助手与 AI 大模子买通,加入了多轮自然说话对话、高低文了解、路程计划、百科回答等才能,极大扩增了 AR 眼镜的利用处景,让用户可以以一种加倍自然的方式,与现实天下停止信息层面的交互。 举例而言,以往计划旅游路程时,用户需要经过量个软件,查询天气、交通等信息,而有了 RayNeo AI 的加持,只需要戴上眼镜,即可一次性完成天气、出行交通、景区景点等信息查询,快速计划小我路程。据雷鸟先容,未来,RayNeo AI 还将加入视觉了解才能,进一步摸索多模态信息交互才能和场景,帮助用户实现「所见即所知」。 大模子具有的,是反动性的「处置信息」的才能,而 AR 眼镜能倾覆的,则是「输入输出」的效力。AR + AI 的化学反应,还存在更多能够性。 作为一个全天候佩戴的产物,AR 眼镜可以将大模子才能带入实在的高频场景。不但是语音助手会变得更好用,翻译、识图识物、导航等等利用,都能够经过与大模子才能连系,获得体验的跃升。 AR 眼镜作为一个架在用户眼前耳边的装备,它间隔用户所感知的信息,自然是比来的,也更便于大模子发挥它的多模态处置才能,让大模子成为用户的「信息处置前端机」,实现很多无感的交互设想。 打个简单的例如,现在用户拿到一份纸质材料,也许要用手机摄影,图片转笔墨,再输入到 GPT App 里,让 AI 停止翻译,天生摘要。而假如经过一款具有大模子才能的 AR 眼镜,能够当用户看向这份材料的时辰,大模子就已经完成了信息的提取、处置,把成果显现在 AR 眼镜上了。 对于 AR + AI 的化学反应,雷鸟创新 CEO 李宏伟也暗示,关键在于处置和交互的效力提升:「AR 眼镜实现了跟感官系统的高度分歧性,可以做到看你所看,听你所听,在你眼前,在你耳边,你不需拿起手机便可以实现一切的信息交互。」 雷鸟创新 CEO 李宏伟在极客公园创新大会舞台上演讲 | 来历:极客公园 从这个角度来说,AR 和 AI,正迎来一个相互成就的机遇,有机遇界说一种全新的,未来的信息终端。它能够会成为用户一种新的「外脑」,与用户眼睛、耳朵同步接收一样的信息,经过大模子才能停止处置,给到用户有参考代价的成果。 在履历了 11 年的寂静以后,AR 眼镜终究迎来了一个「翻身」的机遇。对 AI 行业来说也是一样。究竟当下大模子成长的一大困难,就是一切公司都在卷参量和范围,而罔顾了利用处景、效力和本钱。想要实现成功的利用、贸易转化,大模子必须停止更细的场景分别,与产物更慎密连系。 这类新的硬件范式与新的大模子才能连系,带来的全新利用处景,将不但改变雷鸟一家企业的命运。就像 iPhone 和 App Store 开启了全部移动互联网数代一样,AR + AI 有潜力倾覆的,将会是全部行业。 |