8

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

 3 years ago
source link: http://www.jiguo.com/article/article/102515.html
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
neoserver,ios ssh client
谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...-极果
谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...
极果媒体 极果媒体官方账号 3小时前

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

     作者|HENG

     来源|极果编辑部

说到3D电影,大家肯定不陌生了!一个子弹突然飞过来,估计不少人都会下意识地躲开… 确实,那种身临其境的感觉太逼真了!

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

开个脑洞,如果把这种3D效果用在视频通话上呢?也就是 —— 3D视频通话;这样,家人和朋友不在身边时,不但能通过屏幕看到对方,更像是坐在面前一样聊天。

事实上,这一幕看似很科幻很未来,但已经被谷歌做出来了。前几天,谷歌于Google I/O大会上正式发布了一项黑科技计划 —— Project Starline,这项计划已经研发5年时间,研究的就是3D视频通话。

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

使用者就像看3D电影一样和对方聊天,而两人似乎真的坐在了一起,十分逼真。不过,背后的原理是什么?我们什么时候能用上?极果君今天就来聊聊它。

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

与普通视频通话一样,谷歌Starline的3D视频通话也是在屏幕前进行的,但其完整形态是类似化妆台的“格子间”,使用者需要坐在专门的座位上才能开始3D视频通话。

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

可以看到,屏幕中不再是二维画面,而是与真人1:1的三维立体显示,对方每一个动作、身上的细节,甚至阴影都能“真实”展现,就像真的坐在眼前一样。如果是第一次,恐怕都会忘了中间还隔着一块屏幕,而伸手去触摸吧!

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

看似炫酷,但原理很好理解。简单一点,可以根据3D电影的逻辑去理解,即拍摄、后期处理、播放三个环节。

首先,一般的摄像头肯定不行,必须能拍出立体影像,而且拍摄角度也不能单一。谷歌的介绍是,Starline使用了十多个高分辨率摄像机和定制深度传感器,从多个角度捕捉使用者的外形和外观,形成3D模型;其实就是模拟人眼去感知对方,在“脑中”形成立体画面。

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

这就是为啥需要使用者坐在特定的“格子间”里,其前后都布满了摄像头和传感器。

其次是处理。要知道,视频通话一开始,这么多摄像头和传感器同时工作、将捕捉的内容融合形成极其细致3D模型,每秒产生的数据可多达几千兆比特,当前的网络肯定传输不了,更别说还是实时的。

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

所以,为了可以通过现有的网络发送如此大尺寸的图像,谷歌开发了新的压缩和流媒体算法,使数据体量减少超过100倍。这样下来,一般的办公网络才可以流畅使用。

最后,就是将压缩的3D图像实时传输给对方,也就是“播放”环节。

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

但你应该注意到了,使用者并没有佩戴任何3D眼镜或头显等设备,因此,要让屏幕上的画面呈现出3D立体效果,还要用到裸眼3D技术。

其中玄机,就是使用者面前的那块65英寸的显示器 —— 光场显示器。同样,这块光场显示器也是谷歌特别研发,可以展现对方的真实面貌。

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

看到这里,不得不说很震撼。实际上,谷歌Starline这个项目已经研发超过5年时间了,可见3D视频通话看似简单,但背后的技术却极为复杂。

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

相比于谷歌Starline用到的十多个摄像头和传感器,估计大家更感兴趣的还是其3D显示技术吧,毕竟,裸眼3D显示的魅力几乎让人无法抵抗。

去年5月,韩国SMTown楼前的LED大屏上突然出现“巨浪”,网上引起不小关注,你肯定不陌生。

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

不过,这种“裸眼3D”显示方式比较讨巧,利用的是透视原理和人眼视差而形成的3D假象,需要在特定的角度(90°转角处)才能看出逼真的立体效果。

同样的原理,国内也有不少城市安排上了“裸眼3D”大屏,比如成都、重庆、西安等,吸引不少游客前往打卡。

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

此外,还有舞台上的全息3D显示技术,比如初音未来的演唱会,以及2013年周杰伦与邓丽君的同台对唱等等。

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

与这些户外大型3D显示不同,谷歌Starline用的却是看似很普通的显示器,那具体的差别是什么呢?

先回顾上文所说的,Starline通过不同角度的十多个摄像头和传感器,模拟人眼一样去感知聊天对象,然后融合、渲染成立体图像。

但要想这一立体图像“真实”地进入人眼,显示器也必须是“三维立体”的才行,特别之处在于,谷歌用的是「光场显示器」。复杂的原理就不多说了,只需要知道,利用光场技术,能让显示器模拟出真实环境下的发光方式,人眼再看到显示器里图像,就像真的一样了。

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

重复一遍!首先,摄像头和传感器模拟人眼去感知聊天对象,并形成“真实”的立体图像;然后,光场显示器再模拟真实环境将“聊天对象”呈现到使用者眼前,从此形成“面对面”的聊天效果。

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

实际上,无论是国内还是国外,光场显示技术的研究早就在进行了。比如,北京邮电大学的桑新柱教授就于2018年发布过“3D悬浮光场显示”的研究成果,除了裸眼3D显示,还能直接用手与图像“交流”。

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

虽然大家都在研究,但由于量产、成本等复杂因素,商用依旧很难。

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

同样,尽管谷歌表示Starline是一项长期研究,已经进行5年了,但真正的落地估计还得等一段时间。此前,有外媒去现场体验了一番发现,如果坐着的时候挪动位置太大,3D立体感会消失,所以还得等谷歌的进一步改善吧。

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...

目前来看,谷歌Starline这套3D视频通话设备(姑且先叫它设备吧)应该造价不菲,而且不会面向普通消费者。

谷歌也说了,Starline正在与医疗机构、媒体等企业合作。的确,如果它能用在远程医疗上,肯定会是个不小的成就;和媒体领域的合作不言而喻,就是在远程办公场景了 —— 面对面开会。总之,无需佩戴任何设备就能看3D,这种感觉还是很爽的。

想象一下,未来手机、平板、电脑都是裸眼3D的话…… 其实,索尼去年10月就发布过一款裸眼3D光场显示器,售价4999.99美元。(想体验又财力雄厚的话可以试一试)

谷歌造了块神秘「黑玻璃」!相隔万里面对面聊天,身临其境太炫酷...


About Joyk


Aggregate valuable and interesting links.
Joyk means Joy of geeK