谷歌Pixel 4手机前置摄像头,现已支持实时3D捕捉

(1/2)
客户端
东方号

举报

举报原因:
东方资讯  >   科技 频道  >  正文

谷歌Pixel 4手机前置摄像头,现已支持实时3D捕捉

近期,谷歌发布了一种专为Pixel 4前置摄像头模组的动态红外深度传感器uDepth打造的点云实时可视化方案。据悉, uDepth传感器此前用于Pixel 4手机的面部解锁功能,而现在可通过谷歌提供的摄像头API接口,将红外传感器用于提升实时立体自拍性能,刷新率可达30Hz。

开启该功能的方法很简单,只需要在Pixel 4的相机应用中,点开左下角热图和色彩可视化之间的开关,启动Social Media Depth设置,然后通过拖拽就可以改变立体相片的视角。

与传统基于RGB立体深度感知技术的方案相比,谷歌这个新方案的优势在于红外传感器的运行速度更快,可识别光线暗、纹理细节少的场景。

据了解,uDepth传感器结合机器学习算法,除了面部识别外,还支持后期修图、深度场景分割、背景模糊、人像特效和3D拍照等。其原理是,在一颗摄像头捕捉到的图像中寻找和另一颗摄像头捕捉到图像中相似的像素,通过匹配像素,对齐两张图像,并预测深度。对于纹理少的区域,则通过对场景的红外投影来实现深度识别。

细节方面,机器学习算法会通过亮度和像素周边信息来匹配两颗摄像头捕捉到的图像,经过校正后失误率小于1.5毫秒/帧。考虑到手机磕碰可能会影响摄像头的校准状态,uDepth会先识别任何校准误差,然后根据当前场景生成立体图像。

此外,uDepth结合识别到的深度数据、人像分割、彩色图像,通过AI模型来推断/生成完整的3D深度图。据谷歌称,这个AI模型是在此前青亭网曾报道过的由331颗LED、90个1240万像素、60Hz刷新率的摄像头组成的球形容积摄影装置中训练而成。具体来讲,就是将Pixel 4手机与容积摄影装置的LED灯和摄像头同步,创建结合真实图像与合成渲染的相片。

0条评论

点击进入 更多跟帖
热门推荐

联系我们|eastday.com All Right Reserve 版权所有