浅谈面向元宇宙的技术之——全息视频通话.docx

《浅谈面向元宇宙的技术之——全息视频通话.docx》由会员分享，可在线阅读，更多相关《浅谈面向元宇宙的技术之——全息视频通话.docx（5页珍藏版）》请在优知文库上搜索。

1、近年来，随着数字化办公、“非接触式”服务的广泛普及，音视频通话成为远程办公过程中主要的沟通方式。然而，音视频通话的画面目前都是二维平面，存在感官上的距离感。随着显示技术的发展，提供裸眼三维视觉体验的全息技术在实际应用上取得了较大的突破，并成为业界的研究热点，如谷歌近期研发的全息视频通话项目ProjectStarline,能让身处异国他乡的亲友、同事、合作伙伴打破空间的限制，在通话的时候以虚拟影像的形式“坐”在你的面前，与你自然地沟通交流。ProjectStarIine项目的出现引发了业界广泛关注。一、全息视频通话技术概述全息视频通话技术是现有二维视频通话的视觉升级版，借助三维重建、实时渲染、全

2、息投影等技术实现实时面对面裸眼三维视频通话，给用户提供沉浸式“面对面”的沟通交流体验，且无需佩戴眼镜或头盔。目前，实现全息视频通话主要有两种技术路线：一种是基于视觉特效的技术路线，技术上虽然可行，但在使用上有一定的限制要求；另一种是基于三维重建的技术路线，现阶段仍不成熟。1.基于视觉特效的技术路线基于视觉特效的全息视频通话在采集、传输、播放等环节的画面数据都是二维图像数据，其核心是利用三维视觉增强技术和全息舱显示装置（如图1所示）来实现三维视觉效果。全息舱是一种透明屏展示柜，柜体前部是一个透明LCD显示屏，画面的白色区域屏落不发光显示，观看者可透过屏幕看到柜体内部,从而获得三维景深的视觉体验。

3、图1全息舱显示装置2.基于三维重建的技术路线基于三维重建的全息视频通话在采集、传输、播放等环节传输的画面数据都是三维数据,核心是利用软件算法复现三维人物、空间来实现全息视觉效果（如图2所示）。目前，基于三维重建的全息视频通话在技术上仍不成熟，存在多镜头数据编解码、实时三维重建等技术难点。两种技术的对比情况见表1。220cm183cm图2基于三维重建的全息视频通话模型表1两种技术对比基于视觉特效的技术路线基于三维重建的技术路线技术成熟度技术成熟，应用案例广泛技术不成熟，尚无实际落地案例画面采集高像素普通摄像头多个专用摄像头传输的画面维度二维图像三维图像传输协议RTSP/RTMP等协议画面播放全息

4、舱专业三维显示装置二、全息视频通话技术在业界的应用概况目前，基于视觉特效的全息视频通话技术在点对点、多方视频通话以及一对多直播等场景有相关落地案例，其中，比较典型的案例是2022年冬奥会上张勇与巴赫的全息会面。2022年2月6日，身处北京冬奥场所的国际奥委会主席巴赫通过全息舱“现身”2022北京新闻中心展区，与远在上海的阿里巴巴集团董事会主席张勇隔空“云聚”会面，以全息形态送出奥运寄语，又在“现场”隔空传递冬奥火炬，如图3所示。图3国际奥委会主席巴赫通过全息舱送出奥运寄语基于三维重建的全息视频通话技术目前还不太成熟，尚处于实验室技术原型验证阶段，代表性的项目是GoOgIe于2021年公布的全息

5、视频通话技术PrOjeetStarline0ProjectStarline是一个三维视频聊天室，旨在取代一对一的二维视频电话会议，让用户有非常真实的现场感，但据用户的现场体验反馈来看，观看者只能在特定角度、特定距离范围内观看才能体验到立体视频聊天效果，与宣传片效果差异很大。三、全息视频通话技术在银行业的应用全息视频通话技术提供的“面对面”实时音视频交互能力将推动交互方式的升级换代，在对客服务和内部运营方面将会构建新的金融服务模式，拓展银行业务发展空间。网点远程协助：在远程银行中心与一个或多个支行网点之间搭建点对点的全息视频通话服务，让银行业务人员与客户通过线上方式远程交流互动，为客户提供和现场面对面相同的服务体验，拓展了全新对客服务渠道。全息视频会议：可基于现有视频会议平台，利用全息舱、三维视觉增强等技术来打造具有科技感、未来感的行内会议系统，丰富办公形式和用户体验。当前，全息视频通话技术在应用上还有一定的局限性，如需要定制化的采集场地和全息舱等设备，相信随着技术的不断进步，未来用户能够体验到如同好莱坞大片中的全息视频通话方式，提升人与人之间的远程交互体验。