文章作者:白鹿第一帅,作者主页:https://blog.csdn.net/qq_22695001,未经授权,严禁转载,侵权必究!
元宇宙概念最早出现于小说和影视作品中,逐步映射到现实世界。人类自诞生以来就有各种超现实幻想:神话、玄幻、魔幻、科幻等,在不同的历史时期具有不同的承载媒体。
远古时期 | 农业文明 | 工业文明 | 数字文明 | 人机融生 | |
---|---|---|---|---|---|
媒体 | 传说、壁画 | 文字 | 影视 | 游戏、VR等 | 脑机 |
体验 | 第三视角,无互动 | 第三视角,无互动 | 第一视角,可互动 | 第一视角,可互动 |
元宇宙的发展从 1981 年的小说世界映射到如今微软以 687 亿美元收购动视暴雪走过的历程,具体如下图所示:
如今,元宇宙的发展进入到各行各业,整个元宇宙的应用在向虚实融合、实时互动方向演进,具体如下图所示:
结合到以上元宇宙的发展趋势,华为云提供了非常完整的解决方案,Metastudio 联合生态伙伴,打造了场景化的 3D 数字内容生产和应用开发全栈能力,有数字人、虚拟直播、虚实融合和企业 3D 空间四大生产线。
在核心业务层提供建模、资产管理、编辑、渲染四大能力。
在企业 3D 空间,聚合媒体服务全栈能力,围绕文旅空间、展厅空间、零售空间、地产空间 4 类场景打造 3D 空间,具体如下图所示:
其中包括数字人、直播点播、传输、图形引擎、RTC 实时互动服务一系列能力,文博场景现在在各个领域有大量应用,与亚太文融联合发布了文博跑酷的游戏。同时华为云也打造了自己的线上展厅,在零售虚拟空间中实现卖货、带货,以及新品发布、品牌展示等。在地产行业实现沉浸式看房、数字沙盘等。其中关键技术,包括低码化、无码化的 3D 空间的构造,高精度,智能交互数字人,千人同服,低时延互动,低成本,高清实时渲染等相关的一系列能力。
政策导向:传承弘扬中华优秀传统文化。深入实施中华优秀传统文化传承发展工程,强化重要文化和自然遗产、非物质文化遗产系统性保护,推动中华优秀传统文化创造性转化、创新性发展。针对于虚拟化文博空间和复刻文旅空间实现“对症下药”。
对于虚拟化文博空间:
对于复刻文旅空间:
如下对应案例,用户可以现在在空间中切换相应场景,并与导览员进行沟通,其中还结合了一些非常有趣的游戏,进行线上线下的结合。
以营销服务场景为核心全面升级,新增多点、多维度的展示、交互、共享、传播及可控的线上展示和沟通能力。商品展示高还原度 90%,数字资产高精度 ±0.02MM,内部结构拆解,工艺可见,消费放心。针对于虚拟展厅空间和写实展厅空间实现“对症下药”。
对于虚拟展厅空间:
对于写实展厅空间:
数字人 IP 打造 3D 营销员元宇宙空间,在线上连接用户、品牌商、加盟商,典型应用案例,如同东莞台铃电动车联合打造虚拟偶像——爱铃/AI-LING 数字人 IP 形象,结合企业文化,让数字人成为一个形象代言,成为新数字 IP,具体如下图所示:
应用背景:
解决方案:
客户收益:
数字人内容生产基于自动化建模和 AIGC 两代数字内容生产技术。在虚拟空间中需要有虚拟人形象,数字人内容生产是一个非常基础、重要的能力,平台提供了一个底层的生产协作平台——云桌面,可以使创作者从单人桌面转换到多人协同工作,基于云桌面超高清共享,实现 4K 60 帧高精度内容创作。
协作平台提供数字人生产线,结合 AI 技术提升生产效率,自动化建模,通过面部 276 个特征点识别自动绑定,使数字人生产时间缩短 80%,自动化建模后,自动化捏脸结合 AI,直接跳过低、中、高建模过程,直接生成数字人,通过视觉和语音驱动,将数字人形象在虚拟直播场景结合,最后生成相应的视频制作内容。
数字人里最核心技术——智能视觉驱动,如何让数字人像真人一样,除了外表美丽,也有非常有趣的动作呢?
在虚拟直播场景中,预置多直播平台连接,连接字节、斗鱼、虎牙、保利威等主流平台,一键开启数字人直播。通过底层视觉驱动技术,利用单目摄像头,即普通 RGB 摄像头驱动数字人,无需专业动捕面部设备,其中在动作识别精准度和动作流畅度方面都做了大量优化。在驱动上,不仅是简单骨骼的限制,也结合到动力学原理和 AI,同时结合了音视频编解码技术,通过低时延传输,让整个动作非常流畅。
内容生成更加简单,只输入简单几行文字,就可以通过 AI 语音驱动让数字人去相应播报,支持各语种播报,准确度非常高。数字人在语音驱动过程中与视频驱动类似,通过连续差帧技术,实现口型、表情变化平滑过渡,使表情效果 MOS 分达四点多,远超业界。
云渲染是非常关键的技术,基于云原生自研图形引擎,可以做到时空复用、以存代算,让整个 3D 空间元宇宙在云上渲染出影视级画质,多 GPU 间的实时调度,实现 10 亿级面片渲染,可以做到 8K 60 帧实时渲染。
同时结合多视角共享渲染计算,时空复用实现多用户计算成本增长,整个性能提升十倍,通过端云协同渲染,借助云上算力,大幅降低端测渲染功耗,同时也使得运行带宽大幅降低。AI 离线渲染加速使图片以及视频渲染相比传统渲染能够加速四倍。
在 3D 空间中,除渲染提供影视级效果,也要把渲染出来的内容触达到用户侧,这涉及到媒体实时传输技术。通过自研 3D 实时传输协议支撑高清画质,可以达到 4K 60 帧画质。在传输过程中存在的弱网情况,如网络切换过程中、在进入电梯环境中,能够保证高清画质体验,涉及到 3D 编解码及传输技术,使得在传输过程中既能自适应网络的变化也能实现低时延传输的效果。
在面向发布会等场景,要求在一个空间中需要做到千人甚至万人互动,需要非常大的多人同服技术能力,需要分布式消息引擎支撑上一级信息数据发送及同步,才能让虚拟人在空间中互动起来,流畅体验元宇宙的魅力。
文章作者:白鹿第一帅,作者主页:https://blog.csdn.net/qq_22695001,未经授权,严禁转载,侵权必究!
我是白鹿,一个不懈奋斗的程序猿。望本文能对你有所裨益,欢迎大家的一键三连!若有其他问题、建议或者补充可以留言在文章下方,感谢大家的支持!