1-多媒体通信概述

媒体和多媒体

媒体

承载信息的载体.

感知媒体, 表示媒体, 显示媒体, 存储媒体, 传输媒体.

多媒体

Varity

处理对象的多样性: 视觉, 听觉, 触觉, 味觉, 嗅觉;

AOS: Artificial Olfactory System 电子鼻;
ATS: Artificial Taste System 人工味觉系统;

Intergration

第四媒体: 互联网媒体

Interaction

手势识别, 眼球跟踪, 脑机接口…

VR：Virtual Reality，虚拟现实技术，借助计算机等设备产生一个逼真的三维视觉、触觉、嗅觉等多种感官体验的虚拟世界，从而使处于虚拟视觉中的人产生一种身临其境的感觉。

AR：Augmented Reality，增强现实技术，运用多媒体、计算机视觉等技术，将计算机生成的问题、图像、3D模型、音乐等虚拟信息仿真后，应用到真实世界中，实现对真实世界的“增强”。

MR：Mixed Reality，混合现实技术，是现实世界和虚拟世界的融合，以产生新的环境和可视化。

XR：Extended Reality，扩展现实技术，有计算机技术和可穿戴设备产生的所有真实及虚拟环境的结合以及人机交互, 是VR, AR, MR的总称.

3GPP TR 22.847中对Multi-modal interactive system的解释: 在多模互动系统中，模态是特定互动系统中信息的一种类型或表示。多模互动是指在此过程中多种模态的信息交换。模态类型包括动作、情感、手势等。模态表示包括视频、音频、触觉（提供触觉感受的振动或其他运动）等。

3GPP: 第三代合作伙伴计划，是领先的3G技术规范机构，由欧洲的ETSI，日本的ARIB和TTC，韩国的TTA以及美国的T1在1998年底发起成立，其主要目标是实现由2G网络到3G网络的平滑过渡。

多媒体通信(MMC)

使用多种媒体形式来表示, 存储, 检索和传播机器可处理的信息.

同步:

1. QQ音乐, 声音, 歌词, 动画的展示 --> 时间关系. 保持和维护各个媒体对象之间和各个媒体对象内部存在的时态关系, 组织多种媒体序列以实现某种特定的表现任务.

ADAS: Advanced Driver Assistance System

2. 不同地理位置副本信息的一致性.
3. 不同媒体内容的转换和同步: 声音和文本的内容一致.

网络承载:
SDN: 网络全局感知和智能管理
数字孪生: 现实物理系统向赛博空间数字化模型的反馈
数字孪生网络: 将数字孪生技术应用于网络, 创建物理网络设施的虚拟镜像.

业务类型

MMC主要问题和关键技术

主要问题

处理对象: 音频, 图像, 视频

基本问题: 保证质量的音视频实时传输.

关键技术

MMC发展动向

重要事件

交互: 手势/姿势, VR, 脑电/肌电, 脑机接口, 指纹识别, 面部识别;

通信: 5G, 天通卫星业务, Starlink.

趋势

1. 所有媒体的电子化;
2. 钱的电子化;
3. 家的电子化;
4. 车的电子化;

IoT : Internet of Things

标准化组织

ITU: 国际电信联盟
ITU-T: 国际电信联盟电信标准化部
ITU-R: 国际电信联盟无线电通信部
ITU-D: 国际电信联盟电信发展部;

IETF: 互联网工程任务组