多媒体通信网络设计的基本目标就是向广大网络用户提供文字、视像、图形、话音等不同类型信息的综合信息服务。这里综合的含义之一是:这些不同类型的信息之间,往往是按一定时、空的同步关系,综合表征某一具体事物特征的。我们可以从以下一些简单的多媒体网络应用例子中看出各种多媒体信息之间的这种时、空关系:
* 电视电话、电视会议看到对方表情和讲话动作与所听到的话音同步――唇音同步; * 点播视像画面动作与配音的同步; * 多媒体信息查询中图形、图像、话音、文字信息应同步表现; * 多媒体教育、训练及虚拟现实中各种图像、话音、文字和控制操作应协调同步; * 多媒体动画表现中动作与话音的同步; 以下因素可能破坏这种同步关系: * 各种信号从不同途径采用不同采集方法引起的延时差异; * 各种信号采取不同的压缩方法和标准而引起压缩、解压缩过程的耗时不同; * 网络中对不同信息类型信号可能作不同处理而产生的差异; * 网络中不同信号传输延时的不同; 其中网络传输延时的不同可能是影响多媒体信号同步表现的主要因素,为此,在多媒体网络传输中,常采用以下一些措施来尽量保证多媒体信号最终表现的同步关系。 * 在发送端处设置一定的缓冲区,把相关的应该同步表现的多媒体信号在缓冲区内取齐后“同时”发送; * 可能条件下各种相关多媒体信号分别采用相适应的固定线路传送,以期取得比较一致的延时,或者尽量采用延时比较稳定的通信线路;
在相关的不同信号上加时间标记,具有相同时间标记的信号同时播放。这需要在接收端也设置一定的缓冲区,使不同延时到达的相关多媒体信号,在缓冲区中取齐后再组织播放。
|