MC Skew in standards ◆ITU BT.1359 1998 -30ms +22.5ms ◆ATSC IS/191 2003 -45ms +15ms ◆EBUR37 2007 -60ms +40ms ITU:International Telecommunication Union EBU:European Broadcasting Union ATSC:Advanced Television Systems Committee ITU-R BT.1359 1[1998]Relative timing of sound and vision for broadcasting ATSC IS-191[2003]Relative Timing of Sound and Vision for Broadcast Operations EBUR037[2007I 23 ynh.cxh@ustc.edu.cn
{ynh,cxh}@ustc.edu.cn Skew in standards ITU BT.1359 1998 -30 ms +22.5 ms ATSC IS/191 2003 -45 ms +15 ms EBU R37 2007 -60 ms +40 ms ITU: International Telecommunication Union EBU: European Broadcasting Union ATSC: Advanced Television Systems Committee 23 ITU-R BT.1359 1[1998] Relative timing of sound and vision for broadcasting ATSC IS-191[2003] Relative Timing of Sound and Vision for Broadcast Operations EBU R037[2007]
KC小结:典型音视频同步问题 ◆数据流1:图像帧率是30fps,E 即每隔33.3ms产生一 个完整的图像数据块 ◆数据流2:音频采样频率是44.1k,一般每20ms的 数据作为一个传输数据块 不可察觉门限 B 可察觉门限 0.5 -1.5 可接受门限 声音落后于图像 声音超前于图像 -2 上LLL2141iLLL4LL1 200-160-120 -80 -40 0 40 80100 音视频时间差ms 音视频同步需要的时间精度已有结论,实际系统中如何描述?
{ynh,cxh}@ustc.edu.cn 小结:典型音视频同步问题 数据流1:图像帧率是30fps,即每隔33.3ms产生一 个完整的图像数据块 数据流2:音频采样频率是44.1k,一般每20ms的 数据作为一个传输数据块 音视频同步需要的时间精度已有结论,实际系统中如何描述? 24
KC主要内容 ◆什么是多媒体同步 ▣多媒体同步的定义与分类 ▣音视频的同步容限 ◆如何描述多媒体同步 ▣基于Web的媒体时间关系描述 口基于Petri Net的多媒体时间域信息的描述 ◆典型多媒体设备接口信号的同步机制 ◆典型多媒体系统的媒体同步方法 ◆展望未来 25 ynh.cxh @ustc.edu.cn
{ynh,cxh}@ustc.edu.cn 主要内容 什么是多媒体同步 多媒体同步的定义与分类 音视频的同步容限 如何描述多媒体同步 基于Web的媒体时间关系描述 基于Petri Net的多媒体时间域信息的描述 典型多媒体设备接口信号的同步机制 典型多媒体系统的媒体同步方法 展望未来 25
MC What is SMIL ◆SMIL是同步多媒体集成语言(Synchronized Multimedia Integration Language)的缩写,念做smile。 参与制定该标准的公司包括Compaq、Gateway、IBM、 Microsoft、RealNetworks、Oratrix等等。SMIL与我们 网页上用的HTML(超文本传输语言)的语法格式非 常相似。后者主要针对普通的网络媒体文件进行操纵 (文字、图片、声音、动画、视频的机械堆砌),而 前者则操纵多媒体片断(对多媒体片断的有机的、智 能的组合)。 D.C.A.Bulterman,'SMIL 2.0-Part 1:Overview,Concepts,and Structure,'IEEE MultiMedia,vol.8,no.4,pp.2001,82-88 D.C.A.Bulterman,'SMIL 2.0-Part 2:Examples and Comparisons,'IEEE MultiMedia,vol.9,no.1,2002,pp.74-84 26 ynh.cxh @ustc.edu.cn
{ynh,cxh}@ustc.edu.cn What is SMIL SMIL 是 同 步 多 媒 体 集 成 语 言 ( Synchronized Multimedia Integration Language)的缩写,念做smile。 参与制定该标准的公司包括Compaq、Gateway、IBM、 Microsoft、RealNetworks、Oratrix等等。SMIL与我们 网页上用的HTML(超文本传输语言)的语法格式非 常相似。后者主要针对普通的网络媒体文件进行操纵 (文字、图片、声音、动画、视频的机械堆砌),而 前者则操纵多媒体片断(对多媒体片断的有机的、智 能的组合)。 26 D.C.A. Bulterman, 'SMIL 2.0-Part 1: Overview, Concepts, and Structure,' IEEE MultiMedia, vol. 8, no. 4, pp. 2001, 82-88. D.C.A. Bulterman, 'SMIL 2.0-Part 2: Examples and Comparisons,' IEEE MultiMedia, vol. 9, no. 1, 2002, pp. 74-84
KC用SMIL语言连续播放rm片断 <smil> <head> <layout> <region id="a"left="O"top="0"> <!-定义区域a,使其左上角紧挨播放窗口左上角-> </layout> </head> <body> <Sq心<-定义播放序列-> <video region="r"src="shushan1.rm"/> <video region="r"src="shushan2.rm"> <video region="r"src="shushan3.rm"/> </seq </body> </smil> 27 ynh.cxh @ustc.edu.cn
{ynh,cxh}@ustc.edu.cn 用SMIL语言连续播放rm片断 <smil> <head> <layout> <region id="a" left="0" top="0" /> <!-- 定义区域a,使其左上角紧挨播放窗口左上角 --> </layout> </head> <body> <seq> <!-- 定义播放序列 --> <video region="r" src="shushan1.rm" /> <video region="r" src="shushan2.rm" /> <video region="r" src="shushan3.rm" /> </seq> </body> </smil> 27