还剩87页未读,继续阅读
本资源只提供10页预览,全部文档请下载后查看!喜欢就下载吧,查找使用更方便
文本内容:
多媒体期末思考、多媒体数据的主要构成部分是1哪些?多媒体同步主要研究哪些问题?()主要构成部分多媒体数据构1成的主体部分是不同媒体的数据,(即成分数据)多媒体数据之间2的约束关系,即同步规范为hmaxpl=Tl+B=MAX{pi-ai}=MAX{p l-dUmaxi-Tl}=⑶由-Min{di}=Amox-Amin上面可知pl=Tl+di当〜〃,时,要想盲足播d2放概率庐99%即满足P{pl=Tl+di}=7=99%==设P{di=pl-Tl}=
0.01,0A=
0.01则有pl-Tl=Aa+g,a+、有如图==pl=Tl+A43所示的多媒体信息查询系统,用户所需的信息由视频流和音频流按一定的时间关系复合而成,但这两类信息却分别存储在不同的地点,试问影响接收端进行同步播放1的因素有哪些?假设收、发端时钟频率无2偏差,支路的延时范围分L2别为和[Amm,Amax][6min,6max],B.6max^max,6minAmin同时假设每个LDU包头中有记录发送时刻的时t0间戳,请给出保证视频和音频数据流在接收端能同步播放的起始延时时间如果在播放过程中,发现音频3流超前于视频流,你建议如何调整?答延时抖动,时钟频率偏差,1不同的采集起始时间或不同的延时时间,不同的播放起始时间,数据丢失,网络传输条件变支路一的起始延时时间为2;D1=Amox-Amin支路二的起始延时时间为D2=6max-6min;因为6min^min,所以又因为两式相加67noxAAmax,得8max-8min^max-^min,即D2D1,所以起始延时时间为6max-D2=6min因为通常情况下音频流作为主3流,视频流作为从流所以可以保持音频流速率不变,加速视频流的播放速度或者跳过某些视频流数据单元、试述多媒体时间域信息的描述5方法由时间模型来描述多媒体时间域信息其中一个描述时域信息的时间模型由基本时间单位、关联信息和时间表示技术三部分组成基本时间单位分为时刻和间隔两种类型关联信息:反应时域事件的组织方式分为定量关联信息(场景中的各时域事件相互独立,可以单独地描述每一个时域事件在场景中的位置,从而间接地反映时间关系)和定性关联信息(场景中的各时域事件彼此相关,关联信息中包含对时域事件约束关系的描述)两类时间表示技术依照关联信息定义场景中各事件与时间轴之间对应关系的方法此外,典型的时间模型还有时间,轴模型,需时间轴模型模OCPN型等
6.试用时间轴模型和两种OCPN模型描述图中的时域场景,其中4视频和音频数据流之间的同步偏差(要求小于等于这需要40ms40检查一下同步ms情况IVtS、服务器按自己的时钟向客户端7传输一个长度为半小时、帧率为25帧/秒.码率为的视频节128kb/s,目,客户端按本地时钟播放二者(的时钟偏差为秒/秒服务器10-4慢于客户端的假设客户端接收到X第一帧数据多媒体同步所研究的主要问题:1如何表示描述多媒体数据的时域特征在处理多媒体数据的过程中如2采集,传输,播放等,如何维持时域特征完成第二项工作的机制称为同步机制、一个远端数据库内存有一个260s的、帧率为帧的视频30/s就开始播放,能否在保证观看质量的情况下连续播放完整的节目?假设累积时间差小于一个帧周期不会明显影响播放的观看质量,试提出一种起始延时最小且实现起来最简单的能保证客户端连续播放质量的方法(不考虑网络延时抖动答X・>一个帧30*60*104=0,18s周期,所以不能保证观看质=
0.04s量因为累积时间差小于一个帧周期不会明显影响播放质量,所以只要能缓
0.18-
0.04=
0.14s存的数据就可以实现起始
0.14s延时最小的客户端连续播放出;时有
0.14*128Kb=
17.92Kbo即缓存的数据
17.92Kb?、什么是同步容限8ITU.ATSC.这三大标准化组织对音频和EBU视频的同步容限做了怎样的规定?同步容限表示约束关系所允许的偏差范围,它包含了对同步机制服务质量的要求标准滞后超前化组容限容限ITU-30ms+
22.5BT13ms59ATSC-45ms+15mIS/19s1EBU-60ms+40mR37s、说明中媒体流的同步是9HDTV如何实现的的同步问题主要在于音频流HDTV和视频流之间的同步音频和视频编码器各自独立工作,为了解决两个数据流的同步问题,通过一个90HZ的系统时钟向两个编码器输入当前的时间值扩充过的TS包括时间戳,Transport Stream这些时间戳被包含在编码输出中传送给接收方,借此可以同步音频流和视频流、阐述用于光存储系统的通10EFM道编码设计与比特同步的关系如何实现流内同步?
11.MP3MP3通过和Samples PerFrame来控制播放时间,Sampling Rate从而实现流内同步、如果分布式多媒体系统中每12个设备均配置电波钟,设计一套方案支持该系统中音频视频复合流的传输将音频数据和视频数据分别进行音频和视频编码,之后分别打包,形成包基本码流在进行视频PES PES打包时,在包含一帧数据开始的PES包头中插入解码时间戳和显示DTS时间戳用于表示该帧的显示PTS,时刻对于音频流而言,只需要在其包头PES中插入之后将以上的个或多PTS1个音视频包组合,并加上包头PES构成大包,然后将大包复接形成复合的节目流进行传输在接收端可PS以通过进行流间同步PTS第七章多媒体传输网络、说明多媒体数据流和传统电1话网数据流的区别多媒体数据流信源丰富、数据量1大、数据编码压缩方式多样、传输控制复杂,要考虑带宽分配,动态路径选择,网络延时,传输同步的问题传统电话网数据流信源单2-多为语音信号数据量小,1信源压缩率有限,传输控制相对简单,信息传输前信道已经建立,传输延时较小,基本无同步问题、从2通信建立时间、传输延时、延时抖动、带宽利用率、对实时业务的支持、包传输次序及丢失和保障等方面QoS对下列网络进行比较电路交换1;网络与分组交换网络面向连接2络与无连接网络£短节目该节目以压缩方MPEG-1式存储,每帧平均数据量为50kb此节目经由一条带宽为的512kb/s通信线路传送到接收端见图1在数据库内此节目所需的存储空1间是多大?MB此线路能否实时地传输节目?如2果不,应如何解决这个问电路交换网络1分组交换网络通信建立时间需要通信建立时间虚电路时需要;传输延时:建立通信连接需要延时,但连接建立后传输延时短传输延时较长数据报时不需要延时抖动只限于物理抖动存在延时抖动,且随着网络负荷的增加而恶化带宽利用率带宽利用率较低带宽利用率较高对实时业务的支持非常支持较支持包传输次序顺序传输虚电路顺序传输;数据报不能保证顺序传输包丢失主要原因是包的比特错误引起主要的原因是网络拥塞引起QoS:具有确定性的保障具有较低的保障;可提供定性的服务QoS面向连接网络无连接网络通信建立时间需要通信建立时间传输小奖rtn传输延时较短延时延时传输延时较长较小延时抖动抖动带宽利延时抖动较大较低带宽利用率用率带宽利用率较高对实时业务的支持:持不支持包传输次序顺序传输不能保证顺序传输包丢失主要原因是比特错误网络拥塞引起具有QoS:较高的保障具有较低的保障、
3、请对网的和4IP Interserv的保障机制的复杂Diffserv QoS度和性能做出评价它们能够提供定性的还是定量的、确定的还是统计意义上的保障?QoS的保障机制比InterServ QoS的保障机制更加的Diffserv QoS复杂能够保障端到端的每InterServ个业务流的服务质量,为网络提供最细粒度化的服务质量区分,但是可扩展性较差;只提供有Diffserv限的服务类别,提供的是较粗粒度的服务质量区分,但是其可扩展性较好提供定量的确定的InterServ保障;提供的是定QoS DiffServ性的统计意义上的保障QoS、为了保障在以太网和5QoS,网络分别采用了哪些技术?IP以太网流量控制;包分类服务网络综合服务模型IP和资源预留协议Interserv;区别服堂RSVPDiffserv;多协议标记交换流量工程MPLS;和基于约束的寻径、如何理解作为信令协议6RSVP在服务中的应用?DS当用户需要的区分服务是通过动1态和协商时,可以通过信SLA ISP令协议建立RSVP起来由于和2InterServ模型各有自己的长处和DifferServ局限为了支持端到端的可考QoS,虑将、看做相InterServ DiffServ互补充的技术,将其结合,相互协调,共同实现端到端的服务机制QoS此时的起到桥接作用的就是RSVP题?计算接收端的起始延迟时间以及为保证接收端正常播放所需要的缓存器大小答160*30*50=90000Kb=90000/8KB=11250KB=11250/1024MB=11MB不能在接收端添加一个缓冲器3当里面的路由器支持DifferServ时,可以根据当地的资RSVP源情况和客户定义的资源和策略实施接纳控制
7、说明多媒体传输网络中和的区别QoS QoE更多的是从网络运营1Qos商的角度看网络提供的业务质,更多的是技术层面,属于客观度量范畴;则更多的是从用QoE户的角度看,关注用户的主观体验,强调主观度量等级可以通过具体参数精2QoS确刻画;只能用如优秀很好一QoE般等主观评价词来大概表达包含了对网络服务质3QoE量的技术性要求,但不局QoS限于此,还考虑了业务的便利、价格、客服支撑等用户体验性的非技术因;素,与具体业务紧密相连二QoE网络内容+QoS+人的主观体验、管理的难点是什么?8QoE影响的因素主要有三个方面QoE端到端的网络、中间媒体的透QoS明度以及用户本身的背景、经历和期望等主观因素如果权衡这三个因素、多方配合协同保证用户体验、到达用户希望的是管理的难点QoE QoE、何为,为什么说结合9ATM ATM了分组交换和线路交换的优点?是异步传输模式,又叫信lATM元中继,是一种新型数据分组传输技术它采用虚电路技术,面向连接并承载宽综合业务,具有很高的数据传输速率其目标是一个综合的、通用的网络来承载全部现有的和未来可能出现的业务吸取了电路交换的优点采2ATM用了面向连接的方式,使得速率相对独立、传输延时小和实时性好;也采用了分组交换网ATM络中的统计复用提高资源利用率的优点,具有任意速率的适应性,灵活高效、支持网络实时多媒体数10IP据传输的协议有哪些?描述其基本思想1RTP是用于上针对RTP Internet多媒体数据流的一种实时传输协议被定义为在一对一或一对多的RTP传输情况下工作,其目的是提供时间信息和实现流同步通常使用RTP来传送数据,但也可以UDP RTP在或等其他协议之上工TCP ATM作本身并不能为按顺序传送数据RTP包提供可靠的传送机制,也不提供流量控制或拥塞控制,它依靠提供这些服务RTCP2RTCP负责对的通信和会话RTCP RTP进行带外管理流量控制,拥塞控制,会话源管理等工在会话期间,RTP各参与者周期性地传送包RTCP包中含有已发送的数据包的RTCP数量、丢失的数据包的数量等统计资料,因此,服务器可以利用这些信息动态地改变传输速率,甚至改变有效载荷类型和配合使用,它们能RTP RTCP以有效的反馈和最小的开销使传输效率最佳化,因而特别适合传送网上的实时数据3RTSP实时流协议,该协议定义了RTSP一对多应用程序如何有效地通过IP网络传送多媒体数据在体系结构上位于RTSP RTP和之上,它使用或RTCP TCP完成数据传输RTP、总结主流音频、图像、视频11媒体的资源需求特征网络吞吐量需求它反应1设缓冲器大小为,当缓存完成X Kb后经过秒播放完毕,起始tl延迟时间工则有x+512*t=30*50*tl=30*50*60tl=60s x=59280Kbft=59280/512=
115.8sx=59280Kb=59280/8/1024MB=
7.24MB了网络最大极限容量持续的、大量数据的传输是主流的多媒体传输的一个特点,所以他们对网络的吞吐量有很高的要求延时需求衡量网络性能2的重要参数,包括传播延迟、传输延迟.网络延迟.接口延迟因为多媒体数据量大、且有时多媒体数据是实时数据,为了增加用户终端播放体验,这对网络的延时要求要小延时抖动需求大的延时抖动会3破坏多媒体的同步,从而影响音频视频信号的播放质量所以需要低的网络延时可靠性需求错误率,包括误码4率、包错误率和包丢失率反映了网络传输可靠性错误率要尽可能的小多点通信需求多媒体通信涉5及音频和视频数据,在分布式多媒体应用中有广播和多播信息因此,除常规的点对点通信外,多媒体通信需要支持多播通信方式同步需求包括流间同步和流6内同步应当保持多媒体数据的同步性、传统电视质量评估和12IPTV质量评估存在哪些差别?对的质量评估从两个方IPTV面进行考量用户体验质量闲系统服务质量QoE1QoS1从用户的角度出发,对网QoE络提供的业务以及应用层面的性能的整体感受进行评价QoS则从系统网络的角度出发,对络新r能参数进行评价是设备自身的转发性能和传统的电视质量评估更关注的系统性能服务质量QoS从服务的角度讲,一个服务的好坏最终由用户的体验决定,所以的质量评价更加的贴切、IPTV有效、请论述多媒体子系统13IP在网络融合中发挥的作用IMS通过实现的网络融合1IMS使得运营商可以通过统一的业务层和控制层向不同接入网上的应用提供多种业务,各种多媒体业务不再必须由多个运营商通过多个独立的网络提供网络的〃无缝〃连接还使2得用户有可能在一项通信过程中使用不同的终端设备跨越不同的接入网获得不中断的服务.的网络融合框架激发3IMS了应用和业务的融合允许将IMS各种业务作为一个整体来进行管理第八章多媒体通信终端与系统,、码流中帧,帧和1MPEG21P帧包头中的和是B PESPTS DTS否相同?为显示时间戳,主要用户视频PTS的同步和输出为解码时间戳,DTS在解码阶段使用对于帧和帧,由于解码次序和显I P,示次序不同和作用不同,PTS DTS所以同时需要PTS和DTSO对于帧,解码次序和显示次序相同,B时间上存在一致性,所以和PTS具有相同的作用,只需要DTS PTS即可、据统计,目前在因特网上2传输的包平均包长为IPV4,问:355B当包格式改换成后,1IPV6平均包长为多少在使用且没有包头2IPV4压缩时包头引RTP/UDP/Ipv6入的开销为多少?如果每个包的包头压缩至引入的开销又是2B,多少?答l355+20=375B总感觉题目表述有错,有两种可3能的表述、在图所示的具有全局时钟32的实时多媒体系统中,发送端将压缩后的每一帧图像打在一个包中传送,每个包的包头有表示该包发送时间的时间戳保证接收端连续播放的条件是什1么?若网络传输延时2di£当使用且没有包头压1IPV6缩时包头弓|RTP/UDP/IPV6入的开销为12+8+40/375=16%如果每个包头压缩至引入2B,的开销为当使用且2/375=
0.53%2IPV4没有包头压缩时包头弓|RTP/UDP/IPV4入的开销为12+8+20/355=
11.3%如果每个包头压缩至引入的开2B,销为2/355=
0.56%、典型的视听终端应该包含哪几个3功能模块?列举其中可能采用的协议络接口模块网络适配模块复用/同步/安全模块应用层模块实时传输协议(实时传输控RTP X制协设协RTCP1UDP/TCP.IP(议视听系统多点控IPV4/IPv6X制协议(终端间控制规程H.231X(多个终端与间通H.242X MCU信规程(帧同步控制与指示H.243X、视听业务加密H.230视听业务密钥与认H.233X证电视会议摄像机H.234,控制规程同步信道集合H.281X、在域中,网关、H.224X4H.
323、MCU和网守的功能是什么?为什么一个域中必须有一个网守,而可以没有说明终MCU H.323端的通信建立过程,以及实时媒体的数据,应用数据,通信控制信号,信令信号各采用什么协议,为什么?网关用于与其他H.323类型的终端之间进行连接:提供会议管理以及视频、MCU音频信号的混合与切换等功能网守)对域内终端进行接纳1控制)限制某个终端所使用的带2宽、进行地址翻译和与控制功分组交换网是不保证的QoS络,可以对域内终端进行劫难控GK制以防止拥塞,以及可以限制GK某个终端所使用的带宽、进行地质翻译和域控制等功能,这对于改善没有保证的QoS£络的质量是非常有益的所以必须有一个网守由于局域网支持多播,因此域内可以没有,会议可由分布在终端、MCU网关或上的进行分布式管GK MC理建立过程见书页234〜、假设视频、音频分别在个52会话中传输RTP说明在发送端和接收端如何实现1视频、音频的流间同步;参考报文格式,提2RTP/RTCP出一种在接收端计算平均丢包率的方法答报文中有一个时间戳1RTP域,发送方报告报文所包含的信息可被接收方用于协调两个流中的时间戳值发送方报告中含有一个以网络时间协议格式表示的绝对时间值,接着NTP报告中给出一个时间戳RTCP RTP值产生该值的时钟就是产生分RTP组中的字段的那个时TimeStamp钟由于发送方发出的所有流和发送方报告都使用同一个绝对时钟,接收方就可以比较来自同一数据源的两个流的绝对时间,从而确定如何将一个流中的时间戳值映射为另一个流中的时间戳值从而进行同步当会话开始时,记录第一2RTP个发送者报告中的时间RTCP NTP戳的值记录当前发送者报tl RTCPo告中的时间戳的值得到时NTP t2o间差,为保证播放的连[ATnin.Amox]续性,接收端应该在什么时刻开始播放?其缓存器应为多大?(限设网络传输延时为一符3X d合正态分布的随机变量,其均值为〃,方差为,在保证连续播放概率2的条件下,接收端应该在什4299%么时刻开始播放(用解析式表达)?・.记录当前发送者报T=t2tl RTCP告中的丢失包总数此时就是n n/To当前的平均丢包率、画出终端与终6H.3233G-324M端相互通信的连接示意图,并具体列出网关应该具备的功能网关功能()转换协议网关1作为一个解释器,使不同的网络能够建立联系完成寻址与寻呼控制2转换信息格式不同的3£络使用不同的编码方法,网关将对信息进行转换,使异种网络之间能够自由的交换信息转发传输信息负责在端4口间转发传输信息、从控制功能和传输可靠性两个方7,面对和进行比较H.242H.245的控制功能能力交换,1H.242通信模式确定、模式转换、远程应用功能控制和多点会议控制控制功能能力交换、通信H.245模式确定、对特定的音频和视频模式的请求及模式转换、逻辑通道管理、对各个逻辑通道比特率的控制、远程应用控制、确定主从终端和修改复接表传输可靠性2通过公务子信道中的码H.242BAS传送通信控制消息,并码与连续媒体流复接在I BAS一个帧内传输为了增加可靠性,码除了个信息之外,加BAS8bit上了个纠错比特,使得其在一定8的误码的条件下能够正常工作所以具有一定的传输可靠性H.242则使用一个专有的逻辑H.245通道中传送控制消息,并且该信道总是建立在可靠的传输服务之上所以能够完全保H.245证传输的可靠性、分别说明在和的视8H.323SIP听系统中,能力集协商是通过什么协议和如何进行的中是通过协议1H.323H.245终端首先通过信道向H.323RAS传送一个接纳请求被接纳后,GK通过一个可靠新到利用进行Q.931呼叫呼叫过程结束后建立起一个可靠的控H.245制信道,通过这个信道进行H.245的消息交换完成能力集协商是通过协议主叫方2SIP SDP通过的消息体说明它Invite SDP欲发起的绘画的详细信息,被叫方通过的消息体回复它愿意接0K SDP受的会话的类型这两个步骤完成了双方对能力集的协商、说明组通信和多点通信这两9个概念的联系和区别、说明内容分发网络和10CDN对等网络的工作原理和核P2P心技术工作原理当用户向系统CDN请求一个节目时,通过重定向技术该请求被转发到离用户最近的服务器上,如果重定向所指向CDN的服务器保存有用户所请求节目的复制版本,那么该服务器向用户传递数据流;如果没有,该服务器通过系统的内容路由功能找到和获取节目,然后传递给用户核心技术重定向、缓存CDN策略、内容路由、应用层多播工作原理网络中的P2P P2P用户设备既是终端又是网络节点用户通过登录服务器获知节目表,当用户选择节目时,登入服务器回返回离用户最近的跟踪服务器的地址用户向该跟踪服务器查询节目,返回可供其下载数据的相邻节点列表用户然答接收端解码重建的结果保持1发送端原始信号的时间约束关系且⑴第个的播放时刻必须晚i LDUp⑴⑴于它的到达时刻,其ai=T+d实⑴为第个的发送时刻,T iLDU为第个的传输延时di iLDU由2pi=ai,ai=Ti+di后可以向这些节点(用户)请求并获取数据在用户收到这些数据后,也可以向后续的请求该节目的用户提供数据所以每个用户节点既是客户机,有是服务器核心技术发现、走位、P2P£络结构和数据传输、在一个基于的交互11RTSP式系统中,节目的快进、VOD快退等操作是如何实现的?在系统中又是如何实现的?DASH:播放过程中用户进行快进和VOD快退操作时,这些操作命令通过相应的请求消息传送到服务RTSP器控制部分,使服务器进行相应的操作:当用户进行快进和快退DASH操作时终端通过协议向服务HTTP器索要特技模式的码流,它只含有帧率很低的帧,专供快进快退等I操作VCR、网络传输图像的时候可以采12用渐进的方式,那么在网络上IP实现视频渐进传输时可以采用哪些方法?分级编码主要有空间可1分级、时间可分级、频率可分级、信噪比可分级,以及以上方法的混合应用可分级的视频编码主要解决网络传输视频信息的时候,它为了充分利用网络带宽,并且有效解决视频质量和用户实时性请求之间的矛盾在实际视频编码和传输过程中,首先传送、接收并显示低分辨率的流媒体数据,然后进一步传送、接收并显示更精细的数据、重要的数据和保护的数据,最后传其他数据可伸缩视频编码标准是2SVC对视频编码标准的可H.254/AVC伸缩性扩展通过对时间分辨.SVC率、空间分辨率和质量等参数的可伸缩性来适应不同络环境下用户对视频资料的分辨率.帧率、质量的不同需求由于信道传输中大量存在的衰减、误码和数据丢失,差错控制显得十分重要,因而两种有效的对抗措施-错误弹性编码和错误隐藏技术被引入到中SVC由于播放时刻必须保持数据内部的原有的时间约束关系,所以有pi-pi-l=Ti-Ti-l==pi-pl=Ti-Tl==pi-ai=pl-di-Tl=0==pl=Tl+di取所以播放时间di=Amox,。