Redian新闻
>
MPEG-DASH视频传输中的常见问题

MPEG-DASH视频传输中的常见问题

科技
 点击上方“LiveVideoStack”关注我们

作者:Daniel Silhavy、Stefan Pham

翻译:Alex

技术审校:张博

▲扫描图中二维码或点击阅读原文
了解音视频技术大会更多信息



作为dash.js项目的首席开发人员,我们经常面对这样的情况:我们必须评估DASH传输失败是由dash.js播放器实现中的实际bug引起,还是由错误的内容生成引起。在本文中,我们将分享一些在DASH传输中出现的常见错误,以及我们通常在面对这些错误时所总结的一些见解。



/ DRM的特定问题 /

“想要安全,请使用https”


在播放受到DRM保护的视频的时候,经常会出现一个与底层应用托管有关的错误。为了能够使用EME(加密媒体扩展,DRM播放以及与CDM通信时必须用到的W3C API),Web浏览器通常必须使用https。如果使用http调用应用,dash.js将输出警告:无法进行DRM播放。

 

No supported version of EME detected on this user agent! - Attempts to play encrypted content will fail!


保护自己免受保护

 

DRM本身是一个比较复杂的话题。有一个显而易见的事实是:有三种主要的DRM系统,分别是:Google Widevine、Microsoft PlayReady和Apple FairPlay。在Google Chrome和Mozilla Firefox中,需要Widevine才能启动DRM播放,但是老款Edge却只支持PlayReady。一些设备(如智能电视或者FireTV)同时支持Widevine和PlayReady。因此,在特定平台试图播放DRM保护内容之前,我们需要评估具体平台底层对DRM的功能支持。当使用dash.js时,一旦找到并选择了合适的DRM系统,就会显示如下输出:


DRM: KeySystem Access Granted (com.widevine.alpha)!


如果某个平台支持多种DRM系统,那么定义选择优先级会很有用。


{    "com.widevine.alpha": {        "serverURL": "someurl",        "priority": 1    },    "com.microsoft.playready": {        "serverURL": "someurl",        "priority": 2    }}


比如按照上例中的配置,dash.js会优先考虑使用Widewine DRM, 而不是PlayReady。

 

你可以在之前的博文中了解到更多DRM知识:https://websites.fraunhofer.de/video-dev/enabling-hardware-drm-on-android-chrome-using-the-encrypted-media-extensions/

https://websites.fraunhofer.de/video-dev/dash-js-license-acquisition-for-multiple-eme-versions/

 

模式化一切


在《dash.js:多个EME版本的许可获取》(dash.js: License acquisition for multiple EME versions)[1]一文中,我们描述了dash.js 内容保护模型的概念,从中得到的关键点是:dash.js实现了三种不同版本的EME(被封装在不同的内容保护模型中)。遗憾的是,很多设备(向那些“乐于”为智能电视和机顶盒开发的人问候)需要定制其中一种保护模型。在此类设备上调试DRM问题时,这件事很值得做:总是检查EME调用是否需要被前置或者另做修改。



/ 播放时序的特定问题 /

“请保证您的播放器的当前播放时间不要掉出滑动窗口”


当开发DASH播放器或者创建DASH MPD时,一个关键概念是要理解DASH时序模型。你可以通过阅读

DASH-IF IOP guidelines[2]DASH-IF implementation guidelines: restricted timing model[3]了解DASH时序模型。

我们经常遇到的一个问题由视频流引起,其中可用媒体切片的呈现时间在时移缓冲区之外。当给出了带有 <SegmentTimeline> 的明确时间信息时,播放器能够调整自身操作。下图就说明了这种调整:




 

播放器使用 MPD@timeShiftBufferDepth属性确定DVR窗口。除此之外,从“UTC now”时间中减去当前的即时直播延迟时间,就能得到“实际的DVR窗口时长”(比“名义的DVR窗口时长”要短)。在直播期间,上层应用只能在有效的DVR窗口内进行播放移动。


在上面的示例中,最后一个可用切片(第5个切片)的呈现结束时间在DVR窗口之外。在这种情况下,播放器将找不到可供下载和播放的切片。在这种情况下,dash.js可以将anchor time(基准时间)调整到最近已播放切片的presentation end time(该切片的呈现截止时间),从而得出用于计算有效DVR窗口的调整值,以避免播放停顿。该功能通过调整设置参数实现,如下所示:

player.updateSettings({   streaming:     {     calcSegmentAvailabilityRangeFromTimeline: true    }})


使用Offset避免Upset

 

为了能够在DASH视频流中插入广告,MPD经常使用多种分段时间。让我们来看一个非常简单的示例:我们想向主要内容(main content)添加一个中贴片广告。



这种情况下,我们在切换为广告内容前,先播放8秒主要内容。广告结束后,我们重新播放主要内容。所有分段持续时间总和构成了18秒媒体呈现持续时间。

 

为了将视频切片对应到媒体缓冲区中的目标位置,MSE对切片的内部呈现时间戳(既最早的呈现时间EPT,Earliest Presentation Time)添加了可配置的timestampOffset。因此,应用可以通过调整timestampOffset控制切片在缓冲区中的位置。


现在,以上所述对我们的示例而言又有什么意义呢?让我们假设主要内容中的第一个切片和广告内容中的第一个切片的EPT为0。在DASH视频流中,一个切片的呈现时间与其分段时间的开始有关。如果我们仅仅将每个切片的MSE.timestampOffset设置为每个分段时间的起始时间会发生什么?如下所示:分段时间1和分段时间2没有问题。

--- Period 1 ---MSE.timestampOffset = Period@start = 0BufferPosition(Seg 1) = MSE.timestampOffset + EPT = 0 + 0 = 0 BufferPosition(Seg 4) = MSE.timestampOffset + EPT = 0 + 6 = 6 --- Period 2 --- MSE.timestampOffset = Period@start = 8BufferPosition(Seg 1) = MSE.timestampOffset + EPT = 8 + 0 = 8 BufferPosition(Seg 2) = MSE.timestampOffset + EPT = 8 + 2 = 10


但问题出现在分段时间3。因为我们从第5个切片开始,EPT没有设置为0。

--- Period 3 ---MSE.timestampOffset = Period@start = 12BufferPosition(Seg 5) = MSE.timestampOffset + EPT = 12 + 8 = 20 


没有将分段时间3的第一个切片定位在媒体呈现时间线中的第12秒,而是在第20秒时结束了。幸运的是,有一个方法很容易解决刚刚的问题:在MPD中,我们可以为每个时间段分配一个单独的@presentationTimeOffset (注意:在此示例中,我们做了一些简化处理)。


在MPD中,对于每个 Representation而言,@presentationTimeOffset都不同。dash.js 使用@presentationTimeOffset来计算 MSE.timestampOffset。我们将@presentationTimeOffset的值设置为该时段中第一个切片的EPT:

--- Period 3 ---MSE.timestampOffset = Period@start - @presentationTimeOffset = 12 - 8 = 4BufferPosition(Seg 5) = MSE.timestampOffset + EPT = 4 + 8 = 12 BufferPosition(Seg 6) = MSE.timestampOffset + EPT = 4 + 10 = 14 


现在所有切片都处在媒体缓冲区的正确位置,我们终于得到了一个连续的媒体呈现时间线。


关注缓冲——前方空隙

 

基于MSE的播放器有一个大问题,那就是时间线中的时间空隙。大部分MSE实现无法处理这种情况,因为其中的媒体缓冲并不连续,而且一旦播放位置到达空隙,缓冲就会停止。那么当我们在讨论空隙以及产生空隙的原因时,到底意味着什么?从我们的经验来看,空隙主要由以下两个原因引起:


  • 后续时间段没有对齐,结果时间段边界处的切片也无法对齐。

  • 切片中的总媒体样本持续时间短于其呈现持续时间所指示的时间。

 

最终就导致了如下情况的发生:



在这种情况下,切片1和切片2完美对齐,然而切片2和切片3之间有一个空隙。为了避免出现播放停止,dash.js会适时启用一个复杂的空隙跳转机制。可以通过如下设置启用和配置该机制:

player.updateSettings({   streaming:     {            jumpGaps: true,            jumpLargeGaps: true,            smallGapLimit: 1.5,    }})



/ 结语 /


本篇文章中,我们分享了MPEG-DASH视频流中6种最常见的隐患。


当播放受到DRM保护的视频时,我们强调需要https,并概括了使用特定DRM系统平台的重要性。除此之外,我们推动了实现EME旧版本的需求。


MPEG-DASH的时序模型并不容易理解。错误的DVR窗口会导致播放停止和失败。在多时段广告插入的背景下,使用MPD的具体属性将时间段对齐以避免媒体缓冲的不连续很重要。此外,当MSE实现无法处理媒体缓冲中的空隙时,应避免媒体时间线中的空隙。


dash.js播放器能够处理大部分以上情况,并帮助识别和解决此类问题。


如果你对我们的DASH活动或者dash.js 有其他问题,可以随时查看我们的网站:https://www.fokus.fraunhofer.de/go/dash




注释:

[1]https://websites.fraunhofer.de/video-dev/dash-js-license-acquisition-for-multiple-eme-versions/

[2]https://dashif.org/guidelines/

[3]https://dashif-documents.azurewebsites.net/Guidelines-TimingModel/master/Guidelines-TimingModel.html


致谢:

本文已获得作者Daniel Silhavy授权翻译和发布,特此感谢。


原文链接:

https://websites.fraunhofer.de/video-dev/common-pitfalls-in-mpeg-dash-streaming/





喜欢我们的内容就点个“在看”吧!

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
流浪汉和懒汉的消失是件大工程最新!CollegeBoard发布SAT机考样题,正式回应黄牛考位问题...内裤变黄、私处痒,咋回事?|5个常见问题全解公网传输技术之SRT协议解析(下)QUIC和互联网传输的未来性价比超高!美国社区大学常见热门问题及干货汇总从传输到感知,无源物联网走出一条怎样的进化之路?【附直播回放】Staff at Pet Shelter Bid Farewell To Four-legged Friends在 Linux 上安装 FFmpeg | Linux 中国这是首次带主题的常规季自组小人仔吗?2022年第二季度自组小人仔现已在中国大陆发售!华夏文明是人类智慧的起源与未来的希望快转给爸妈!这8种容易中毒的常见食物,慎吃!鹦鹉Shanghai Certifies Regional Headquarters of 40 Global Firms使用FFmpeg进行HLS打包——FFmpeg简单学捷报频传!恭喜丽格学生收到被誉为“美初小哈佛”的顶尖寄宿美初录取!Shanghai Supermarkets Reopen, Kind Of美国公民为海外出生孩子申请CRBA常见问题这些常见问题背后的原因,你是否一直弄错了?如何使用开源工具集合 FFmpeg 减小视频大小明天恢复堂食,北京新的常态化防控体系击败了奥密克戎的反扑加拿大印度28岁男星 “遭帮派扫射” 爆血身亡,曾就读Sheridan和Humber College……捡到的“小狗” 居然是一丘之貉& 小朋友的常见意外:卡住头【把世界讲给孩子听】援沪运输中,用“车头”与“挂厢”连接的路喜讯频传!世贸通大批格林纳达移民客户成功获批1口补钙补蛋白,长高也能开“3倍速”!它是我家餐桌的常驻名单对于新冠病毒Omicron BA.4/5亚型三个最常见问题的回复中国赴美读研人数下降,会成为未来的常态么?【英卓讲座】PERM绿卡申请中的常见误区-免费公益Zoom直播讲座男人的心,海底针[电脑] 朋克阿波罗-SPACE80&DOMIKEY PUMPER让人上头的时髦酷女孩 DJ-Peggy Gou各地频传“水果喜报”,从中你看到了什么?移局局统一答复 职业移民常见四大细节问题简简单单做司康!
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。