Codec Licensing and Web Video Streaming
网络视频流媒体市场经历了指数级增长, 预计未来几年市场规模将增长超过3000亿美元.[i],[ii] 在线视频平台的兴起颠覆了传统的线性电视行业, 随着许多消费者选择在线视频流媒体服务.
然而，参与这场市场混乱的企业一直难以找到有利可图的业务. 商业内容提供商不仅要相互竞争以获得关注, time, and revenues but also with social media, user-generated content, and video games.
虽然表面上没有变化，但网络视频流是一个全新的命题. Because of this fact, 那些拥有编解码器标准基本专利(sep)的公司为这场网络视频革命做出了贡献，他们面临着一个多方面的问题.
- 最近对sep进行许可的努力导致了涉及多个专利池的复杂许可计划. 像线性电视和光盘所采用的编解码器许可方案是否也适用于流媒体视频?
- 过去向视频流内容提供商收取大量编解码器许可费的尝试遭到了强烈抵制，随后被放弃. 基于内容的编解码器许可是否有重要作用, for example, 按次付费或订阅视频编解码器许可?
为了找到这些问题的答案，有必要研究一下编解码器在商业网络视频流媒体不断变化的环境中所扮演的角色, 以及基于内容的编解码器许可的历史.
The role of codecs in web video streaming
商业网络视频流是由四个基本的组成标准实现的.
免费互联网和商业流媒体客户端的两个组件都是高质量的, 低比特率音频和视频编码标准. 目前占主导地位的音频和视频编解码器分别是AAC和AVC.
- 1999年由ISO/IEC JTC 1运动图像专家组(MPEG)推出的AAC (ISO/IEC 14496-3)[iii], 也称为MPEG-4 Part 3和MPEG-4 Audio, is a widely available high-quality, low-bitrate audio encoding standard.
- 2003年由ITU-T视频编码专家组(VCEG)与MPEG合作推出, AVC (ISO/IEC 14496-10)[iv], also referred to as H.264或MPEG-4 Part 10是一种广泛使用的高质量、低比特率视频编码标准.
AAC和AVC不足以支持商业网络媒体流. 还需要另外两个组件——可互操作的数字版权管理(DRM)标准和自适应比特率传输封装标准.
- 2012年由MPEG，通用加密或CENC (ISO/IEC 23001-7)引入[v] 主要的数字版权管理系统(包括Microsoft PlayReady)是否支持drm互操作性标准, Google Widevine and Apple FairPlay.
- MPEG于2018年推出，通用媒体应用格式或CMAF (ISO/IEC 23000-19, 2018)[vi] 是两种最常用的自适应比特率流协议支持的音视频封装标准——动态自适应HTTP流或DASH (ISO/IEC 23009-1)[vii] 和HTTP直播或HLS (IETF RFC 8216)[viii].
虽然非商业视频流可能与AVC和AAC单独, 如果没有CENC和CMAF的全球可用性，今天商业网络媒体行业的指数级增长是不可能的.
Component Licensing
使用AAC音频编码格式传输或分发内容不需要许可证. 但是，AAC解码器的所有制造商或开发商都需要许可证和付款. The terms use per-unit pricing, 而且内容不收取版税, subscribers, or attributed revenue.[ix]
AVC视频编解码器技术的商业使用需要获得VIA许可联盟(前身为MPEG LA)的许可并向其付费。, 为大多数(但不是全部)AVC专利持有人管理AVC专利池的私人公司.[x]
为了确保AVC对YouTube等免费在线流媒体服务保持吸引力和可行性, 专利持有人承诺不会对免费服务收取任何形式的基于内容的版税, while placing a cap on paid services, so, for example, 如今，像Netflix这样的付费流媒体服务支付的费用不会超过100美元,000 a year for its AVC streaming license, 与服务订户的数量无关, 视频流分辨率或视频流时长.
提出CMAF和CENC的公司，考虑到全球网络媒体客户端的消费者价值，以及这种客户端将带来的以消费者为中心的商业机会. 预计版税许可将阻碍以网络为中心的商业机会, 他们坚持CMAF和CENC是免费发布的.
Though not license-free, the royalty model employed for AAC and AVC clearly hit the sweet spot for large scale adoption; but these codecs have their technical limitations. 例如，AVC并不特别适合高分辨率或高帧率的内容.
由VCEG与MPEG、HEVC (ISO/IEC 23008-2)合作推出[xi], also referred to as H.265 or MPEG-H Part 2, 是一种先进的编解码器，与AVC相比，可以实现高达50%的比特率降低，同时保持或提高质量. 它特别适用于高分辨率和高帧率的内容.
HEVC无疑是比AVC更好的视频编解码器标准, yet its adoption has been painfully slow. 一项技术的许可模式可以对其采用和市场增长产生深远的影响. Just what went wrong?
网络视频流的变化
从一个角度来看，过去二十年编解码器的发展一直被提高压缩比的努力所主导. For example, video codec H.与H相比，265/HEVC(2013)提供了大约25%-50%的数据压缩.264/AVC(2003)在相同的视频质量水平, 或者在相同比特率下大幅提高视频质量.[xii]
但是压缩比的提高只是网络视频流故事的一部分. 提高编解码器压缩比的努力发生在两个革命性的变化席卷互联网的时候, 变化带来的重要问题, unexamined codec licensing assumptions.
移动和智能电视音频视频应用的出现就是这种变化的格局, 以及免版税编解码器的可用性.
移动和智能电视视听应用
Apple announced the iPhone in 2007[xiii] 2008年，第一款安卓手机上市.[xiv] 同年，智能电视出现在市场上, 允许用户直接从互联网下载和安装电视上的音视频应用程序. 到2013年HEVC发布时，市场上有超过9.3亿部手机和8400万台智能电视, 所有支持网络音视频应用.[xv],[xvi]
With linear broadcast, 对广播公司可选的编解码器的支持对机顶盒是强制性的, 导致在设备制造商支持的线性电视标准所要求的编解码器上的激烈竞争. On the other hand, 现代网络媒体应用程序支持编解码器功能发现, 因此，网络流媒体服务可以发现设备支持的编解码器，并可选地提供该格式的内容, 让编解码器支持设备制造商和网络流媒体服务的市场驱动决策.
Why does this matter? 市场驱动的编解码器选择与设备编解码器功能发现相结合，与线性电视设备的要求相比，对编解码器SEP版税产生了下行压力.
Royalty-Free Codes
谷歌在2010年和2013年分别发布了开放且免版税的编解码器VP8和VP9, the year that HEVC was released. 2018年，开放媒体联盟发布了AV1编解码器, a standards-based royalty-free video codec.
Why does this matter? 免版税编解码器的可用性为网络流媒体服务提供了另一种编解码器，如果编解码器SEP持有人决定收取订阅服务内容费用.
Content-based codec licensing
2014年，MPEG LA(现在的VIA授权联盟)宣布，他们将对使用HEVC编码或解码视频的每个产品收取20美分的费用, though the first 100,000 units would be free. 这相当于HEVC前身AVC的许可. MPEG LA also announced that, while reserving the right to do so, 当HEVC编码的视频在互联网上播放或以蓝光光盘出售时，他们不会收取版税.[xvii]
对MPEG LA的预期SEP许可收入不满意, 一些编解码器SEP持有人转移到新的专利池- HEVC Advance(现在是Access Advance), 他们在哪里获得了更高的收入，包括来自内容提供商的收入. 事实上，HEVC Advance在2015年就曾宣布，它想要0.HEVC提供的任何付费流媒体视频服务收入的5%.[xviii] But by 2018, under pressure from content providers, HEVC Advance收回了互联网流媒体的所有版税.[xix]
HEVC的第三个专利池由Velos Media管理[xx]该公司由咨询公司马可尼(Marconi)运营. As of 2023, although they have their own HEVC patents, Velos Media不再维护HEVC专利池, 将所有第三方专利归还给各自的所有者.[xxi]
In 2021 Micky Minhas, senior vice president at Marconi, 写了一篇文章，主张采用一种新的编解码器许可方法. He suggested that the new approach
"... 需要反映编解码器现在是如何使用的，而不是20年前是如何使用的... 它应该在视频编码的多个点上获得许可, 解码和转码生态系统正在从视频编码标准中实现价值, 包括流媒体和云服务, and not just end user devices."[xxii]
To understand this approach, 重要的是要注意，sep属于标准规范的规范语言. 编解码器标准提供了关于两件事的规范语言——比特流格式本身和处理比特流时解码器的动作. 编解码器标准在设计上没有说明编码器如何产生比特流, 允许编码方面的创新蓬勃发展, 依靠比特流和解码器规范来确保互操作性.
专利池已经设法通过参考比特流规范对编码器设置许可要求, 但这并不适用于流媒体服务. 流媒体服务使用MPEG的动态自适应流媒体(MPEG- dash)或苹果设计的HTTP Live Streaming (IETF HLS)等格式。. 这两个规范都没有使用编解码器比特流规范中的规范语言.
如果网络视频流媒体服务既没有使用编解码器规范，也没有间接侵犯编解码器SEP, viz., 不允许或鼓励第三方直接侵犯编解码器SEP, SEP持有人如何证明要求网络视频流媒体服务支付许可费是正当的, as Micky Minhas has proposed?
Participating in the web video revolution
Minhas认为，完美的授权解决方案“…… 需要反映编解码器现在的使用方式，而不是20年前的使用方式。” 在我看来，他的这一评论是正确的.
让我们对比一下二十年前编解码器的使用情况和现在的使用情况.
- Twenty years ago, linear services were closed, royalty bearing ecosystems; codec support which was optional for the broadcaster was mandatory for the device manufacturers; no royalty-free alternative codecs existed; and consumers would use a set top box supporting a single linear service application.
- 今天，网络本身被免版税标准所主导, including royalty-free standards essential for commercial web video streaming; codec capability discovery makes codec support a market-driven decision; royalty-free video codecs are available and in use; and the consumer watches video on a device capable of supporting an unlimited number of applications.
与二十年前编解码器的使用方式相比，所有这些变化都给编解码器SEP许可收入带来了下行压力. 我认为线性电视的MPEG-2授权时代, DVD和蓝光设备创造了不切实际的SEP收入预期, 导致了今天复杂的许可方案与多个专利池.
而且由于网络视频流并没有参考编解码器的规范规范语言, 任何向流媒体服务收取基于内容的版税的企图都暴露了对现代网络视频流媒体所涉及的内容的根本误解.
That said, 线性媒体服务和网络媒体服务之间的一个根本区别为编解码器SEP持有者提供了一个增强的收入途径, 这条道路已经被现代网络媒体公司所采用.
When one service owns the device, as is the case for linear services, 价值只能通过该服务获得. 在这种情况下，编解码器SEP持有人只能通过收取专利许可费来收回其研究和开发成本.
然而，现代网络媒体设备是一个价值链“顶端宽”的平台。. 编解码器SEP持有人有更多创造性的方法来收回开发标准必要专利的成本-例如提供内容，更重要的是提供和/或支持利用其SEP功能的服务.
web服务的这一事实是万维网发展成为免版税生态系统的原因之一. 它也代表了编解码器SEP持有者可以更有利可图地参与网络视频革命的最佳方式.
___
[i] Video Streaming Market - North America, Europe, EMEA, APAC : US, Canada, China, Germany, UK - Forecast 2023-2027, Technavio, December 2022, http://www.technavio.com/report/video-streaming-market-industry-analysis
[ii] 视频流媒体市场-全球行业分析, Size, Share, Growth, Trends, Regional Outlook, and Forecast 2022-2030, Precedence Research, http://www.precedenceresearch.com/video-streaming-market
[iii] ISO/IEC 14496- 3:19 19，信息技术-视听对象的编码-第3部分:音频, http://www.iso.org/standard/76383.html
[iv] ISO/IEC 14496-10:2022, 信息技术。视听对象的编码。第10部分:高级视频编码, http://www.iso.org/standard/83529.html
[v] ISO/IEC 23001-7:2023, 信息技术。MPEG系统技术。第7部分:ISO基础媒体文件格式文件中的通用加密, http://www.iso.org/standard/84637.html
[vi] ISO/IEC 23000-19:2020, 信息技术。多媒体应用格式(MPEG-A) .第19部分:分段媒体用通用媒体应用格式(CMAF, http://www.iso.org/standard/79106.html
[vii] ISO/IEC 23009-1:2019, 信息技术。HTTP (DASH)上的动态自适应流。第1部分:媒体表示描述和分段格式, http://www.iso.org/standard/75485.html
[viii] IETF RFC 8216, HTTP Live Streaming, August 2017, http://www.rfc-editor.org/rfc/rfc8216
[ix]AAC License Fees, VIA Licensing Alliance, http://www.via-la.com/licensing/aac/license-fees/
[x] AVC/H.264, VIA Licensing Alliance, http://www.via-la.com/licensing-2/avc-h-264/
[xi] ISO/IEC 23008-2:2013, 信息技术。异构环境中的高效编码和媒体传输。第2部分:高效视频编码, http://www.iso.org/standard/35424.html
[xii] High Efficiency Video Coding, http://en.wikipedia.org/wiki/
High_Efficiency_Video_Coding
[xiii] Apple Reinvents the Phone with iPhone, Apple press release, January 9, 2007, http://www.apple.com/newsroom/2007/01/09Apple-Reinvents-the-Phone-with-iPhone/
[xiv] 官方消息:首款Android手机将于9月23日上市, Charlie Sorrel, September 17, 2008, http://www.wired.com/2008/09/official-first/
[xv] Smartphones – statistics & facts, http://www.statista.com/topics/840/smartphones/
[xvi] Smart and connected TVs – statistics & facts, http://www.statista.com/topics/4761/smart-and-connected-tvs/
[xvii] 专利持有者削减了下一代视频技术的流媒体费用, CNET, Stephen Shankland, Sept 30, 2014, http://www.cnet.com/tech/services-and-software/patent-holders-cut-streaming-fees-for-next-gen-video-tech
[xviii] 新收费给下一代高质量流媒体视频蒙上了阴影, CNET, Stephen Shankland, July 22, 2015, http://www.cnet.com/tech/services-and-software/new-fees-cast-shadow-on-next-gen-high-quality-streaming-video/
[xix] HEVC Advance消除了内容分发版税，并减少了某些版税费率和上限, March 13, 2018, http://accessadvance.com/2018/03/13/hevc-advance-eliminates-content-distribution-royalty-fees-and-reduces-certain-royalty-rates-and-caps/
[xx] http://velosmedia.com/
[xxi] Velos结束了HEVC的专利池，简化了视频编解码器的许可情况, Alex Davies, January 31, 2023, http://rethinkresearch.biz/articles/velos-ends-its-patent-pool-for-hevc-simplifying-video-codec-licensing-picture/
[xxii] 是时候采用一种新的编解码器授权方法了, Micky Minhas, September 18, 2021, http://marconi.com/iam-its-time-for-a-new-approach-to-codec-licensing/
Biographical Information
John C. Simmons, Principal Engineer at John Simmons Consulting, LLC. 流媒体公司成立于2020年，其客户包括苹果、谷歌和微软.
John worked at Microsoft for 16 years, 他领导了drm互操作编码和自适应比特率流的标准化工作, to collaborate with Google, Comcast, Netflix和W3C共同定义HTML5媒体扩展, 并与苹果公司合作开发通用媒体应用程序格式.
John在媒体和娱乐行业的标准布道导致了消费者技术协会(CTA)网络应用视频生态系统(WAVE)项目的创建, 60家公司合作在全球范围内采用ISO/IEC和W3C流媒体标准. John是CTA WAVE内容规范工作组的主席.
John因WAVE项目的创建获得了CTA 2017年技术领导奖，并因微软获得了美国国家电视艺术科学学院(NATAS) 2019年艾美奖, Google, Comcast, Netflix and W3C “Standardization of HTML5, 加密媒体扩展(EME)和媒体源扩展(MSE)提供完整的电视体验.
[编者注:这是约翰·西蒙斯咨询有限责任公司的一篇文章. 流媒体接受供应商署名完全基于它们对我们读者的价值.]
Related Articles
观众对高质量4K视频内容的需求直线上升, 预计8K视频在未来几年也会激增. However, 随着分辨率的提高，文件大小也会大得多, 由于需要增加存储和处理能力，媒体提供商面临哪些挑战. 自然，媒体公司正在寻找更有效地处理视频的方法. MainConcept的Frank Schönberger探讨了内容提供商和视频服务如何利用视频压缩和人工智能技术的发展来提高广播工作流程的每个阶段的效率, 从捕获点到交付给最终用户.
18 Jun 2024
Traditional, 受控的广播环境正在被动态的广播环境所取代, 多个应用程序和服务必须和谐共存的复杂生态系统. 挑战在于保持提供者主要服务的质量, 比如带有动态插入广告的线性电视, 同时适应第三方应用程序的各种需求和潜在干扰. Witbe的Yoann Hinard讨论了整个过程中面临的挑战, including remote monitoring, dynamic ad insertion, and QC testing across devices.
21 Mar 2024
驱动和阻碍新兴编解码器在Netflix等付费OTT流媒体平台上部署的关键因素是什么, Disney, and Apple TV+? 流媒体学习中心的Jan Ozer在流媒体东2023的演讲中提供了一个急需的编解码器部署现实检查.
25 Aug 2023
亚马逊在选择和采用流媒体编解码器时考虑了六个关键因素. AWS解决方案架构师Kevin Yao在流媒体连接2023的这段视频中对它们进行了分解.
03 Apr 2023
Netflix和Facebook最常用的流媒体编解码器是什么? 流媒体学习中心的Jan Ozer请Netflix的Andrey Norkin和Facebook的David Ronca深入讨论他们为自己的组织使用的特定编解码器.
22 Nov 2022
目前在减少流媒体的碳排放和碳足迹方面有哪些创新? 流媒体学习中心的Jan Ozer向亚马逊网络服务的Kevin Yao和Facebook的David Ronca询问了他们的组织正在使用哪些创新和新技术来减少流媒体对环境的影响.
30 Sep 2022
专有编解码器与开源编解码器的主要优势是什么? 基于在各种用例中找到客户需求的适当平衡，许多因素都发挥了作用
14 Sep 2022
在IP视频爆炸式增长的推动下，视频编解码技术的进步正在造成激烈的竞争和碎片化的市场. 会出现一个赢家吗?还是这将是一种新常态?
04 Apr 2019