是MPEG没有未来，还是未来不需要MPEG

6月6日，MPEG创始人&召集人Leonardo Chiariglione辞职，并在自己的博客中称“MPEG is closed”。事实上，MPEG工作组并没有真正停摆，只是经过了一番重组。重组之后的MPEG并不如Leonardo所想，而他的职位也似乎也变得有名无实，老先生因此选择了离开。

要了解MPEG，可能要先从了解ISO开始

ISO(International Organization for Standardization国际标准化组织）一九四七年在第二次世界大战的废墟上成立，它的工作听起来既简单又神圣，那就是为全人类制定标准。ISO的总部位于日内瓦，参与者为各成员国的国家标准机构和公司。

因此，ISO是一个国际性的非政府组织的同时，它也是一个等级森严的组织。甚至说它是一个官僚机构也不足为奇，毕竟许多政府机构和私营公司都是等级森严、官僚主义的。但比起一般公司，ISO的运作却更像是罗马帝国，而非普通的官僚机构。

从1987年到现在，Leonardo Chiariglione在 ISO工作了大约33年。他在文章中称， ISO 具有其他标准制定组织所没有的特性，有些可能是负面的，但同时也存在积极、独特的方面。

ISO的标准化工作由技术委员会(TC)负责，而技术委员会由秘书处管理，秘书处通常从在技术委员会所服务的行业中发挥重要作用的国家里挑选出来。

也就是说， 一个在行业中扮演重要角色的国家同时还负责为该行业制定标准，这不仅使得该国在此行业中具有主导作用，还会因此具有市场支配力。而且国家通过行使指令分配给秘书处的广泛权力，最终也能够控制该领域的标准。

Leonardo还列举过一些个人经历以及自己亲眼目睹的ISO“官僚主义”事件：

在一次Leonardo代表意大利参加的JTC 1（Joint Technology Committee 联合技术委员会 同样属于ISO）会议上，他向一位小组委员会主席介绍自己是 MPEG的召集人，Leonardo的想法是 MPEG 与该委员会可以在一些共同感兴趣的问题上合作。而那位主席却是一副“你这个卑微的工作组召集人怎么敢跟我这个委员会主席说话? ”的态度，然后，他因碍于面子又勉（居）为（高）其（临）难（下）地和Leonardo谈了半分钟。

还有一次是为一个常设委员会主席颁发一个奖项，而该委员会最显著的成就是主持了常设委员会一次最短的全体年度会议。这又是典型的封建主官僚义: 步兵首当其冲，但总是军官获得勋章。

同时，Leonardo也客观地指出，ISO 在重要事项方面并不是封建的。虽然比起一般组织，ISO更像是罗马帝国。但罗马帝国需要有人以死效忠，也会出现屠杀、贿赂甚至是推翻政权的起义。但在ISO—— 一个国际标准化组织——该组织的技术委员会永远不会试图得到或控制某个组委会。至少在ISO 工作的人们都是正直的，他们永远不会被贿赂、被甜言蜜语、承诺或威胁所说服而改变自己的志向。

只是在许多情况下，“封建主义”恰巧是一种适合 ISO 的属性。

世界上有两种人类组织：

以总体规划为基础创建和发展的人类组织，这样的组织总有一天会发现，世界比它们开始时所设想的要复杂得多；

还有一些没有总体规划、根据实际需要而成立的组织，他们则迟早会发现，其组织结构亟需被进一步合理化。

1947年成立的ISO 就是后者，当时没有创建标准化领域的总体计划。从技术委员会(TC)的设立方式——根据需要设立技术委员会——就可以很容易地看出这一点：

TC1: 螺纹

TC2: 紧固件

TC3: 限制和配合

TC4: 滚动轴承

TC5: 黑色金属管和金属配件

TC6：纸，板和纸浆

TC7：铆钉

TC8: 船舶和海洋技术

事实上，在解决了“黑色金属管道和金属配件”的标准需求之后，ISO 又为“纸张、纸板和纸浆”创建了一个 专门的TC。无独有偶， 在制定了“铆钉”标准之后，ISO继而又成立了“船舶和海洋技术”TC。

逻辑就是这么个逻辑，大家可以是这想象一下同样归属于ISO的MPEG是如何应运而生的。

在Leonardo眼里，这样做其实是正确的，当然你也可以尝试去制定一个总体规划或描绘一整个行业图景。但即使你做到了，几年后，技术的进步也会让这个规划很快过时。

但有一点，除了常规的TC（Technology Committee 技术委员会），ISO还有一个非常规TC——JTC 1（Joint Technology Committee 联合技术委员会）。JTC 1涵盖的领域非常广泛: 字符集、电信、软件和系统工程、安全设备、数字记录媒体、办公设备、数字媒体、安全、学习信息技术、生物特征识别、用户界面、云计算、物联网、人工智能等等。

Leonardo认为这种情况并不合理，因为 JTC 1不再是按“一个 TC 负责一个领域”的逻辑发展出来的下属机构，相反，它集合了许多领域（很多时候这些领域彼此之间是完全分离的）。

这里还有另一个更严重的问题。在 ISO 制定的22962标准中，JTC 1制定了3249个标准，约占所有 ISO 标准的14% （MPEG 产生的标准约占16%）。

但JTC 1实体(SCs、 AGs 和 WGs)的实际成员可能占 ISO 实体(TC、 SCs、 SCs、 AGs 和 WGs)全体成员的30% 。ISO收到的专利声明中，约80% 与JTC 1标准有关(其中约71% 与 MPEG 标准有关)。

补充一点，JTC 1与 TC 291“家用燃气煮食器具”有相同的管治，而这一类目至今仍未制订任何标准。

这里附一份截至2020年6月的JTC 1小组委员会的组成：

编码字符集

系统之间的电信和信息交换

软件和系统工程

Sc 17个人身份证和保安装置

Sc 22程序设计语言及其环境和系统软件接口

Sc23用于信息交换和存储的数字记录媒体

Sc 24计算机图形学，图像处理和环境数据表示

Sc 25资讯科技设备互连

Sc 27资讯科技保安技术

Sc 28办公室设备

Sc 29音频、图片、多媒体和超媒体信息的编码

31自动资料收集技术

Sc32数据管理和交换

Sc 34文件描述和处理语言

Sc 35用户界面

Sc 36用于学习、教育和培训的信息技术

SC 37 Biometrics

Sc38云计算和分布式平台

Sc 39资讯科技的可持续发展

Sc 40资讯科技服务管理与资讯科技管治

Sc 41物联网及相关技术

Sc42人工智能

以下内容由LiveVideoStack据MPEG创始人&召集人Leonardo Chiariglione的博文整理而成。老先生笔耕不辍，近一个月俨然成了专业的“内容生产者”。人们对这些文章的看法大相径庭，在这里我们不做评论，各位如果有兴趣可移步Leonardo的博客一探究竟。

是MPEG没有未来

还是未来不需要MPEG

作者：Leonardo Chiariglione

引言

本来我这周的计划是探讨 MPEG 未来几年的前景， 但现如今有一个重大的消息: MPEG 于欧洲中部时间2020 年6月2日16:30 不复存在了。痛苦的过程总是漫长的，但结果在最初就可以预见。部分原因与 ISO组织的天然属性有关，我在这里描述的ISO 的主要特征可见于另一篇博客——IOS，一个封建组织（https://blog.chiariglione.org/this-is-iso-a-feudal-organisation/

）。

曾经的标准参考组织占世界生产总值的近2% （也就是15万亿美元），它影响着数十亿人的日常生活，现在却成了一地鸡毛。将所有媒体组件（同时被大多数标准机构和公司所模仿）集中在一个委员会的激进的革新已经不复存在。现在，ISO 媒体标准反而被区别对待。上帝保佑有人会把破碎的ISO重新拼凑起来。

MPEG 的消逝则是“雪上加霜”，对此，我曾发表过几篇文章:A crisis, the causes and a solution, Can MPEG overcome its Video “crisis”?, Business model based ISO/IEC standards, and IP counting or revenue counting?（https://blog.chiariglione.org）

但在发表了那些文章之后，我又被迫保持沉默，现在是时候再次发声了，而且这将是更加响亮和清晰的声音：

那些创建了新的知识产权的人必须有权利去使用它；

技术创新应该受到能够识别、决定和保护知识产权制度的组织的大力奖励；

那些按照官方标准机构宣布技术规范、提供知识产权的人应比那些不提供知识产权的人受益更多。

同时，他们也应该有更多的义务。

当下的状况

我不会花太多时间追忆那些把 IP 置于 MPEG 标准中的公司是如何获得丰厚回报的。据一位知情人士透露（我还不能证实他的说法），在 MPEG-2标准有效期间，MPEG-2专利持有者每年可以分享近10亿美元的收入。

大多数知识产权持有者用这笔钱对新技术进行了再投资，这些新技术为 MPEG 的良性循环提供了动力，毕竟MPEG包含了180多个标准（其中还包括了6个视频编码标准和6个音频编码标准）。

遗憾的是，只有在童话故事中，故事才以“ ... ... 最后他们幸福地生活在一起”结束。MPEG 在 MPEG-2之后并没有“幸福的生活”，因为大多数 MPEG-2 IP 持有者都使用以下(视频)编码标准，并且很难适应互联网视频分发模式。

此外，HEVC 的知识产权持有者数量激增至45个，其中2 / 3属于现有的3个专利池之一，剩下的1 / 3则不属于任何专利池。这并不令人感到惊讶，HEVC 标准在广播时代是有一些用途，但是它在网络时代的使用仅占比寥寥12% 。如果有人认为广播是一个丰富但正在衰退的市场，而网络视频正在不断崛起，那么他们也应该明白 ISO 标准将逐渐降级到一个越来越边缘化的市场。

参赛者

当 MPEG-4视频许可证将 MPEG-4视频标准判处死刑时，竞争者们接连出现。不得不提的四个名字是 Real Networks、Microsoft、On 2和 Google。私有公司能够整合具有商业价值的视频编解码器的事实表明，视频编码已经是一项成熟的技术，“任何人”都可以整合出一种性能合理的解决方案。

由于许多视频编码专利在申请20年后才能获得，因此 MPEG 尝试 整理出一个视频编码规范也很合理，该规范可以在没有许可证的情况下使用，如果可能的话，甚至还可以免费使用许可证。MPEG这样做的基本原理是: 你是希望让自己的客户被竞争对手服务——而不看到他们回头——还是希望你自己就可以为客户提供一个响应其需求的解决方案？

MPEG通过3种不同的途径来实现这个目标:

定义一个免版税的 AVC baseline(称为WebVC)。

一些 AVC 专利持有者确认了他们的版税专利声明（royalty bearing patent declarations）；

从头开发一个免版税的标准；

从现有的解决方案开发一个免版税的标准。

我们从这三段经历中学到了什么？当然，不应强迫一家公司免费提供一项专利，但同时 ISO 的规则是允许一家公司仅通过发表警告性声明“我拥有只有我愿意才能授权的专利” ，就可以防止无许可 / 免费授权标准的发生。

现在有什么 / 将会有什么

一些公司提出了一个初始的建议，即制定一个标准，以避免知识产权不受控制的流动，有时这种流动的价值值得怀疑，并附带同意许可证的负担。该提案要求:

1. 一种双层编码方案：

a. 基础层必须包含有20年以上的技术或者可以免费访问的技术，并且能够对 AVC 作出重大改进；

b. 第二层应该提供比 HEVC 更显著的改善。

2. 鼓励宣布许可证条款将在FDIS批准后的两年内公布。

该标准被称为关键视频编码(EVC) ，已于2020年4月送达 FDIS。最终的性能数据还没有公布，但是预计 EVC 基层将比 AVC 优化20% 左右，EVC 整体将比 HEVC 优化30% 。许可证条款则尚不清楚。

预计Versatile Video Coding (VVC)（最新的视频编码标准）将在四周内达到 FDIS。（LiveVideoStack注：VVC v1在7月2日已完成定稿。）

为了完成视频编码标准的整理，低复杂度增强视频编码(Low Complexity Enhancement Video Coding，LCEVC)有望送达 FDIS。在适当的条件下，结合 LCEVC 和N世代编解码器应该能够提供与N + 1世代编解码器质量相当的性能。

市场提供了什么

市场并没有停下脚步。2015年，最初的一批公司(亚马逊、思科、谷歌、英特尔、微软、 Mozilla、 Netflix)共同创建了开放媒体联盟(AOM) ，初始目标聚焦在视频领域。 AOM 提到了第一个规范 AV1的4个主要特性:

免版税生态系统

专利审查程序与司法辩护基金

尖端技术

协作式开源开发

其他媒体编码标准的许可

本节所提供的资料是相对准确的，但如果你打算做一个商业决定，烦请咨询律师。

视频

目前还没有 MPEG-1视频的授权许可，但该标准仍被广泛使用。

MPEG LA开发了MPEG-2视频许可证，MPEG-2也在之后得到了广泛应用。

MPEG-4 Visual曾经的日子并不好过，因为该标准的主要市场目标——流媒体的许可路径看起来并不合适。

MPEG-4 AVC是一个非常成功的标准，尤其令人自豪的是，它完全可以承担“通用”属性，因为它同时也应用于广播和网络流媒体。

现在已经7年过去了，MPEG-H HEVC 专利持有人仍然没有共同行动起来在授权法案上获得进展，也没能提出一个体面的统一许可。HEVC可以用于广播，但在流媒体的使用方面则是有限的。多年来，一位 MPEG 官员一直试图说服 MPEG 相信 HEVC 在市场上表现良好。

2017年，我主动提议将这一情况提请至联合过渡委员会（JTC1），与此同时编写了一份文件并在组织内达成了一致意见。我去 JTC 1展示了这份文件，然而，有几个国家以程序上的理由提出反对。时至今日，由于这些反对意见，国际标准化组织（IOS）仍然没有在官方层面意识到专利的问题所在。

音频

MP3有一个非常简单和有效的许可证，该标准也因此得到广泛采用。现在，硬件和软件 MP3设备的数量以十亿计。

AAC 的专利池拥有有效的许可程序，据估计，AAC 的硬件和软件设备数量多达100亿台。

MPEG-H 3D Audio已经出现了几年，并且已经被 ATSC 3.0采用，但目前还没有已知的可用许可证。最近，一个预计只包含一家公司的 IP 的配置文件已经启动。3D Audio也仍然有望获得许可证。

3 D 图形

过去的标准在这方面没有多少吸引力。而点云压缩(PCC)则需要相反的效果。该标准将于一个月后(2020年7月)成为 FDIS。专利持有人的数量预计将明显少于 HEVC。

我对下一步视频编码标准的看法

HEVC 留下的空白已经被 AOM 的 AV1规范所填补，该规范现在被广泛应用于流媒体。

EVC之所以被看好，是因为它虽然比 VVC 性能低，但可以提供与 AV1相当甚至更好的内容质量。EVC 是有机会获得下一张牌照的。当然，这还并没有发生。

VVC 的专利持有者数量极有可能远远大于 HEVC。2018年成立的媒体编码行业论坛的目标是:

进一步采用 MPEG 标准，首先将重点放在 VVC (Versatile Video Coding)上，为消费者和业界建立广为接受和广泛使用的标准。

然而，如果撇开会议上组织的活动不谈，到目前为止，外界还没有得到任何具体的结果。MC-IF 有31个成员，其中7个是拥有许可权利的(即略少于所有成员的1/4)。 “行业”成员只占HEVC 专利持有人的1/2。

在这些情况下，很难相信 VVC 会比 HEVC 表现得更好。它可能会遭遇更糟糕的情况，因为实现VVC 在广播中的应用将需要好几年的时间。

EVC 的成功将有助于 VVC 取得成功。看到 了EVC (和 AV1)的威胁，VVC 专利持有者可以一起行动，提供一个体面的许可证。尽管我很认可这样的发展，但我仍认为这种可能性很小。

一个像样的许可证可以颠覆现有的格局，对 VVC 来说，另一个威胁可能意味着：对VVC 专利持有者来说，提供一个单一的和体面的许可证将面临着更多的压力。

披露

现在我终于可以公开分享，为防止曾经的 MPEG 视频编码消失，我都有哪些想法:

如果未来只剩下VVC，那么VVC自身也无路可走；

EVC将成为 HEVC 和 VVC 之间的夹层标准；

在适当的条件下，基于 EVC 的 LCEVC 可以在质量上与 VVC 竞争；

如果 EVC 能够成功，那么 VVC 就有机会，如果专利持有者能够感受到竞争并同意一个像样的许可证的话。

很少有人明白我的目标从来不是促进 EVC 本身的成功。通过推广 EVC，我打算推动内部竞争，从而促进 VVC 的成功。如果这不会发生，忠实的 MPEG 客户仍然有机会购买现存的唯一有竞争力的 MPEG 视频编解码器——EVC。再加上 LCEVC，他们一样可以获得最先进的性能。

我的预测

我对未来的预测并不乐观，原因如下:

1. 不再有统一的MPEG，又或者说，MPEG实际上将不复存在。这一切都是不可避免的，现如今只是在等待人们真正去做到那一步而已。因为MPEG及其对整个行业的影响，就像中世纪一座随时准备受到强大军队攻击的自由城市。正如700年前的三国演义里写的那样：话说天下大势，分久必合，合久必分。而长期以来，大约也就是30年以来，MPEG一直在进行着统一运作。

2. SC 29公认的负责人还没有对未来发表任何观点。这几乎是一个丧钟，因为数字媒体正在一个成熟的市场上以飞快（甚至有点过于快了）的速度发展。如果 ISO 等市场发挥作用，然后再去制定一个标准，它就会失去自己本身的时间标准。MPEG已经博弈了30年，有时赢有时输。

3. 最重要的是，现在市场已经想出了一个解决方案——那就是开放媒体联盟(Alliance for Open Media)的 AV1——该方案能够提供表现良好的规范，而且不需要版权费，并承诺为受到攻击的会员提供保护(这是有附加条件的，但人们只关注眼前的利益，而很少考虑自己的选择在5年后会带来什么影响)。

那么，接下来会发生什么呢？

如果 EVC/LCEVC发展态势很好：

VVC也有希望被广泛应用。专利持有人将获得预期的版税流量，并感到支持 MPEG 模式仍然有利可图，因此可能愿意进一步投资 MPEG。然而，由于这种情况只会在2-3年的时间段内出现，专利持有者将不得不再给予 MPEG 2到3年的支持与信任。

如果EVC/LCEVC发展态势不好，我会考虑以下五种情况:

1.奇迹发生。VVC专利持有者将共同行动，提供一个像样的许可证。然而，奇迹并不常见，因为它们往往象征着需要有圣徒追随。

2.NPEs/ 大学 / 行业研究试图通过“假装整个业界都会使用生产的‘标准’ ”来维持环境的活力。这种情况将持续一段时间，直到上级管理层意识到自己在浪费时间和金钱。

3.这样的环境成为了一个评估“论文”(不是真正的贡献) 以产生“文件”(不是标准)的特殊“会议”(不是标准会议) 。 “文件”的价值在于评估技术”价值”的”技术筛选过程” ，以便那些希望制定规范(例如AOM)的人知道它们是被筛选出来的优秀技术，这或许可以拯救NPE的商业模式。

4.这样的环境还要负责维护大量的标准。这可能会变得很困难，为换取新标准中的一些乐趣(这种标准将不再存在)而去维持旧标准，对技术专家的吸引力还远远不够。

5.这样的环境会成为公开可用的规格(PAS)供应商(例如 AOM)将其规格转换为 ISO 标准的地方。如果真要堕落到如此境地，我希望彼时自己已经不在这个世界上了。

现在

Something is going to happen…

翻译&编辑：Coco Liang

LiveVideoStackCon 2020 北京

2020年10月31日-11月1日