牛人说

　　「牛人说」专栏致力于技术人思想的发现，其中包括技术实践、技术干货、技术见解、成长心得，还有一切值得被发现的技术内容。我们希望集合最优秀的技术人，挖掘独到、犀利、具有时代感的声音。

　　本期牛人：陈辉

　　陈辉：七牛云技术总监，主要带领七牛云的直播、RTC、SDK 等团队升级产品能力和攻克技术难关。曾主导过大型服务化体系建设和业务中台建设，有着丰富的性能调优和架构设计经验。

　　去年 10 月份，七牛云发布了结合行业特定属性打造的「音画质量分析系统 QoE」，通过对通用音视频评价维度的打分和基于质量美学维度的评分相结合，对数据源进行综合、客观的评价。公测至今，已有多家行业头部客户完成测试并上线，这一系统正在切实地助力客户业务发展。

　　音画质量分析作为音视频领域的热门话题，业内非常多的厂商于近期频繁在这一领域发声并发布相关产品。这一类产品为何会受到追捧？背后的核心技术与价值又是什么？

　　七牛云技术总监陈辉作为这一产品的负责人，在发布后的半年内大量走访了不同行业的客户，围绕着音画质量评价和提升维度，寻找合适的共创伙伴，共同打磨提升产品。本期「牛人说」，我们邀请陈辉来分享他对「音画质量分析系统 QoE」的观察与思考。

　　1、音画质量分析系统，究竟是什么？对于行业有哪些价值？

　　从目前国内的情况来看，视频产业正从强调用户规模走向提升服务品质。对于音视频服务领域而言，追求的也不仅是单纯的 QoS（网络服务质量），需要考量用户侧的体验效果。

　　什么体验才算好？这个问题在此前的行业中莫衷一是，没有一个标准答案。著名管理大师德鲁克有一个观点，“没有度量就没有管理”，我认为可以做个类似的比喻 ——“没有度量就没有改进”。

　　度量可以帮助我们获得相对准确、客观的信息，尤其是在高度信息化的 IT 产业中，没有度量就容易缺乏对产品与工具的客观认知。在音视频行业中，音画质量便是一项看似主观但实际上可以量化、分析的领域。七牛云音画质量分析系统的出现，能为此前并不十分规范的行业提供更为严谨、客观、全面的参考坐标。

　　2、与市场上其他 QoE 产品相比，七牛云音画质量分析系统的特点是什么？

　　和传统 QoE 不同的是，七牛云音画质量分析系统从设计之初就有明确的要求：贴近和理解客户的业务。在系统设计方面七牛云独创了三位一体的评价体系 —— 基础评分、美学评分和行业特定维度综合评分，这是通过和行业头部玩家共同探索合作、积累经验得出的评价体系。

　　此外，七牛云推出音画质量分析系统还有一大优势，便是可以和自身业务相结合，更加了解行业需求、更加有的放矢。

　　我们致力于打造端到端的多媒体解决方案，让客户可以实现快速、高效的集成，缩短从想法到产品的距离。当然，我们的产品也将持续围绕用户体验进行打磨，这是长期坚持下去的事情。

　　音画质量分析系统正是从我们在打磨视频云过程中演化出来的产品，可用来客观的评价内部产品的体验质量，提高我们对于自身产品质量的要求；同样内部的使用环境也可以反馈系统，进行不断的优化、升级。

　　3、能否对「三位一体」的评价体系，进行展开介绍？

　　拿视频评分举例：

　　从基础视频质量上，我们会分析视频卡顿率、黑屏、马赛克、音画同步等现象；

　　从视频美学角度，纳入平衡、颜色和谐、趣味、景深、光照、主体颜色丰富性等指标。

　　两大类多项指标综合起来，最终获取音视频资源的主客观质量分值。

　　基于不同的维度、客观地为实时音视频打分，用户能借助明细分对视频做进一步的分析和优化。

　　以电商领域为例。评价一个画面的好坏，除了会关注基础的分辨率、色彩饱和度等，还会从美学维度关注画面和谐、景深位置等。从行业属性看，电商的大部分业务都会要求，图片或视频尽可能“实拍”和“原创”，所以针对这类的音画分析，我们额外纳入了马赛克、水印、九宫格、白底图等电商维度的特有元素。

　　在实践中，七牛云音画质量分析系统 QoE 会对质量进行评分，再由七牛云的锐智转码、HDR、超分、降噪等工具，全面提升画质。快速、高效地形成质量分析和优化的闭环，为更好的用户体验助力。

　　4、能否分享一些具体的业务场景和遇到的技术挑战？

　　在七牛云内部，音画质量分析系统作为评价音画质量的工具，会在各个流媒体产品上见到它的身影。我们的每一次上线，都会要求对媒体质量做评分对比，确保系统的改动不会造成音画质量的大幅波动。所以，这是一个非常好用的质量稳定性评测手段，也是目前实际应用的一个业务场景。

　　在商用领域，对于业务的价值更加明显。我们打造这款产品，主要还是希望能够在业务上帮助客户带来价值，从而获得业务的增长。现阶段 QoE 大概会有如下几类应用场景：质量变化的转化率提升场景，比如直播列表图对直播间进房转化率、用户头像对点击率的提升、电商的缩略图选择等；内容质量的提升，比如 UGC 内容的整体调性提升，直播间布局的美观度提升等；当然还有一些是可以基于行业特点模型的判断场景，这里就不一一列举了。

　　在研发和优化 QoE 的过程中，确实会遇到非常多的技术挑战。比如我们会通过调整网络的损失函数进行多数据集融合训练，从而解决多个数据集融合时 mos 分布不同，以及不同数据集打分标准的不同。

　　为了解决图像内容对图像质量的影响，会涉及到非常多的算法调优工作。即使是在图像分辨率、清晰度等指标都相同的情况下，由于画面内容的不同，人们的主观评分肯定也有所不同。

　　在音视频领域，七牛云不会一味地做需求追随者，而是不断要求自己去创新和突破。今年我们会着重从“RTC+数据”的维度进行探索。

　　5、七牛云音画质量分析系统的出现，会为行业带来哪些变革与推进？

　　对于变革我个人有两个判断基点：一是用户想要什么，另一点是我们能创造什么。

　　从用户最基础的实时通信需求看，「眼见为实」即是用户的需求，也是我们一贯的追求。所以在体验端，分析系统的出现会为音视频质量的提升带来可锚定的突破方向。例如在分析系统的加持下，七牛云会结合自身的锐智转码、超分、3A 优化、空间音等能力，进一步提升 RTC 场景下的用户视觉、听觉体验。

　　分析系统的出现，也将促进为更多行业带来垂直于实际场景的解决方案。通过分析系统的前期判断与决策，行业客户更容易理清自身的需求，并逐渐推进行业标准的规范化，从而使得方案提供商得以推出更垂直、有效的解决方案，满足对应的行业需求。比如七牛云 QRTC 结合 AR 眼镜打造的「智能船舶检修方案」，就是实实在在解决了船舶检修用户对于效率提升的诉求。

　　点击了解七牛云「音画质量分析系统 QoE」