来源：C114通信网5G不仅能够为消费者带来前所未有的体验提升，更将赋能千行百业、激发数字经济潜能，其最大价值将会体现在对垂直行业的影响上，而这一点将靠SA（独立组网）架构来实现。2018年初便率先掀起5G建设的中国移动浙江公司（下称“浙江移动”），最近又一次走在了全世界的前列。9月29日下午，它基于与华为等产业链合作伙伴的共同努力发布了首个5G SA云网络，并打通首个5G VoNR通话。据介绍，这张网络在保障超大带宽、超低时延和海量链接5G网络服务的同时，还能提供更高级的网络安全保障，全面满足政府、电力、金融等行业高安全可靠性的要求，并结合网络切片及边缘计算技术，形成全新的下一代5G云化通信基础设施。可以说，此次发布代表了中国移动在“建好5G、用好5G”上再进一步，同时也意味着我国5G SA产业链已经逐渐成熟，具有及其重要的产业意义。那么5G SA云网络新安全、新网络的特征何以体现？究竟带给垂直行业怎样的好处？浙江移动又缘何能够在5G领域一路领跑？通过现场参会与专家的交流，笔者在此尝试作个深入解读。5G SA云网络诞生背景“4G改变生活，5G改变社会”，这样的观念已经深入人心。但5G分为了NSA（非独立组网）和SA两个阶段，能够完全实现ITU所定义的三大典型场景（eMMB、uRLLC、mMTC），真正改变社会的还是作为目标网络的后者。工信部部长苗总即在最近的国新办新闻发布会上谈到，“真正能够体现5G性能，还得依靠独立组建的5G网络，而不是基于4G核心网上面的NSA”。而5G真正的应用场景，“80%应该是用在工业互联网领域，这是5G最让人期待的领域”。当然两者都是“真5G”，它们的区别主要在于核心网。5G NSA采用的还是4G核心网，本质上是为满足早日商用5G的愿望而提出的一个过渡性方案。而5G SA采用了基于云原生和SBA服务化架构打造的全新的5G核心网，网络资源可以按需灵活组合；同时数据的转发和控制分离，使得连接可以更贴近用户。边缘计算、网络切片等5G的核心能力在SA网络下能够更好地实现。具体来说，SA相比NSA的优势有两方面。一方面，SA网络的上行大带宽是NSA的2倍，同时可以通过边缘计算在网络边缘侧完成数据转发处理，提供小于10ms的端到端时延，真正满足工业PLC控制、无线视频回传等场景的需求，赋能千行百业。另一方面，SA网络结合切片技术使得整个网络可以按需定制，从无线、承载、核心网进行端到端资源隔离，提供网络可靠性、时延抖动、安全隔离等方面差异化SLA保障，满足不同行业对网络能力的定制化服务需求。目前多数运营商部署的5G网络都是起步于NSA架构，而由于5G商用的提前，国内三大运营商也先选择了混合组网的方式以实现5G快速建网并节省成本，不过上SA依然是他们的目标。比如中国移动就宣布2020年1月1日起将不允许仅支持NSA的手机入网，国内5G基站也要尽快向SA过渡；中国电信亦表示坚持5G SA的发展方向，在其规划中将于2020年率先启动面向SA的网络升级。同时各地政府亦积极推动SA网络的建设，深圳市政府即发文提出，对按时完成5G基站建设目标的电信运营企业，原则上给予采取SA模式建设的基站每个1万元奖励，单个运营商最高奖励1.5亿元。在这样的大背景下，浙江移动5G SA云网络的发布代表者其5G SA网络能力已基本成熟，对整个5G的网络建设起到了引领示范作用。“新安全+新网络”助力万物智联起飞随着移动通信的触角由2C延伸至2B，纷至沓来的新业务诉求推动了网络的演进与重构，而新型网络能力和安全体系将是运营商们在万物智联的新时代一展所长的关键。5G SA云网络实现了新安全、新网络两方面的重大突破，为提供5GaaS（5G即服务）能力、支撑各行各业的转型升级奠定了基础。首先，5G创新应用将更多地切入工业、能源、金融、医疗等关乎国计民生的重要领域，一旦出现问题就付出极为高昂的代价，乃至影响整个国家的运转，再怎样强调其安全性都不为过。因此如何加强网络安全核心技术研发、防范网络风险、构建安全可控的基础网络已成待解决的课题，也是运营商及其产业链伙伴必须担当起的责任。为此，浙江移动率先引入以华为鲲鹏处理器等先进处理器作为代表的新算力，推进鲲鹏生态发展，并覆盖到Taishan服务器、存储、操作系统、数据库到核心网网元等核心部件，构筑全新的5G SA云网络，现已完成了50余项技术规范制定，1万多个测试用例验证。基于这样的手段，浙江移动5G SA云网络可以更好地满足高安全、高可靠的行业客户需求，同时也可避免单技术路线依赖带来的供应链风险和硬件层级的安全漏洞风险，对发展具有全球竞争力的通信核心技术起到了重要的推进作用。其次，5G时代运营商业务从传统语音+数据拓展到千行百业，5G网络需要支撑这样的业务转型，从连接（语音+数据）到以切片为载体的服务包销售，将网络能力作为一种服务包销售给个人和企业，重新定义新商业。这需要整个网络进行协同，其中处于网络中心位置、作为抓手的核心网需具备切片和敏捷运维能力，同时公有云与MEC（边缘计算）形成生态合力、云边协同，为行业应用提供端到端极致的网络服务，支撑运营商实现5GaaS转型。目前，浙江移动在5G SA云网络上已经率先完成全领域规模测试，并持续打造基于5G SA的超低时延和极速带宽体验，赋能千行百业。基于当前的5G SA网络、结合5G+MEC技术，5G SA云网络可以实现时延相比4G 5倍以上的性能提升、带宽17倍以上提升，实测所得的时延最低可达10ms以下、网络下行速率可达1.7Gbps以上。类似于4G时代的VoLTE技术，在5G时代提供高清语音通信的是VoNR技术。基于5G SA云网络的VoNR通话，在保证客户高清视频通话的同时还可以让客户同步享受到超高速下载服务。在现场，浙江省通信管理局党组书记、局长徐建华与浙江海港集团宁波港信息通信有限公司副总经理黄昂涛打通了首个5G VoNR通话，从现场效果来看，话音清晰、视频画面流畅。5G SA云网络同时还具备高性能的网络切片能力，从而真正使5G网络具备了高隔离性、高可靠性和高安全性。浙江移动以此为基础提供的行业特色的SLA定制化服务，可为客户带来端到端有保障的差异化网络体验。比如为吉利汽车实现无人驾驶提供的高可靠切片，可靠性高达六个9、端到端时延小于10ms；为腾讯云游戏提供的资源保障切片，抖动小于10ms、端到端时延小于30ms。浙江移动5G一路领跑背后2018年初开始杭州“5G之城”建设以来，浙江移动一路先行先试，在5G站点开通、精品区域打造、5G产业联盟发展、工业互联网应用孵化等众多领域取得了多项全国乃至全球第一。回顾历史，可以发现浙江移动堪称中国移动在创新探索上的一支先头部队。它于2012年3月底便宣布开通4G/TD-LTE体验、2015年8月17日宣布商用4G VoLTE，在4G时代就已持续领先。在运维领域，亦率先展开以网络为中心的运维模式向以客户和业务为中心的运维模式转型，引得海外运营商纷纷来取经。5G网络建设上，在开展5G规模实验之初的2018年3月，浙江移动就率先开通了全球首个3GPP标准5G基站和2.6GHz频段5G/4G双模基站。经过一年多的建设与试验，现已实现杭州主要城区及主要科创产业园的5G覆盖，全省移动5G网络规模化建设正在按照“1+3+7”计划积极推进中，预计到今年年底5G基站的规模突破将1万站。用户发展上，浙江移动目前为止已在全省11个地市打造5G基站的规模突破将1万站。用户发展上，浙江移动目前为止已在全省11个地市打造5G体验厅总计39家，发展持有5G终端的5G体验客户1.3万名。建好5G，更要用好5G。在产业生态建设和应用孵化方面，浙江移动亦成果卓著。它所牵头成立的全国首个5G产业联盟，目前已经发展了以领头羊、独角兽等行业领军企业为代表的成员单位达106家，联合“五横十纵”面向十大重点垂直领域孵化150余项创新项目。而在过去一年多的试验网阶段，这家运营商开展了全球范围最大规模的应用验证，比如在智能制造领域，其5G+工业制造解决方案在杭汽轮、绍兴喜临门、嘉兴新凤鸣等企业实现实际应用；在广电视频领域，已联合浙江广电、杭州广电等广泛开展数十场5G超高清直播，并打造了VR超高清视频云平台；在交通领域，联合中汽研、吉利汽车等在宁波、嘉兴实际部署了基于5G网络的自动驾驶应用场景，并在宁波港打造了基于5G的轮式轮门吊远程控制和18路超高清视频的实时回传。“孤举者难起，众行者易趋”，气势磅礴的交响乐也需要众多乐器的配合方能奏出。浙江移动在创新上“跑得快、跑得远”也离不开- -众产业链合作伙伴的支持。以华为为例，在浙江移动5G建设之初即全面参与、积极行动，提供了无线接入网、核心网、承载网到终端、到云全覆盖的端到端5G产品及解决方案。在5G SA云网络中最关键的核心网建设上，华为也与浙江移动一路同行，采用CUPS（转控分离）架构、三层解耦的NFV产品形态，全面验证2/3/4/5G融合核心网的目标方案。据华为云核心网产品线副总裁刘康介绍，早在2018年6月，双方就联手成功完成NFV四阶段验证，发布了全球首个“三层解耦NFV电信云样板点”；今年4月，实现全球首个5G SA商用。按规划、接下来双方将共同打造全球首个2/3/4/5G SA全融合的目标网络商用，并将在最丰富MEC生态构建和切片商用率先落地方面有所作为。面向未来，浙江移动方面表示将全面推进5G+计划，通过融合5G+AICDE的创新能力与十大重点领域的应用需求，打造以5G为中心的泛在智能基础设施。同时，依托以5G能力构建开放5G生态，实现5G+X应用延展，携手各合作伙伴以自主可控、融合创新、生态共建为方向，在云网络及应用上不断进行创新探索，从而更好地赋能数字浙江、助力壮大浙江数字经济，推动浙江5G商用进程全面领先。而浙江移动与华为5G实践将成为全球5G商业成功的一笔丰厚资粮。更多信息，请关注华为5G+X 联创营：https://developer.huaweicloud.com/techfield/5g.html

        车路协同为智慧交通注入了新的活力，想象一下诸多科幻电影里的场景：人们随手召唤一辆无人驾驶交通工具，就可以在没有任何拥堵的情况下抵达目的地3。因此，车路协同作为一种新的智能技术解决方案，将有效解决城市的运行效率和拥堵问题，并为人车建立高效的安全保障。        一方面车路协同成为智慧城市建设新的切入点。当前我国智慧城市建设步伐加快，随着高清智能摄像头和城市物联网智能传感器的快速普及，城市道路的信息化、数字化加速到来，随着车路协同体系的逐步完善，道路交通数据收集与分析、实时交通路况监测与预警、交通信号配时调整与优化等方面的能力大幅提高。另一方面车路协同推动自动驾驶快速落地。        自动驾驶技术主要集中于计算机视觉领域，涉及到多方面识别技术。就技术解决能力来看，车路协同可以有效处理道路、物体、行人等标识信息，是无人驾驶车辆上路的最重要安全保障和不可或缺的条件。        车路协同的大规模应用和推广已经成为现代道路交通发展的必然选择，虽然这样的场景很美好，但从行业发展的角度来看，目前车路协同还处于初级阶段，仍面临一系列基础研究的问题需要解决。车路协同产业协调难度大        当前，车辆及道路信息化、智能化水平较低，给车路协同带来较大挑战。一是车载V2X终端渗透率不足，当前车载V2X 终端处于发展初期，整体渗透率较低，制约了相关业务快速普及。路侧基站覆盖范围不足200 米，为后期大规模铺设造成过高成本。二是当前我国道路发展较快，但属地化管理对信息整合提出较高要求，由于设备厂家不同，运营方不同，导致道路信息“碎片化”严重，缺少统一的标准。三是道路信息分发缺少统一C 端入口，路侧感知能力难向C 端广域推送，用户获得一致性的体验难度较大。    2. 出行服务体验亟待提升        随着信息技术的普及，车辆出行服务不断改善，路况导航、车载娱乐内容更加丰富普及，但在车辆驾驶和乘客出行场景中，仍有需要提高的领域。一是当前车载导航路况信息主要依赖后台数据，只能支持分钟级更新，难以对路况做到实时导航，行车效率较低。二是缺少精细化出行服务，车辆驾乘应用场景丰富，包括泊车导航，交通灯提示，车道级路况提示等已经成为用户新的需求点。三是乘客在出行场景下期待优质内容体验，尤其是自动驾驶等技术的应用，让乘客逐步释放双手，对视频、游戏及音乐等高质量内容体验需求不断攀升。    3. 自动驾驶商用需要更高效的测试        按照产业普遍观点，自动驾驶企业需要100亿英里的试驾数据来优化其自动驾驶系统，若要达到该测试里程数，单靠测试场所很难实现。Waymo作为全球领先的自动驾驶公司，已经耗时10年进行测试，但行程也仅为900万英里。同时，现有测试场容量有限，测试设备昂贵、测试效率不高、技术迭代速度提升难。如何找到更有效的测试方法和手段，加速自动驾驶测试速度和步伐，成为车路协同真正有效落地的关键因素。        来源：5G车路协同创新应用白皮书

【云直播】边云协同解决方案时间：2020年11月27日 （周五）15:00~17:00 直播报名：https://bbs.huaweicloud.com/signup/21185f94018646bd9b6500fdaffc5c8c在当前“品质决定一切”的市场态势下，是否将产品质量作为底线？你是否有高效的产品质检诉求？你是否有防范化解重大安全风险的需求？随着视频分析技术被广泛应用到应急管理工作中，您是否对这一技术感到困惑？华为云将携手两位资深大咖齐聚一堂为您分享边缘智能质检，边缘视频分析解决方案，为您呈现云上训练，边缘推理，模型实时管理的边云方案。打造数字驱动、让AI引领的产品质检新生态！解决应急场站中的安全隐患！华为云为您请到了芯峰科技研发总监钟宇，远舢智能科技售前总监关键为您分享！【看直播，赢大奖】一重惊喜：邀請 1 名好友ZHU力即可获得入群资格,GET直播 PPT，华为云精美周边等抽奖机会。二重惊喜：排行榜第三名且邀請人数≧30 名即可获得价值 200 元的华为音箱。三重惊喜：排行榜第二名且邀請人数≧30 名即可获得价值 400 元的华为体脂称。四重惊喜：排行榜第一名且邀請人数≧30 名即可获得价值 1000 元的华为运动手环。锦鲤奖：邀請人数≧30 名好友，即可获得50元京东卡一张（仅限前 100 名）还等什么，赶紧扫码入群，看直播，中大奖！！！

【云直播】边云协同解决方案时间：2020年11月27日 （周五）15:00~17:00 直播报名：https://bbs.huaweicloud.com/signup/21185f94018646bd9b6500fdaffc5c8c在当前“品质决定一切”的市场态势下，是否将产品质量作为底线？你是否有高效的产品质检诉求？你是否有防范化解重大安全风险的需求？随着视频分析技术被广泛应用到应急管理工作中，您是否对这一技术感到困惑？华为云将携手两位资深大咖齐聚一堂为您分享边缘智能质检，边缘视频分析解决方案，为您呈现云上训练，边缘推理，模型实时管理的边云方案。打造数字驱动、让AI引领的产品质检新生态！解决应急场站中的安全隐患！华为云为您请到了芯峰科技研发总监钟宇，远舢智能科技售前总监关键为您分享！【看直播，赢大奖】一重惊喜：邀請 1 名好友ZHU力即可获得入群资格,GET直播 PPT，华为云精美周边等抽奖机会。二重惊喜：排行榜第三名且邀請人数≧30 名即可获得价值 200 元的华为音箱。三重惊喜：排行榜第二名且邀請人数≧30 名即可获得价值 400 元的华为体脂称。四重惊喜：排行榜第一名且邀請人数≧30 名即可获得价值 1000 元的华为运动手环。锦鲤奖：邀請人数≧30 名好友，即可获得50元京东卡一张（仅限前 100 名）还等什么，赶紧扫码入群，看直播，中大奖！！！

来源：C114通信网2019全球移动宽带论坛（Globe Mobile Broadband Forum）期间，振华重工、中国移动、沃达丰和华为联合发布了《5G智慧港口白皮书》。本白皮书对5G在港口自动化、智能化建设中的应用做了深度解读，旨在加快5G在港口的应用研究及项目落地。港口作为现代交通运输的枢纽，在国际贸易中起着举足轻重的作用。根据相关数据统计，全球贸易中约90%的贸易由海运业承载。港口作业效率为王，传统港口高度依赖人力近端操作集装箱起重机械，工作环境恶劣、人工劳动强度大、人力短缺，已无法满足全球海运快速发展的需求，港口自动化、智能化建设已成为全球港口共同的诉求。随着5G技术加速到来，其大带宽、低时延、高可靠等技术优势，将为港口工程机械提供全新的通信方案，为港口智能化建设注入新动力。基于前期振华重工与华为的实践经验总结，提升集装箱转运效率是港口的核心诉求，轮胎吊的远程控制是优先场景。利用5G的大带宽能力可实现轮胎吊高清视频实时回传，同时5G低时延能力可实现远程实时操控。集装箱操作员在中控室即可完成精准移动、集装箱举等操作，且可操控多台轮胎吊，在改善工作环境的同时，大幅提升作业效率。此外，5G还能为港口AGV或IGV的自动驾驶、港区视频监控等多种应用提供便捷、低成本的无线网络连接，结5G合边缘计算+AI能力，帮助港口设备和生产系统同步协调，提升港口作业效率和智能化运作水平。在港口领域的实践中，白皮书参与方意识到合作共赢的重要性和必要性。在中国，华为联合中国移动不断强化与振华重工的合作，并在上海洋山港、宁波港项目中建设5G港口专网，开展轮胎吊远程操控的试点验证。华为无线5G产品线副总裁杜叶青表示，5G不仅仅会对终端用户带来革命性的体验提升，还将加速垂直行业数字化、自动化、智能化转型。华为除了携手全球运营商提供高质量的5G网络连接外，还期待与全球垂直行业合作伙伴一起跨行业深度合作，培育全新商业机会。通过本次白皮书发布，华为将与振华重工、中国移动、沃达丰在智慧港口领域，结合人工智能、云计算、大数据等技术为客户打造更多有效的解决方案。更多信息，请关注华为5G+X 联创营：https://developer.huaweicloud.com/techfield/5g.html

边缘函数当前支持python2.7、python3.6的函数部署到边缘节点。后续将继续扩展支持能力，最终使得所有在云上支持的函数均可以调度至边缘节点。

原因分析用户没有为智能边缘平台建委托角色或没有在边缘计算组设置委托，因此IEF服务不能将边缘设备的监控数据上报到应用运维服务（AOM），从而导致边缘节点的监控界面没有数据。解决方法为智能边缘平台创建委托角色。在用户首次进入界面是系统会自动弹出创建委托界面。单击 “同意授权”则平台会自动创建委托。图1 自动创建委托用户在智能边缘平台创建节点时则会自动配置委托。

云计算是集中化的，离终端设备（如摄像头、传感器等）较远，对于实时性要求高的计算需求，把计算放在云上会引起网络延时变长、网络拥塞、服务质量下降等问题。而终端设备通常计算能力不足，无法与云端相比。在此情况下，边缘计算顺应而生，通过在靠近终端设备的地方建立边缘节点，将云端计算能力延伸到靠近终端设备的边缘节点，从而解决上述问题。智能边缘平台（Intelligent EdgeFabric）通过纳管您的边缘节点，提供将云上应用延伸到边缘的能力，联动边缘和云端的数据，满足客户对边缘计算资源的远程管控、数据处理、分析决策、智能化的诉求，同时，在云端提供统一的设备/应用监控、日志采集等运维能力，为企业提供完整的边缘和云协同的一体化服务的边缘计算解决方案。如图1所示，IEF将云端AI应用、函数计算等能力下发到边缘节点（EdgeNode），将公有云能力延伸到靠近设备的一端，使得边缘节点拥有云端相同能力，能够实时处理终端设备计算需求。图1 边缘云计算

来源：C114通信网来自世界银行的数据显示，全球人口在过去半个世纪增长了一倍以上；自1975年以来，以大约每12年增加10亿的速度增长。人口的增长意味着更多食物的消耗，成为现今这个时代最重要和最复杂的挑战之一，而5G令人看到了希望。作为强大的智能世界底座，5G的到来令无数传统行业开始迎接变革与颠覆，农业即是其中之一。在世界上最富裕国家之一的瑞士，4月初开通5G商用网络的领先运营商Sunrise，已经携手瑞士农业研究卓越中心Agroscope及华为在智慧农业领域进行了卓有成效的联合创新，成功打造该国首个5G农场。基于各自优势资源和5G本身高带宽、低时延、海量连接的特性，三方探索出牛联网、无人机巡田等商用案例，为欧洲乃至全球的5G农业应用提供了一个样板，也令瑞士一举成为5G业务创新上的领跑者。瑞士首个5G农场素有“欧洲屋脊”之称的瑞士国土不大、全境以高原和山地为主，也因此农业生产性用地面积有限，对于提高效率和可持续性的相关研究颇下功夫。隶属于联邦农业局（FOAG）的Agroscope即是瑞士农业研究的主体单位，为可持续农业、食品领域以及生态环境保护作出了重要贡献。此次Sunrise与Agroscope、华为联合打造的5G农场位于图尔高Tanikon的瑞士未来农场，拥有81公顷农田，其中包括55公顷耕地、20公顷自然草场和6公顷生物多样性地区。在这里，三方利用5G网络以及搭载其上的传感器、无人机、小型机器人等智能设备建成了一个智能化的作业环境。智慧农业的概念提出已有一段时间，但缺乏强有力的连接手段导致仅能维持智能设备的正常运行、数据的有效传输，距离实时、精准、高效的生产及管理仍有不小距离，5G的出现为之提供全面提升的契机。相比脍炙人口的车联网，牛联网无疑很新鲜。奶牛连接上网后，可以实时通过数据和视频掌控其健康状况、牛奶产量、活动状态，更重要的是还可以通过监测其活动规律获知它的发情期— —若能及时配种，就可以尽量延长奶牛产奶期，缩短干奶期，一头奶牛在最合理的配种情况下一年产奶期可以长达280天，实现奶量产出最大化。传统人工检测手段难度高、效率低，并在某些情况下因为要控制奶牛发情期而不惜使用激素干预控制，既对奶牛健康寿命造成损害，也影响牛奶品质；而基于局域网的联网方案范围小、覆盖难、成本高。5G农场开发的5G IoT牛联网应用基于5G广覆盖、大连接的特性，通过传感器和4K视频进行监控、5G网络实时传送数据、云端智能平台计算处理，可以以较低成本管理成千上万头奶牛，将发情检出率提高至95%，带来35%的牛奶产量的提高，更重要的是采用绿色健康牛联网技术，彻底杜绝激素使用，一方面可以延长奶牛寿命6-8年，并且保障绿色天然的牛奶品质。在种植业方面，规模化的农田管理已经越来越依赖于自动化设备。传统人工巡田耗时耗力，在农田面积达到一定程度后就变得难以为继，利用无人机来巡田是一个大趋势。然而离线无人机方案效率低下、操作复杂，数据导入电脑就需要数个小时、电脑输出报告也需要1-2天。5G无人机基于5G大带宽、低时延的特性，则可以实时、精准地将农场的高清图片发到云端进行分析处理，云端实时为农名提供农田长势、施肥、病虫害防治等方面的报告，较人工巡田效率提升200倍、较离线方式效率提升20倍。此外，采用自动除草机可以实现除草操作无人化，实现90%的除草剂节省、保护环境。未来将采用5G实现高清视频实时回传到云端，云端智能识别杂草并告知除草机精准喷射除草剂，降低除草机的成本并大幅提高普及率。5G赋能之路渐行渐宽5G的发展仿佛按下了快捷键，以远超以往任何一代移动通信技术的速度席卷全球。而瑞士赶上了这波浪潮，成为全世界首批推出5G商用服务的国家之一，同时也是欧洲第一个建设5G网络以及发展最快的国家。在这背后，显然离不开Sunrise的推动。作为瑞士发展5G最积极的运营商，Sunrise早在2017年底便已联合华为完成了基于5G端到端网络的业务演示，2018年6月完成瑞士首个端到端5G商用级网络部署，并于同年11月在瑞士滑雪胜地莱克斯部署了全球首个高海拔商用标准的5G网络。今年4月，该运营商在华为帮助下正式推出了5G商用服务，成为瑞士乃至欧洲的首家5G服务供应商，此后，Sunrise不断扩大5G覆盖范围，继续实施其确保瑞士在整个欧洲的数字基础设施方面领先地位的计划。截至8月底，Sunrise的5G网络已经覆盖了全瑞士各地的262个城市/城镇，是第二名运营商的两倍多，而其提供的网络亦最高达到2Gbps。不止如此，通过华为LampSites的深度覆盖和优化，Sunrise还可确保建筑物内的5G覆盖，从而提供室内室外的一致性千兆级体验。5G已经脱离了通信的范涛，成为社会经济发展的动能，其最大价值就体现在能使能千行百业上.根据瑞士电信联盟（ASUT）的统计，到2030年，5G将带动该国增加13.7万个工作岗位，并且创造424亿瑞士法郎的产值；比如在该国支柱产业工业制造方面，5G能带来100亿瑞士法郎的产值并创造2万多个工作岗位。Sunrise也在推出5G服务伊始就提出不仅要打造瑞士乃至欧洲最佳的5G网络，并且要在5G上实现丰富的应用。目前，已经借助自身5G网络覆盖上的领先优势，在农业、制造、旅游、零售、体育、服务等多个行业携手合作伙伴展开了充分的5G应用创新探索。比如它与FC Basel1893签署了为期5年的协议，共同打造一个智能体育场。Sunrise CEO奥拉夫.斯瓦提（Olaf Swantee）指出，“5G是一种可以支持未来应用的技术，如自动驾驶汽车、物联网以及关键生产过程的实时控制等”。值得一提的是，在Sunrise的5G赋能千行百业之路上，作为战略合作伙伴的华为亦一路相随。双方今年5月签署了关于5G行业应用孵化和探索协议，并于10月14号在瑞士发布欧洲首个5G联合创新中心（JIC）。该中心将围绕2C、2B及绿色5G进行商业应用的开发，为技术创新提供研发环境以及对外展示的平台。更多信息，请关注华为5G+X 联创营：https://developer.huaweicloud.com/techfield/5g.html

音视频传输协议众多， 不同业务应该如何选择？ RTSP、RTMP、RTP/RTC、HLS、MSS、DASH、WEBRTC、RIST、SRT；在此我们就从业务发展的视角来理解各种流媒体协议，帮助大家有更加清晰的理解，选择时做出更理性的判断。IPTVIPTV 是由运营商主导建设的一套系统，他的主要对标对象是传统广电的数字电视。所以这套系统首要解决的是大规模直播的问题，在此基础上还需要支持点播、时移、回看等新业务。运营商的优势就是可以自建一套可管理的网络，所以直播就基于组播技术进行大规模分发。主要技术栈是RTP+TS over multicast，这个技术大大降低了直播峰值对流媒体服务器的压力。而点播、时移、回看业务由于必须使用单播传输，所以当时选择的技术栈是使用RTSP 进行流媒体控制，使用RTP+TS over UDP（少量基于TCP）进行数据传输。现在这套系统服务了全国接近1.7 亿多用户。这套技术栈面临的挑战和对应的解决方案主要包括几点：解决单播基于UDP 传输丢包的问题，丢包会导致用户观看花屏或爆音，我们基于RTSP 协议扩展制定了一套规范，基于RTSP 的GET_PARAMETER扩展了重传数据报文的信令，主要是基于NACK 原理进行设计，通知流媒体服务器哪个报文没有接收到，流媒体服务器根据请求中携带的RTP 序号进行重发。解决组播传输丢包问题，组播报文丢包会导致直播花屏或爆音，我们采用了2 个手段解决这个问题：· FEC· ARQ通过FEC 技术增加等步长的冗余报文，可以解决随机丢包问题，但是无法解决突发连续丢包问题，这个时候就需要ARQ 技术，我们在系统中增加一个RETServer，RET Server 也会加入组播组接收和机顶盒收到的相同的组播报文，机顶盒在检测到丢包后，会向这台服务器发起NACK 报文，RET Server 收到请求后根据请求的RTP 需要将对应的报文发送给机顶盒。解决组播传输下频道快速启动问题，终端加入组播组的时间是随机的，无法保证每次加入组播组后接收到的报文就可以理解用于解码并显示，所以我们通过在系统中增加一个FCC Server，解决该问题，终端在起播观看一个频道的时候，优先向FCC Server 请求一条单播流，FCC Server 会以1.X 倍的速率将I 帧和解码所需的报文发给终端，配合终端快显技术可以实现300ms 以内的频道切换速度。IPTV多屏随着移动终端的发展，运营商希望在IPTV 业务基础上，发展手机等多屏业务，开始支持HLS（主流）、MPEG DASH（部分海外运营商，支持MultiDRM）流媒体协议。这套系统在流媒体协议层面临的问题是不同屏幕，不同DRM 格式，多种格式带来了存储空间成倍的上升，特别是NPVR 个人录制业务，对存储的需求非常大。主要解决思路就是JITP（Just In Time Package），即只要存储一份内容，根据用户观看的内容格式进行实时格式转换。OTT点播伴随着以Youtube，Netflix，爱奇艺，优酷，腾讯视频为代表的OTT 视频点播平台的崛起，以及苹果手机的普及和HLS 协议的出现，流媒体协议从HTTP渐进式下载发展到ABR Streaming，HLS 是其中最为主流的一种ABR 协议，HLS 也成为了各个OTT视频平台的首选视频传输协议。这套系统在流媒体协议层面临的问题和解决方案如下：1、 解决基于互联网的大规模分发问题。CDN 技术可以很好的解决这个问题，这也是OTT 流媒体协议基本上在设计之初就考虑对CDN 友好的原因。2、 Netflix 由于业务量的规模发展到一定规模，从最开始选择第三方CDN，走向了自建CDN（Open Connect）的道路，但是他的技术栈依旧是HLS 和DASH 这类对CDN 友好的流媒体协议。OTT 直播细分为事件类（新闻/ 赛事/ 演唱会）直播、个人（游戏/ 网红/ 秀场）直播。满足这类直播业务的流媒体协议层面临的问题和解决方案如下：1、首先他们和OTT 点播一样，需要解决基于互联网的视频大规模分发问题。2、其次直播相较于点播需要额外考虑的一点就是直播时延，第一类：电视台/ 事件（新闻/ 赛事/ 演唱会）直播基本没有和观众互动的要求。所以它们依然选择对CDN 友好的HLS 和DASH 协议，但是时延会高达10-30s，随着CMAF 格式的出现，根据我们在实验室的测试数据表示时延可以小于5s。第二类：个人（游戏/ 网红/ 秀场）直播，以国内直播平台为例，商业模式主要靠打赏分层，所以要求直播的E2E 时延必须低于5s，否则观众与主播的互动效果非常差，直接影响直播平台的收入。这类厂家选择的技术栈为延迟更低的RTMP 和HTTP FLV。3、随着手机和4G 网络的普及，部分主播也开始尝试在户外进行开播，由于户外直播的网络条件不可控，而RTMP 是基于TCP 传输的，导致在户外4G网络条件不稳定的环境下，直播效果很差，所以针对弱网环境下的直播上行效果差成为直播平台需要解决问题。为了解决这个问题，大家把眼光转向UDP，基于UDP 的直播传输技术逐步进入人们的视野。常见的有ZIXI、SRT 和RIST。ZIXI 属于纯商业化公司，显然不合适大量个人直播上传这类商业模式的直播平台。SRT 有相对成熟的开源社区支持，所以在国内应用较为普遍。RIST 是由Video Services Forum (VSF)于2017 年初开始制定的可靠的互联网流传输协议（Reliable Internet Stream Transport，RIST），相较于SRT，基于UDT 非实时流媒体的技术栈构建，RIST 一开始便使用较为成熟的RTP+RTCP 技术，而且他只定义了标准化的语法，允许实厂家在此基础上进行创新，而又不影响互相操作。经过近几年的发展RIST 支持的场景越来越多，也越来越成熟。4、直播业务发展越来越繁荣后，又出现了多主播PK，主播与观众连麦等场景，这些对时延的要求直接从5s 变成1s 以内， 甚至小于400ms， 为了满足业务的发展，直播平台选择了实时通信的技术栈RTP+RTCP over UDP。一旦引入UDP，就需要解决丢包带来的视频体验问题，这里常见的技术有FEC、ARQ 等。实时音视频 RTC随着5G 网络的普及，以及疫情带来的影响，人们对实时音视频技术的应用场景会越来越多，主要包括：会议、连麦、音视通话、视频通话、在线教育、远程医疗等。由于这些应用场景对时延的要求<400ms，所以从技术栈选择来看，基本上都是选择RTP/RTCP over UDP 的方式进行音视频数据的输出。如果把流媒体协议做三个维度划分：质量（画质/帧率）、平滑、延迟。实时音视频通信和OTT 直播上传场景相比，对低质量的容忍度更高，即允许降低一定的质量，下降（降帧率等）来换取更加平滑的体验和更低的延迟。这个选择上的差异，导致在技术设计上需要打通网络传输系统和音视频编解码系统，实现根据网络传输质量实时动态调整音视频编码参数，在质量、时延、平滑三个维度上进行权衡得出最优解。流媒体新的发展方向1、 新的媒体表现形式包括VR、自由视角、点云；他们与传统视频的最大区别在于，传统视频主要支持时间维度的定位，而新的媒体，除了支持时间维度的定位，还支持空间维度的定位。当前主要在MPEG 标准组织中进行讨论，基于MPEG DASH 规范进行演进。以VR 为例，一般人类的FOV 视场角<140°，新的流媒体协议利用这个特性，可以实现根据观众观看的视频范围，进行部分传输，从而降低的对带宽的诉求，这也很好的解决了传输的数据量越来越大对带宽要求苛刻的问题。华为云视频的Cloud VR 产品已经支持8K VR、自由视角的直播和点播服务。2、 全互联实时音视频直播，随着在线教育和在线办公的普及，越来越多客户对具备大规模分发能力的低时延互动视频服务有着强烈的诉求，当前的架构要么支持大规模分发，要么支持低时延、互动，无法同时具备三者的能力。我们认为未来的主流架构需要同时满足这三样能力，华为的实时音视频服务已经完成这套架构的实现，致力于在流媒体领域持续深耕，让我们共建流媒体的未来。来源：《Cloud 云+》第八期 炫科技 | 华为云 黄挺

“大家好！我是数字晚玉，虎牙制作的第一个直播数字人。”在虎牙LiveTech 大会现场用AR 技术构建的场景中，首个数字人晚玉以吃鸡跳伞的形式惊艳开场。他是虎牙在赋能内容生产者和提升用户体验的最新探索，也是国内直播行业首个真正意义上的直播数字人，与人气主播晚玉在体态、动作等方面高度相似是他给外界留下的最深印象。数字人晚玉还给自己取了个名字叫“晚王”，并透露未来在虎牙直播平台上将会有更多和他一样的直播数字人小伙伴，给观众带来不一样的观看体验。数字人“晚王”随着受众对娱乐内容的接触频次和质量要求的不断提高，对平台而言，创新化、多元化的必要性愈发明显。在形式众多的平台中，直播平台互动性、时效性强的先天性质，决定了它对内容的依赖性尤其突出。而5G 与云游戏时代的到来，对直播场景带来更大的变化和冲击。虎牙的数字晚玉打破了当下主播自身的限制，以及当下直播方式在时间和空间上的限制，带来了下一代的直播内容生产形态。未来，游戏直播行业将会进入技术驱动时代，利用5G、AI、云等新技术，使直播内容生态得到革命性的升级，开拓出更多的直播场景。虎牙直播覆盖PC、Web、移动三端，拥有超过3300 款游戏，已逐步涵盖娱乐、综艺、教育、户外、体育等多元化的弹幕式互动直播内容。旗下汇聚众多世界冠军级签约战队与知名主播。虎牙2020 年第二季度财报显示，其直播月均活跃用户数（总MAU）同比增长17.1%，达到1.685 亿，移动端月均活跃用户数（移动端MAU）同比增长35.2%，达到7560 万，再创历史新高。虎牙能够从众多游戏直播竞争对手中突围而出，除了高质量的直播内容、深耕电竞生态外，还得益于技术创新。内容为王、技术创新，虎牙实现“云上”突围在5G 技术逐渐成熟的当下，虎牙不断寻求创新的技术形式作为前行的驱动力，发掘泛娱乐直播经济的更多可能性。虎牙通过与云服务厂商合作，将直播上云，使内容分发技术持续优化，不断提升内容生产的效率、主播和用户的开播与收看体验。2019 年，虎牙与华为签署战略合作协议，通过技术创新进一步夯实自身在直播行业的领先地位。根据双方战略合作协议，虎牙将和华为云发挥各自优势，加快 5G+Cloud+X 直播新业务场景的研究与落地，协同打造更加繁荣的内容生态，为未来的交互创造更多可能性，并结合AI 给直播内容带来革命性升级。虎牙将与华为成立联合创新中心，共同制定战略创新课题并落地到项目，运用最先进的技术打造新一代网络架构，营建5G 技术+ 业务联合创新的多元直播模式，进行算力平台、大数据平台、边缘网络、音视频处理等方向的技术演进，结合VR 终端、手机等硬件能力，给直播带来颠覆式变革。虎牙CTO 赖立高表示，“直播平台本质上是内容平台，平台承载着两大作用，一是找主播，二是承载内容分发过程”。他认为，未来观众会参与到主播的数字化场景中去互动，进行实时生产、实时分发、实时互动。要实现这点，云厂商会起到很关键的作用。技术业务同步创新，开启直播新局面在5G 的大命题下，华为和虎牙双方充分融合硬件技术和交互内容的经验，深入探索直播互娱的和虚拟内容的广阔前景，务求带来颠覆性的变革和爆发式的增长，推动直播内容生态不断发展。为了构筑更多元更个性化的直播互娱模式，华为和虎牙基于虎牙平台糅合人物、场景和互动以实现虚实结合的内容生产模式，在算力大数据平台、边缘网络、流媒体处理等技术节点上力求突破，并通过云+5G+AI 的应用新尝试，挖掘更多虚拟形象在内容运营、用户互动上的可能性。华为所提出的智能边缘解决方案，为了达成虚实结合的业务目的，调用华为云VR 云渲染能力、云手机等各种技术，助力双方打造实时生产实时分发新一代网络架构。方案更同时支持虚拟形象业务联合创新，提升虚拟内容产能、降低生产成本，虚实结合孕育更加繁荣的多元化内容，更有助打开虚拟偶像直播、虚拟形象的云游戏交互在当前网络大环境下的新局面。算力赋能，为虚拟偶像创造无限天地借助5G，虎牙将不仅带来突破延时问题的高速直播，还会通过云交互架构的虚拟形象直播，赋予虚拟偶像更旺盛的生命力，实现更多样化的娱乐形式和需求。正如虎牙为当红主播晚玉量身打造的数字人“晚王”，具备逼真炫酷的视觉感官体验，其实对于网络环境的保障和渲染能力的算力，要求极高。在这方面，虎牙与华为云深化合作，结合5G 下创新技术和高算力的云端平台，利用独有传输协议有效降低传输时延，多样的云端算力资源不受场地限制，全面提升渲染质量，提供不同空间、不同场合下的虚拟偶像开播新体验，人人皆可成为“新偶像”，虚拟形象将引领5G 时代下直播娱乐新潮流。5G领航，展现互娱蓝海的无尽可能多维度虚拟内容节目为魂、硬件技术深度发展作骨，对于虎牙在虚拟偶像娱乐方面的前瞻性布局，华为的技术优势必然能助推虎牙在直播内容和虚拟互动领域再度坐大、加速领先。2020 年华为与虎牙以高规格的电波之夜作为起点，不断继续升级，不断消除虚拟和现实的间隙，聚焦贯彻“娱乐+”概念，与用户更进一步，让直播内容与娱乐更近一步。未来双方也将基于昇腾、鲲鹏计算解决方案，联合探索更多5G+AI 领域更创新的业务场景和展现形式，挖掘泛娱乐直播经济的更多可能性。S10赛事直播提供商来源：《Cloud 云+》第八期 新商业 |

编者按：本文由华为云资深产品专家左雯在LiveVideoStackCon2020 线上峰会的演讲内容整理而成，本文从视频编解码技术的趋势、难点和挑战以及华为云视频产品的编解码关键技术实践与成果两方面，介绍下一代视频编解码技术优化应用的探索。大家下午好，非常荣幸参加LVS 首届音视频线上峰会。先自我介绍一下，我叫左雯，来自华为云，是云视频服务的产品经理。在做产品经理之前，一直从事视频编解码算法研究优化、转码产品架构设计等工作！今天参加这个专题目的有两个，一个是想通过这次峰会，向大家分享一下华为云视频对下一代视频编码技术发展的想法和应用成果，另一个是向各位专家学习，相互交流，促进下一代视频编码技术的快速发展，推动云视频这个行业的发展。今天分享的主题包括三个部分，首先是华为云视频对视频行业发展趋势的一些看法，以及这些趋势对下一代视频编码技术提出的挑战；其次从标准角度来介绍下一代视频编码技术；最后从云视频应用角度来具体介绍华为云在视频编码技术上的一些实践和探索，希望能给大家带来启发。1. 视频行业趋势5G、云、AI 已经成为ICT 行业甚至是整个社会的发展趋势，促使整个视频行业需求和技术不断演进，推动整个视频行业不断升级。视频生命周期的每个环节都在更新升级，包括视频生产、视频处理、视频传输和视频消费。视频生产：多源数据的采集，包括超高清、VR、自由视角、3D建模和视频渲染视频处理：基于 AI 让视频处理更实时、智能和准确，包括各种编码方式视频传输：超低时延的传输，云边协同等等视频消费：智能终端的深度结合提供视频服务的最佳体验视频行业本质是对媒体数据的处理，背后是算力、存储、网络、AI 的支撑，同时视频行业又推动着5G、云、AI 的不断前行，相辅相成！视频演进带动了算力、存储、带宽需求的大幅增长。简单来看，视频分辨率越来越高，从高清到超高清再到8K/VR。算力增长 24 倍，存储增长12 倍，带宽增长 20 倍。这些需求通过云，也只有通过云才能得到很好的满足，实现高质量的视频体验。云原生视频是行业趋势，视频将成为云的基础服务能力。前面说的是行业的整体趋势，下面说一下具体场景。互联网视频发展已经历了两个阶段，第一阶段从08 年到13 年，以长视频VOD、点播观看为热点；第二阶段，从13 年到19 年，也就是去年，其实还在延续，以直播、短视频为热点；第三阶段，也就是下一代，会以什么为热点？ 我们认为因为5G、云、AI 的推动，视频将进入实时互动、VR/AR 时代。视频新玩法提出新诉求，互动视频方式从IM 向实时音视频过渡。直播连麦、主播PK、直播带货、视频分发方式的升级，百毫秒级超低时延下一代视频RTC成为趋势；VR/AR，360 度视角沉浸式体验革命，用户从看视频向玩视频过渡，体验提升的同时，视频传输能力从兆级向十兆甚至百兆级单流带宽；云游戏带来游戏行业变革，十毫秒级别时延要求，推动媒体处理能力从云上向边缘迁移。RTC 实时音视频会成为5G 时代基础设施的核心控制点，RTC 应用很广泛，它的市场年增长率超过30%，而且这项技术不仅能赋能直播、游戏等泛娱乐行业，更能在在线医疗、教育、金融等大视频行业渗透。现有的实时音视频市场正处于爆发期，玩家很多，但由于它是非云厂商，难以持续发展。原因之一是它的技术门槛比较高，特别是像音视频编码或者整个RTC网络的构建，另一点是目前各家均采用私有协议的方式接入，各家互通、客户的自由切换都比较困难。在RTC 业务产品上，我们认为音视频编码处理将是各家构建技术壁垒和性能差异化竞争力的关键之一。另外一个应用场景就是Cloud VR，我们一直认为VR 是5G 技术发展下的关键场景。VR 发展是一波三折的，但在目前来看，之前碰到的一些问题正在逐渐改善。从终端的角度来看，之前的终端很贵，但是目前千元终端机已经逐渐来临，而且体验也会越来越好。除了设备终端，VR 此前还面临内容缺失的重大问题，而VR 直播很大程度上缓解了内容缺乏的问题。虽然困境在逐步改善，但VR 目前还面临着新的问题。互联网VR 业务很难形成商业闭环，主要原因在于VR 业务带来了收入增加，但与此同时带宽成本增加更多，VR 追求的高质量体验需要通过更高带宽来实现，高带宽势必会带来高成本，而高成本就会导致商业无法闭环。在这样的前提下，很多玩家都会通过降低体验来开展VR，比如说内容采用4K 以下，码率采用10 兆以下，终端采用卡片机来体验VR，虽然这样可以将VR 的业务打通，但体验效果是很差的，也导致付费用户非常少，产业发展比较缓慢。所以在VR 的发展上，我们认为通过视频压缩编码以降低带宽是关键，是可以帮助实现商业闭环的一个关键要素。从前面讲述视频行业趋势不难看出，用户体验升级、视频产业升级、商业成本等驱动着视频全方位升级，分辨率从高清到8K，帧频从30 帧到120 帧，视场角从不到90 度到360 度，从SDR 到HDR 等，这些参数升级推动着视频压缩编码技术不断演进，追求压缩比是永恒不变的！另外，前车之鉴，HEVC/H.265，其实是很优秀的编码技术，但因为前期不友好的专利政策，市场占有率一直不高于13%。还好目前有所好转！整个行业急需压缩比更高、生态更完善、专利政策更合理的视频编码技术。提升压缩比有两条路线，这也是各厂商正在做的：标准技术路线，作为基础内核，H.266、AV1、AVS3、AI编码非标技术路线，依赖基础标准，结合人眼感知特征，感知编码、内容编码、ROI 编码2. 下一代视频编码技术下面将从这两个角度来介绍华为云视频在下一代视频编码技术上的一些工作。这些技术得益于华为2012 媒体技术院全力支持。2.1 下一代视频编码标准技术从上图可以看出，下一代的视频编码标准大概分为三个阵营或者三个类型：国际标准：由MPEG、VVC联合推动的像 VVC/H.266还有 EVC国内标准：国内标准组织正在推出或已经推出的 AVS3 的 phase1、AVS3 的 phase2，两者主要差别在于AVS3 的第1 阶段标准瞄准H.266，第二阶段的标准则是瞄准未来, 可能会加入一些智能编码的技术谷歌牵头的AOM联盟推出的 AV1，是一个开源技术下一代的视频编码技术仍是采用传统的演进思路——在经典架构上做模块增强。在H.266CFP 时，华为联合其他几家公司提了P41 提案，在PSNR 和MOS 评估方面都是排名第一，这个提案也是后面的基础。华为在VVC 里的核心专利数量已属于第一阵营，这是一个了不起的成就，也说明了国内的视频压缩编码基础研究实际上不弱于欧美传统的公司。以VVC 为例，对其新增的增强工具进行盘点。纵轴是每个工具的压缩收益，横轴是每个工具编解码复杂度，编码复杂度的权重可能会更高一点。VVC 在块划分、帧内预测、帧间预测、熵编码、变换量化等多个模块上进行了增强，其中主要的增强是帧内、帧间预测、块划分、滤波的增强以及机器学习工具演进带来的收益。VVC 暂时没有引入深度学习这一类编码工具。图中还有三个用红圈标出来的工具，这是VVC 中公认trade off 比较好的三个工具点。蓝色的是ALF，这是大家比较熟悉的自适应环路滤波，其实它在H.265的时代就已经有了， H.266 将它引入标准中；绿色的是仿射运动预测，这个主要是由华为提出的；橙色的是量化技术。EVC 标准的提出某种程度是因为H.265/H.266的专利政策不友好，有可能导致H.266 的落地都比较困难。MPEG 希望能通过一个新的专利友好的标准来推动落地，同时也促使改变H.266、H.265 的专利授权政策。EVC 由华为、三星、高通等共同提出推动，华为在这里面加入了很多技术。在标准立项时期望它比H.265 的压缩性能提升20%，实测在4K 娱乐视频上相比H.265 压缩效率提升达30% 以上，目前已经进入了最终的标准投票阶段。AVS3 是国内提出的标准，它的phase1 是瞄准H.266 标准的，并且在2019 年3 月份就已经制定完成率先推出，在2019 年9 月份，华为海思也同步推出了AVS3 8K 的解码芯片，AVS3 相对H.265 性能提升了20% 以上，并且针对娱乐视频和监控视频做了很多针对性的设计，性能上还可进一步提升。H.266 实际已经基本定稿，它的压缩效率在4K视频场景下相较于H.265 能提升40% 左右，其解码复杂度相对提升60%，目前看最大的问题还是专利政策不够透明，而且专利费可能比较高，推广节奏可能相对比较慢。EVC 也基本定稿， 而且其压缩效率也能提升30% 左右，解码复杂度相对H.265 增加60%。其专利收费可能相对比较低，第二是他的专利收费比较透明和明确，目前主要依靠三星、华为、高通来做产业的推动和生态的构建。AVS3 在2019 年3 月份推出，在性能上还是有保证的，压缩效率能够提升25%，复杂度增加相对较低，其专利收费也是比较低的，正通过互联网等行业做产业的推动和生态构建，目前实际上有很多联盟和公司正在做推动，我们也希望AVS3 尽快落地。表格中没有列举AV1 的数据，这主要是因为它和其他三个标准不太一样，AV1 开源软件实际上是瞄准商用化去做的，大家也比较清楚其压缩效率和解码复杂度。AV1 有个很大的优势就是没有专利费，这是AOM 联盟的承诺。在产业落地方面AV1 做的很好，生态构建走的较前。2.2 AI编码下一代视频编码标准还有一个趋势就是AI 编码，这一块实际上从HEVC、VVC 标准制定就有提出，但因为考虑计算复杂度以及AI 硬件普适性，都暂时搁置了。但这是个技术趋势。AI 编码包括两个演进思路：第一个是全新架构，类似于图像编码，实际上AI 的图像编码已经取得了不错的成效，谷歌牵头的AI 图像编码技术都已经得到了很好地应用，但针对视频中的应用还在探索过程中。所谓的全新架构，就是不用传统架构，视频进入黑盒后会得出一个压缩过的视频，这个视频可能没有块划分，也没有各种其他的方式，它的压缩效率会非常高，但这一切还处于研究的过程中。另外一个思路是基于经典架构，对每个架构里的模块做增强。例如针对块划分、变换、矢量量化、帧内预测做不同的AI 网络适应和增强。实际上华为也在做这方面的研究，未来可能会提出一些AI 编码方面的论文或提案。并且我们认为AI 编码的这两种思路，最终将是融合设计的过程，不会呈相互孤立的状态。3. 华为云视频应用和实践3.1 云视频简介上面简单介绍了下一代视频编码标准技术，下面介绍一下从实际商用及非标角度，介绍一下华为云视频在视频编码技术上的应用和实践。首先介绍一下华为云视频，华为云视频是从2017 年开始构建的，目前包括两大类业务，一种是比较传统的直播、点播、媒体处理以及监控业务，另一种是整个行业正在新晋的服务，比如RTC、VR/AR 以及超高清直播。华为云视频面向很多的场景，例如娱乐直播、短视频、在线教育、企业直播、4K 直播、4K 制作等等，我们致力于帮助行业客户、伙伴、开发者、ISV 快速上线应用，并帮他们构建差异化的竞争力，实现商业闭环。这里需要重点提一下RTC，RTC 是华为云视频对下一代视频的理解并作出了实际的推动，针对RTC，我们重点构建超低时延、音视频质量等差异化竞争力。3.2 视频编码技术3.2.1视频编码框架结合今天的主题，下面重点讲解华为云视频在视频编码技术上的一些工作。这些技术得力于华为2012 媒体技术院全力支持。编码内核采用了一个标准的编码器，类似于前面提到的H.264、H.265、AVS3、H.266 或者EVC 这一类，在这个编码内核的基础上，我们面向不同的场景做了不同的编码技术的优化和实践。比如 面向RTC 实时音视频场景，采用低时延编码技术；面向VR 场景，采用FOV tile 编码；面向多视角场景，采用空间云边协同编码；面向监控场景，采用智能语义编码；面向直播、点播，采用感知编码和画质增强等；另外，华为云视频借助鲲鹏、昇腾两大专有硬件，加速视频编转码效率。鲲鹏主要面向CPU 这类计算，昇腾主要面向AI 方面的加速。3.1.2标准编码内核接下来分别介绍一下视频编码的技术，第一是编码内核，华为云在商用编码器上面也有很多的技术积累。比如说近几年在MSU 的大赛上，HW265 编码器连续两年获得多项测评的第1 名，今年我们也会向MSU 推出新的编码器。3.2.3 高清低码第二个技术是高清低码，高清低码目前在各个厂商或者商业领域里是大家比较默认的技术，也就是说在基于标准编码内核的基础上，能降低码率的同时保证主观质量没有下降，但实际上高清低码理论可行性是现有视频编码是基于香农定理，它的率失真模型都是连续的，但是人眼视觉模型是阶梯性非连续的，在这个阶梯上存在一个降码率的空间。高清低码一般情况下包括三个模块：第一是基于人眼 JND 模型，就是说如何找出JND；第二是基于 JND去做感知编码；第三就是通过感知编码来控制标准编码内核输出，在主观质量不变的情况下大幅降低码率。华为云视频在这方面做了很多的工作，目前针对不同的应用场景，能达到30~50% 的码率降低。高清低码技术现在也走到了一个瓶颈期，原有高清低码的考虑仅来源于编码与传输信道，随着AI 技术的发展，是否还有进一步的发展空间？华为提出了一种新的思路：在原有的率失真模型上，加入一个接收端（解码端）复杂度的因子，也就是在发送端主动退化，把它通过时域或者空域的下采样变成一个相对数据量比较小的视频，这样做使得编码的码率相对更低，达到有效降低码率的目标。通过一些辅助信息再加上低码率、低分辨率的编码码流，在接收端通过AI 技术进行超分、插帧或者是增强，将视频还原，如此整个链路上传输的码率会大幅下降，我们初步试验发现至少能降低60% 以上的码率。3.2.4 超低时延编码RTC 场景是我们面向下一代视频产业重点打造的服务能力，RTC 场景下主要是超低时延的编码，我们提出了一个综合的超低时延方案，比如编码和渲染联合优化、编码的内核以及分层编码和信源信道协同等技术手段，面向不同的实时场景会做不同的组合或者应用，我们初步试验发现在1080P 这种场景下进行编码和解码，整体的时延能达到十毫秒级别。3.2.5 VR FOV编码面向VR 场景，特别是面向360°场景，我们提出来FOV TWS 的编码技术。这个技术原理是将高分辨率的全景视频分片，多个FOV 的小分片加上一路4K 的背景流，这样4K 终端的播放器就能通过相应的视角FOV分片和4K 全景背景流实现8K VR 全景视频播放，同时还能保证MTP，不会出现眩晕感。该技术已经写入OMAF 的标准。整体体验上也得到了用户的认可。3.2.6 智能语义编码当面向监控场景的时候，我们提出了一种智能语义的编码，主要通过背景建模加上视频内容和运动分析，再加上端侧的一些实时超分、插帧来构建智能语义编码的方案。监控场景的画面往往有很多细节，各种机器分析的识别率不能降低，如果压的太狠，识别率可能就会下降。初步的原型结果显示能做到在人和机器的识别率都不降低的前提下，达到70% 以上的码率节省。3.2.7 空间视频云边协同编码另外一个技术是空间视频编码，所谓空间视频就是自由视角或多视角，这也是以后技术发展的一个方向。人们不再满足于一个固定视角视频观看，希望多视点或者自由视角的观看视频。在空间视频的编解码当中，我们提出一种云边协同编码，通过这种编码可以在边缘非常短的时间内按需动态的生成任意时刻的切换流，大幅减少一般方案中切换流的码率，初步试验发现至少能降低60% 左右的带宽成本。3.2.8 AI视频增强视频质量、视频码率时视频产业最关键的两个指标。前面讲的技术，不管是标准的技术、还是非标的技术，都是追求在同等画质的前提下，如何降低码率。硬币的另一面则是，在同等码率下，如何追求视频主观体验质量。我们在这方面也做了很多尝试，根据不同的场景特征，基于云端、终端AI 能力，从分辨率、帧频动态范围等维度对视频进行修复、增强和重建。并且考虑真实场景中往往是包含多种混合失真的等因素，我们提出一种面向混合失真的多任务视频增强框架，能够很好地适应不同场景和不同需求。以上内容介绍的是华为云视频在视频编解码上的一些实践和探索，希望能带给大家一些启发。谢谢大家！来源：《Cloud 云+》第八期 炫科技 | 华为云 左雯 

说起钢铁侠，让人想起漫威迷们总结的“漫威宇宙规律”——“土豪靠装备，穷人靠变异”，盘点钢铁侠斯塔克的装备：从“48 套钢铁战衣”，到铁打的AI助手“贾维斯”，“星期五”——懂技术懂装备懂老板，还有他研发装备时在空中随心勾勒，将设计原型旋转、修改、定稿、抛入制造系统的一系列骚操作，一顿玩儿就把活儿干了钱挣了，这无一不是大多数理工男的终极梦想。这个终极梦想，真的就那么遥不可及吗？我们今天就来聊聊，土豪背后的技术——XR（VR，AR，MR）技术，看完后，你就知道，未来已被拉近。简单科普一下什么是XR，XR 就是VR、AR、MR 的统称。虚拟现实（Virtual Reality）、增强现实（Augmented Reality）和混合现实（Mixed Reality），正在给我们的生活方式带来一系列的变化。不远的未来，你还可以坐在虚拟的会议室跟你虚拟的小伙伴们开一场云上会议，在虚拟的智慧教室上一堂多人互动课程、做一场模拟实验，甚至进入虚拟世界进行真实的设计、制造，虚拟和真实之间，边界不再那么明显。这一切，都得益于XR（VR，AR，MR）技术的应用。XR 技术，究竟依赖哪些核心能力呢？华为云最新发布的XR 云服务，给了我们答案。它提供了五大核心技术和能力，打开未来新视界。1、 大规模3D地图构建能力3D地图是数字孪生世界的基础。传统制作3D地图的成本，是非常高昂的。图商需要采购价格高昂的测绘车队，常年雇佣规模在千人左右的采集团队，并组织人力对采集来的数据进行标注、补缺。随着AI算法、传感器的发展，技术上已能实现自动化程度更高的制图流程。华为云XR提供手机拍摄视频的众包建图方案，只要是通过手机拍摄慢速转动的视频，或者有重叠区域的图片，覆盖建图的区域，传至云端即可通过算法还原出3D模型。如果将3D模型中的3个点与数字世界的坐标对齐即可将局部的3D模型补充到数字世界中，大大降低了制图成本。华为云同时支持卫星制图，具备大面积快速覆盖能力，配合地图自动生成流水线，大规模构建3D地图。2、 厘米级全场景适应的空间计算高精度定位技术大体上可以分为三类：基于信号的定位、基于航迹推算的定位、基于环境特征匹配的定位。基于信号的定位：普通的多星(GPS、北斗、伽利略)定位精度大约能做到1-2米。新的RTK（Real - time kinematic，实时动态）载波相位差分技术，是能够在野外实时得到厘米级定位精度的测量方法。但它同时存在一些问题，比如基站布设成本高，易受电磁环境干扰、易受环境遮挡、信号多径效应、4G/5G/WIFI网络环境差的影响等等，从而影响定位精度和定位系统的可用性。基于航迹推算 的定位： IMU 是常用的航迹推算系统，优势在于没有外部依赖，可以提供短时高精度的定位结果，缺点在于在连续的位置和方向的测量中误差会不断累积，导致位置和姿态的测量结果偏离实际位置，因而无法做长时间的高精度定位。基于环境特征匹配的定位技术 ，华为云XR能力平台提供根据视觉的定位技术，通过定期上传照片，在云端进行特征点提取、匹配，能够做到厘米级定位与一度以内定姿（6DOF）。针对光照条件差，弱纹理的夜晚和室内场景，通过AI方式进行增强，实现夜晚也能找到图像匹配点，室内也能定位的全场景适应的空间定位算法。基于VPS和SLAM的紧耦合算法架构，可逐步实现长时间的室内外导航。3、 提升效果同时提升数倍效率的AI渲染算法3D 渲染管线也称为渲染流水线，可以将其理解为一个流程，就是我们准备一些数据，让GPU 对这些数据做一些处理，最后得出一张二维图像，渲染流程主要分为几个大的阶段：数据准备阶段，顶点处理阶段，光栅操作阶段，像素着色阶段。当前渲染优化有两个方向，一个是渲染画质好，一个是游戏实时性高。华为通过对渲染管线中算法的深入研究和调试，并通过端云结合的AI 算法，对渲染管线进行拆分，达到画质和实时性的均衡，实现数倍效率，画质相对于传统渲染方式有大幅的提升。4、 十万发丝级数字人渲染不久的将来，现实世界中的每一个地方和事物 —— 每一条街道、每一个灯柱、每一栋建筑物和每一个房间 —— 都会在镜像世界中拥有它的全尺寸“数字孪生兄弟”。——凯文·凯利华为在数字人的生成、建模、渲染阶段均有所涉猎，如全自动化90% 相似度高精细**模型生成。传统的建模通过离线工具制作，费时费力，华为考虑改造建模过程，实现快速复制、自动化生成、快速建模。渲染过程的开发，主要是从皮肤、牙齿、眼睛、毛发等等方面入手。数字人的表情肢体动作自然驱动和表达，唇音同步延时<100ms，使用者时延无感知 。皮肤是半透的，比较薄的地方有散射的效果，光散射过来会产生折射，加入后会多一些细节；眼睛是晶状体，有透射效果；头发有很多层，每层有不同效果。 华为实时高真实度数字人绘制，实现逼真的发丝、皮肤、眼睛渲染呈现，10 万级发丝，fps>30 帧，整体主观打分8 分以上。5、 360度VR视频TWS FOV技术（Tile-Wise-Streaming Field of View）360 度VR 视频领域，华为提出了TWS FOV 传输技术，可以解决4K 硬件解码能力终端，基于4K 码率观看8K 片源的问题。通过TWS 映射方式，从像素点上就可以相对ERP 映射，直降40% 码率。通过增加低资源消耗的背景流，解决黑边问题，加入单帧切换技术，提升转头高清体验。                                                                                        XR 技术的研究和应用，未来将有无限可能。虚拟和真实将相辅相成，实现真实世界与虚拟世界之间的无界沟通和协作。在不久的将来，人人都可像钢铁侠一样，通过XR 技术释放无穷的创造力和想象力，突破极限，共筑未来。来源：《Cloud 云+》第八期

当SDK运行出现网络、媒体相关等错误时，SDK无法自动恢复，需要APP干预或进行用户提示。该错误码由服务端产生，通过onError返回。表1 服务端错误码错误码描述错误原因RTC.10000001内部错误程序或环境问题RTC.31000000节点不存在程序或环境问题RTC.31000001session校验失败程序或环境问题RTC.31000003内部异常程序或环境问题RTC.31000004认证失败用户使用问题RTC.31000005请重试用户使用问题RTC.31000006需要时钟同步用户使用问题RTC.31000007请求资源不存在程序或环境问题RTC.32000000服务异常程序或环境问题RTC.32000001流号已满程序或环境问题RTC.32000002SFU为空程序或环境问题RTC.32000004下发流信息失败程序或环境问题RTC.32000005添加适配器失败程序或环境问题RTC.32000006添加路由失败程序或环境问题RTC.32000007获取用户信息异常程序或环境问题RTC.32000010选看用户不存在程序或环境问题RTC.32000011音频速率参数非法程序或环境问题RTC.32000012用户列表为空程序或环境问题RTC.32000013非法请求参数程序或环境问题RTC.32000015内部调用异常程序或环境问题RTC.32000016内部调用异常程序或环境问题RTC.32000017站点不存在程序或环境问题RTC.32000018错误的加密算法程序或环境问题RTC.32000019客户端媒体加密密钥base64解码失败程序或环境问题RTC.32000020生成媒体加密密钥失败程序或环境问题RTC.32000021下发加密信息异常程序或环境问题RTC.32000022获取SFU的IP失败程序或环境问题RTC.32000024内部调用异常程序或环境问题RTC.32000025内部调用异常程序或环境问题RTC.32000028不支持的操作程序或环境问题RTC.32000030sfu资源不足程序或环境问题RTC.32000032跨房数量超过上限用户使用问题RTC.32000033不允许重复跨入同一房间用户使用问题RTC.32000034稍后重试程序或环境问题RTC.33000000服务异常程序或环境问题RTC.33000001节点不存在程序或环境问题RTC.34000001房间已满用户使用问题RTC.34000002房间不存在程序或环境问题RTC.34000003站点不存在程序或环境问题RTC.34000004内部调用异常程序或环境问题RTC.34000006用户不存在用户使用问题RTC.34000007已存在辅流共享用户使用问题

编者按：进入到2020 年，COVID-19 给全球带来了前所未有的冲击，全球化的背景下，从学习、工作到娱乐，都不得不搬到网上，RTC（实时音视频）一下子成为了生活的必须品。三分天下2020 年的COVID-19 给RTC 市场注入了前所未有的动力。从某RTC PaaS 平台公布的数据看，从2013年成立到2019 年6 月累计客户为801 家，到2020 年6 月增长到1486 家，增长超过85%，不可否认疫情扮演了催化剂的作用。本来，RTC PaaS 市场波澜不惊，但COVID-19 成为左右市场的最大“x 因素”。和其他云服务类似，RTC PaaS 市场的马太效应正在显现，客户向头部企业集中。具体来说，未来市场中的主流RTC PaaS平台将三分天下：A. PaaS RTC 服务商。依靠先发优势带来的客户、技术、品牌、生态等全方位领先，为自己铸造了足够宽的护城河。但不可否认，依靠单一层次，单一场景的服务很难满足用户更复杂的业务需求，如果不横向扩展业务场景，纵向扩展业务服务层次，被公有云服务商巨头赶上只是时间问题。B. 公有云。所有的公有云巨头都把多媒体业务视为核心市场，RTC 又是其中的关键。Twitch 刚刚将自己的直播能力通过公有云对外服务，华为也在不断打磨RTC 服务。另一方面，公有云拥有海量客户、资源与技术积淀，虽然在某些单点与RTC PaaS 平台存在差距，但这可以通过人才引进、收购等方式快速补足。但更大的挑战是对用户业务场景的把握，这需要更多时间来试错。C. 创业团队，细分市场与自生态。一些拥有优秀技术和产品能力的创业团队可能搅动这个市场，在一些细分市场也存在行业壁垒，形成特定的小生态。最后，一些大型应用服务会通过自研来实现部分RTC 能力，比如教育、电商、社交等场景。当然还有x 因素会对RTC 生态造成影响。这些x 因素包括重大的技术变革、全球经济格局变化与政策法规调整等。融合技术所谓融合技术，就是用户只需要一个SDK/API 实现各种通信能力的接入，包括华为在内的国内主流公有云服务商大多采用这一方式。最典型的场景是，用户通过RTMP 接入观看市场，当需要和他人互动是，即可切换到RTC 网络。这样的好处是，既保证的用户体验，又可以最大限度的使用成熟的RTMP 服务，将成本降低。不过，海外市场与国内大相径庭。海外更主流的是DASH/HLS 以及CMAF/LHLS。SaaS与PaaS融合长远看，SaaS 与PaaS 互相渗透将不可避免。最知名的例子就是Zoom，他开始通过SDK 向合作伙伴提供RTC 服务。字节跳动、Bigo、YY 都在摩拳擦掌提供RTC 服务。同样的，PaaS 也会涉足SaaS，比如华为不仅提供RTC 服务，还提供了视频会议平台华为云会议及办公协作软件WeLink。AI技术融合AI 技术不断成熟和发展，正在渗透到多媒体技术的方方面面，这一趋势不可抵挡。· 语音识别与语音合成：从 Siri 到小冰，从智能手机到智能音响，语音识别已经无处不在，无需赘述。而语音合成则是让电脑把文本变成语音，比如Google 开源的Tacotron 已经可以实现99% 的人声还原。你在喜马拉雅或各种影视剧中听到的明星声音将越来越多地通过AI 生成。· 声纹-人声识别与音乐识别：声音是可以作为身份验证的，但是风险也同时存在，比如有人拿了你的录音去登录你的银行账号。而DNN（深度神经网络）可以掌握更多的声音特征，从而降低风险。而在音乐识别方面则没有那么高风险，但也直接关系到用户的体验，各大音乐App 都集成了相关的功能。· 回声消除：这是一个所有音频设备必须解决的问题，在多麦克风设备上消除回声相对容易。但在一些低端的Android 设备上，如果只有一个麦克风就需要利用AI 来帮助消除回声，效果非常不错。· ABR：ABR 即动态码率，其目的是为了解决客户端在不稳定网络下仍能流畅地观看视频，并且最大化的保证画质。ABR 算法需要关注客户端的视频缓存，以及当下的最大带宽，从而去预测未来一段时间提供给该客户端的码率。AI 的出现可以进一步提升ABR 的效果，最著名的要数MIT 提出的Pensieve。· 图像增强：关于图像增强大家谈的很多，也许你在看一些热门影片的时候已经用到了AI 加持的图像增强技术。比如，将SDR 转换为HDR 视频，视频超分（将720p 变成1080p），每秒30 帧视频变换为每秒60 帧等等。· 内容理解：AI 内容理解并不限于生成封面图，精彩剪辑，或者只看某个角色的镜头，这在内容推荐、广告平台有帮助。此外，内容理解还能帮助更好地处理视频，比如可以针对不同的视频内容选择不同的Codec，以及相关的编码工具；也可以找到视频中人眼最关注的部分，分配更多的码率，降低不易察觉的画面的码率，在保证用户体验的前提下降低码率。同时，AI 可以把竖版的短视频裁剪成适合横屏播放的内容。· 画质评估：AI 还能帮助检测视频源片中的瑕疵，比如黑屏，异物遮挡，这可以在后期制作中修剪。同理，AI 也可以帮助发现字幕遮挡关键画面信息的情况，从而调整字幕出现的时间或位置。关于内容理解的应用，Netflix 走在业界前沿，可以多关注。而且AI 的学习曲线是比较友好的，对于多媒体技术工程师不会构成太大的挑战。将给行业带来巨大的改变。技术人才分层与人才供给音视频技术人才大概可分为三大层，五小层：· 第一大层是制定标准、协议、算法，以及设计架构与优化系统性能的高级人才。这部分人才在市场上供不应求；· 第二大层为工程实现和能力接入与维护工程师，他们是支撑多媒体应用的主力军，总量将达到百万级。由于需求量巨大，总体上属于供不应求；· 第三大层为内容生产者，他们是普通的用户，但是可以快速掌握简单的多媒体接入能力；因此，可以看到在RTC 市场，技术融合是大趋势，云服务巨头将拥有更多资源优势，实时音视频行业的发展，需要加大人才培养的力度。最后，COVID-19 实现了对用户在多媒体技术能力方面的认知教育。这将在全社会种下技术改变生活的种子，会有更多的创新、创业玩家涌现，也让技术更容易渗透到行业。来源：新视界 | LiveVideoStack联合创始人、主编 包研