受邀 MapReduce服务体验官，感到非常荣幸，也非常忐忑。对 MapReduce服务不了解，非常想借这个机会了解学习大数据。这次体验的是使用Spark实现车联网车主驾驶行为分析-最佳实践1、创建集群（略，感谢代金券）2、准备Spark样例数据2.1创建一个名称为obs-demo-data-hwt-richblue88的桶2.2在IAM创建DIS委托2.3申请DIS通道2.4下载并安装DIS Agent2.5下载并获取Spark样例数据2.6配置DIS Agent采集数据agent.yml配置2.7启动Agent2.8查看数据上传情况3、准备Spark样例程序3.1创建桶，创建一个名称为obs-demo-analysis-hwt-richblue883.2分别新建program、output和log文件夹3.3创建作业3.4查看作业结果1.操作体验:是否能够顺畅的创建集群，提交作业，跑组件的样例程序创建集群OK。但是缺乏集群的说明，不知道选哪种集群比较适合场景。按照最佳实践重新建了集群才把后面的做下来。2.性能:您在体验过程中使用了哪些组件，跟自己搭建CDH，或者用过友商的对标组件相比，性能如何？主要使用spark。对标腾讯云，最大的感受还是更方便一些。腾讯云的操作，几乎是要命令行操作。性能上，因为是测的最佳实践案例，数据量小，感觉性能还可以。不知道真实业务跑起来咋样。缺点是作业没有进度条。要点进去看日志才知道跑到哪一步了。3.功能特性:对比体验官用过的其他大数据平台，是否有哪些功能需要补齐或加强？感受到的是界面的图形化做的不错。但是从大数据来讲，不仅仅是这个一个套间。与其他功能（数据湖、实时流、数据接入、数据仓库、云搜索等）怎么混搭使用？或者弄一个最佳组合套间出来比较好。个人感觉产品多，但是缺整体的框架。建议是整理通用的框架出来，或者从场景推荐最佳的大数据产品组合。4.满意度及推荐度：当自己的项目或是公司有大数据应用的需求时，是否愿意自己使用或推荐身边的同事朋友使用华为云MRS服务？什么原因促使你做出这个结论？华为云一直是国产的标杆。一直是努力进步的云。我相信华为云的EI、大数据产品越做越好。但是希望更深入客户的应用和痛点。比如MRS的输出，能不能展示得更好一点。而不是让用户从obs里去下载。然后从费用来说，成本确实比较高。如果输出的内容对企业有价值还可以考虑，如果只是测试体验，收费就不好说了。

以Hadoop+Spark的大数据时代跃进，现在己经退潮（最火是2012~2015年），所以，某系统一直沿用“祖传”版本Apache Hadoop 2.4（的确是Apache版，不是CDH……）。反正嘛，系统建是建了，却一直没有用起来，毕竟对于不是三大运营商或者大型互联网企业用Hadoop是浪费，其实那个系统用hadoop也就只是做了个数据可视化（其实不用Hadoop也可以做）。新开发的系统都打着AI、区块链这些旗号。趁着华为云MapReduce的试用体验，重新熟悉一下快忘光的hadoop知识。1.先来试试跑Hadoop版的“HelloWorld”：WordCount首先肯定要看入门指南，然后就蒙了找了老半天“文件管理”在那里啊？只得登录控制台那么传到OBS后，又怎样弄到HDFS上呢？文档中也没有找到命令行下怎样做……是不是在这里啊？但问题是根本就打不开啊，也添加安全组规则了啊。配成0.0.0.0/0，还是不行。晕死了 既然前端不行，就试试用JAVA推吧2.二次开发测试按照说明，怎么没有2.0.0的样例呢？不管了，先导入去试试。问题是MRS Manager根本就打不开啊，二次开发无法进行了，毕竟要Kerberos认证。并且二次开发包用Eclipse neon 3会报错…….来到这里，真的怀疑是自己操作的问题，还是产品文档没有完善啊？再回到检查访问控制，的确是开了9022 那么如果是360浏览器的问题，我换成IE试试，结果还是不行。开兼容性视图还是不行。问题是不管http还是https都打不开…… 应该是这3次体验评测中，最不顺利的一次。3.突然打开了试过用手机的Quark浏览器，是提示证书有问题。回想起之前，某业务系统也是要用低版的chrome将浏览器改为猎豹，因为猎豹的chrome版本较低，不认证证书问题。（真的服了！！！！！！好歹也得要支持IE啊，谁还会去选crhome的版本呢？）另外嘛，就用http也怎么啦？至少可以应急用啊。尝试登录，不管是华为云ID、手机号，还是LINUX的root，都是登录不了。又来一个大坑。群上求助才知用户名是admin，晕倒！终于进来了，界面挺高大上，然而，文件管理依然找不到啊。同样地作业管理，也不知飞到那里去......好了，接下来，真的不知道怎样测试了，回答一下标准问题吧1.操作体验:是否能够顺畅的创建集群，提交作业，跑组件的样例程序创建集群是正常，毕竟可以收费嘛。但是那个帮助文档，真的太out了，好歹也得要指出在那里用啊。问题是连文件也传不了，作业也提交不了，更不用说跑通Demo。至少也得要将最基本的快速入门指南做到没有bug啊。 2.性能:您在体验过程中使用了哪些组件，跟自己搭建CDH，或者用过友商的对标组件相比，性能如何？没法测试下去，真的自己搭Apache Hadoop比华为云的MRS用起来爽多了。 3.功能特性:对比体验官用过的其他大数据平台，是否有哪些功能需要补齐或加强？其实主界面的一大堆仪表盘是挺酷的。但真的真的文档方面要下功夫。并且界面那怕不支持新版Chrome，也得至少要支持IE11啊。二次开发Demo能测试一下，再release好不？或者将eclipse+demo+依赖jar+JDK一套打包好就更好了。 4.满意度及推荐度：当自己的项目或是公司有大数据应用的需求时，是否愿意自己使用或推荐身边的同事朋友使用华为云MRS服务？什么原因促使你做出这个结论？真的不满意，并且也不推荐用MRS。MRS文档渣爆了，并且玩大数据，用华为云的一个月的成本就要1700多元并且配置也一般，倒不如像某系统那样，搞几台服务器，一年下来的自建成本比上云要低，不用的时候，直接关hadoop的VM，节省资源用于其它突发的应用。并且还要传输大量的生产数据，内网跑跑还可以，放在云上嘛，除非重要的业务系统都上去了（至少国企很少这样干，一般都是一些对外服务的边缘系统放上云）。

本期体验产品： 华为云MapReduce产品 本次体验采用有奖征集体验评测报告+群内互动交流反馈的形式。首先从体验官社群中招募20人，体验产品并输出产品体验评测报告。报名成功的体验官，我们会在您的华为云账户中发放1700元产品代金券，用于本次体验。本期体验活动报名链接将会发布在“华为云产品体验官微信群”。因本期体验产品资源有限，请各位体验官务必确定可以有时间参与本次体验再行报名。报名成功后产品代金券会在24个小时内发放到您的华为云账户中，代金券发放后会在群体验官内通知各位，并指导各位使用代金券购买体验所需云产品及云资源。请各位及时参与体验，并按照要求输出体验评测报告。3月27日 16:00前，代金券未使用完的部分，将会进行回收。 我们会按照评测体验维度、深度、意见建议等方面，从中筛选出15-20份高质量体验报告，给予礼品奖励。  只要体验报告内容丰富、有深度，建议和意见中肯合理，那么中奖率就是100%哟~~  ☆奖品设置如下☆ 优秀测评体验报告奖：2名奖品：华为运动手环一副   高质量测评体验报告奖：3名奖品：《深入浅出强化学习原理入门》书籍 体验评测报告激励奖：15名奖品：华为云定制三合一数据线 ☆产品体验评测报告内容要求☆ 体验评测报告内容需要包含以下维度：本次体验活动建议选择MRS2.0版本（其中的组件对标开源最新版本），并建议创建混合集群（可以同时拥有流式组件和分析组件）,测评报告需包含以下维度。1.操作体验:是否能够顺畅的创建集群，提交作业，跑组件的样例程序2.性能:您在体验过程中使用了哪些组件，跟自己搭建CDH，或者用过友商的对标组件相比，性能如何？3.功能特性:对比体验官用过的其他大数据平台，是否有哪些功能需要补齐或加强？4.满意度及推荐度：当自己的项目或是公司有大数据应用的需求时，是否愿意自己使用或推荐身边的同事朋友使用华为云MRS服务？什么原因促使你做出这个结论？ 体验过程及评测报告中可参考的竞品：1.阿里云E-MapReduce2.自建CDH3.AWS-EMR4.腾讯云-弹性MapReduce体验评测报告交稿时间： 3月27日 14:00前，请报名评测的体验官将评体验测报告发帖上传到华为云社区开发者交流论坛中。并同步微信告知小助手（微信：hwyxzs）微信号。3月29日 16:00前，群内公布获奖体验官名单及奖品。 体验报告发帖地址：https://bbs.huaweicloud.com/forum/forum-557-639-1.html评测报告字数不少于1000字，可图文并茂，并在落款标注姓名和群内昵称，以便评奖时使用。  ☆华为云MapReduce使用指南☆1.大家可用PC点击下方链接，进入华为MRS服务主页面，点击“立即购买”进行产品购买。https://www.huaweicloud.com/product/mrs.html2.购买集群的具体参数说明链接如下，（建议创建关闭kerberos认证的集群，可降低您的使用难度）：https://support.huaweicloud.com/usermanual-mrs/zh-cn_topic_0013363945.html在购买MRS服务之前需要先进入虚拟私有云（VPC）服务，创建VPC和子网，并购买弹性IP和带宽。3.在购买集群之后可以通过快速入门，对集群的组件进行简单尝试使用https://support.huaweicloud.com/qs-mrs/mrs_09_0001.html4.各个组件的二次开发指南：https://support.huaweicloud.com/devg-mrs/mrs_06_0001.html5.MRS服务提供的体验馆：体验不同行业的大数据场景，让更多的人了解大数据在日常生活中的作用。通过简单、快速一键式集群服务搭建，帮您更好的了解和掌握高可靠、高安全、易使用的大数据特性。进入场景体验，点击查看详情，可以按照实现方法，进行各行业的大数据处理分析的demo操作https://www.huaweicloud.com/product/mrs/demos/aggregation.html  

 MapReduce服务上线以来，我们在用户的意见和建议中不断地进行改进和优化。如今MRS已来到2.0时代。MRS 2.0对大数据引擎做了全面升级，并推出实时流与批分析一体的混合集群，支持计算存储分离的统一存储方案，为客户提供低成本、高性能、更易用的全新一站式大数据平台服务。      下面就由小编给大家详细介绍下MapReduce2.0的新特性。MRS 2.0 新特性一览表  一、MRS 2.0 vs 1.X ——Hadoop篇：Ø  冷数据占存储空间更小对于冷数据的存储，我们一直希望能够减少其所占存储空间。纠删码作为给HDFS拓展的新特性，是一种与副本相比更节省存储空间的数据持久化方法。传统HDFS数据只采用冗余的方式来获得数据可靠性(默认冗余200%)，带来了存储成本的提升。该技术在HDFS实现了纠删码使得数据冗余减少到50%，且可靠性更高(使用Reed-Solomon(10,4)编码的数据可以允许4个节点失效)，并引入条带化的块存储结构，最大化的利用现代集群单节点多磁盘的能力，使得数据写入性能在引入编码过程后，仍和原来多副本冗余的性能接近，更值得一提的是，应用层无需改动写入数据的实现方式即可获得这部分提升。使用场景上，纠删码编码的数据在读写数据时，会耗费更多的CPU，在CPU资源富裕的大数据应用场景，能给客户带来更大的成本空间。Ø  Yarn的Opportunistic Containers过去的YARN集群，资源利用率较低，主要有两个因素，一是延迟反馈，YARN依赖心跳管理集群资源，空闲资源能够再次被申请，需要多次心跳交互才能感知到；二是YARN应用声明的资源比实际使用量大，导致利用率低。Opportunistic Containers相对于之前的Guaranteed Container来说，优先级更低，会被Guaranteed Container抢占，但其优势在于让container请求在YARN的NodeManager节点排队(即使资源不足)，一旦有空闲资源，可以立即开始执行，消除了延迟反馈，提升了Container启动速度，从而提高了集群利用率。 Ø  新机制实现Yarn的高扩展新引入Yarn federation机制：将一个超大的集群分解成多个子集群的方式来实现Yarn的高扩展性，每个子集群有自己的ResourceManager和NodeManager，Yarn federation将这些子集群拼接在一起使他们成为一个大集群。在Yarn federation环境中，Application看到的是一个超大的集群，并且能够在整个集群的任何节点执行Task。Ø  支持自定义资源模型从MRS2.0开始，Yarn支持自定义资源模型（support user-defined countable resource types），不仅仅支持CPU和内存，比如集群管理员可以自定义诸如GPU，软件许可证等等资源，Yarn任务可以根据这些资源的可用性进行调度。 除此之外，华为云MRS服务2.0全面兼容Hadoop 3版本，提供了DataNode节点内多磁盘均衡工具，来处理添加或替换磁盘时可能导致的DataNode内部多块磁盘存储的数据不均衡的问题。 二、MRS 2.0 vs 1.X ——Hive篇：Ø  新执行引擎TezMRS2.0上的Hive，使用新的执行引擎Tez代替原先的MapReduce，性能有了显著提升。Tez可以将多个有依赖的作业转换为一个作业（这样只需写一次HDFS，且中间节点较少），从而大大提升DAG作业的性能。下面的图表阐述了这个过程：左图表展示的流程包含多个 MR 任务，每个任务都将中间结果存储到 HDFS 上（前一个步骤中的 reducer 为下一个步骤中的 mapper 提供数据）。右图表展示了使用 Tez 时的流程，仅在一个任务中就能完成同样的处理过程，任务之间不需要访问HDFS。使用 Tez 完成Hive 查询的好处包括：·       它为你提供了全面的 DAG 支持，同时会自动地在集群上完成大量的工作，因而它能够充分利用集群的并行能力，在多个 MR 任务之间不需要从 HDFS 上读 / 写数据，通过一个单独的 Tez 任务就能完成所有的计算。·       它提供了会话和可重用的容器，因此延迟低，能够尽可能地避免重组。·       兼容原先MR任务。Tez提供了的全新的UI界面，可以更加方便的查看每个任务的执行情况。Ø  提供了HPLSQLMRS2.0中的Hive支持存储过程（HPLSQL）。使用存储过程能够更加方便的执行具有关联性的HQL语句集，通过定义变量和传参，灵活地调用方法获取事务的执行结果，比之前反复执行多条hql语句效率更高。通过定义连接，可以在一个HPLSQL中访问不同的关系型数据库。下面是一个简单的HPLSQL例子：CREATE FUNCTION hello(text STRING)RETURNS STRINGBEGIN  RETURN 'Hello, '   || text || '!';END; FOR item IN (  SELECT s1,s2 FROM   test limit 10)LOOP  PRINT item.s1 ||   '|' || item.s2 || '|' || hello(item.s1);END LOOP;CREATE FUNCTION hello(text STRING)RETURNS STRINGBEGIN  RETURN 'Hello, '   || text || '!';END; FOR item IN (  SELECT s1,s2 FROM   test limit 10)LOOP  PRINT item.s1 ||   '|' || item.s2 || '|' || hello(item.s1);END LOOP; Ø  HiveWebUI使运维更加简单HiveServer如今提供的web界面，可以方便查看正在运行的SQL有哪些，执行了多长时间等，可以说是运维同学的一大福音。新版本的Hive还充分利用现代CPU提供的SIMD，AVX2等指令集，来提高CPU利用效率。例外，CBO这种基于代价的查询优化，对于多表join性能优化效果显著。使用新版本后，根据不同场景，Hive的性能提升了不止50%呢。 三、MRS 2.0 vs 1.x ——Spark篇：Ø  真正毫秒级低延迟处理无论是最早的Spark Streaming，还是Spark 2.0中推出的Structured Streaming，均采用定时触发，生成微批的方式实现流式处理。Spark Streaming的处理逻辑如下：当新的数据到达时，Driver需要等到定时器下一个触发的时刻，将这段时间内到达的所有新数据生成一个新的批次，并将其加到一个队列中。之后，会由Driver的另一个线程获取队列中的批次，解析处理后生成Task并分发给各个Executor执行。显然，等待定时器触发，以及分发Task到Executor执行，都带来了额外的时间开销。Structured Streaming处理逻辑有所不同，但存在相同的问题。MRS 2.0中包含的Spark 2.3版本，在Structured Streaming中新加入了Continuous Processing模式，正是解决了上述问题。使用该模式时，会在各个Executor上启动一组长时间运行的任务，而不再是定时触发。数据一旦到达，就会立刻被计算处理，从而避免了等待定时器下一次触发的额外时间消耗，以及生成Task并分发到Executor的额外时间消耗，实现了真正毫秒级的低延迟处理，最小延迟从原先的100毫秒左右，降低到现在的3-5毫秒左右。Ø  支持流和流的join操作在MRS 2.0之前，Structured Streaming仅支持流和静态数据集之间的join操作，MRS 2.0中包含了Spark 2.3版本，加入了期待已久的流和流的join操作。流和流的join操作，支持内连接和外连接，可用在大量的实时场景中，例如比较常见的点击日志流的join操作，现在就可以通过几行代码轻松实现。Structured Streaming之前在Spark 2.0版本中推出，用来替代原先的Spark Streaming。Structured Streaming基于Spark SQL引擎，使用户能够使用与批处理一样的DataSet API来构建流式应用，并能享受Spark SQL引擎带来的性能提升，另外，Structured Streaming还提供了exactly-once的语义支持，因此推荐大家使用Structured Streaming替代原有的Spark Streaming程序。Ø  PySpark性能优化基于Apache Arrow和Pandas库，实现了pandas_udf。利用pandas对数据进行矢量化的优化，并通过Arrow降低Python与Spark的通信开销。使用pandas_udf替代pyspark中原来的udf对数据进行处理，可以减少60%-90%的处理时长（受具体操作影响）。Ø  MLLib优化提升在Spark 2.3中带来了许多MLLib方面的提升，例如，支持Structured Streaming中使用MLLib的模型和pipeline；支持创建图像数据的DataFrame；使用Python编写自定义机器学习算法的API简化等。 四、MRS 2.0 vs 1.x ——HBase篇：Ø  HBase on OBS: 数据与MRS集群解耦HBase2支持为WAL和HFile设置存储在不同类型的文件系统，MRS 2.0中的HBase2.1支持设置WAL on HDFS和HFile on OBS，实现存储和计算分离的目的，并有以下几个优点：·     计算存储分离可以根据需要对RegionServer进行弹性扩缩容，避免计算和存储绑定造成的资源浪费；·    华为云OBS的单价低于云盘和直通盘，在大容量存储需求下极大的降低存储成本；·    OBS支持跨AZ和跨Region的数据复制，极大提高数据的可靠性。此外，相比开源HBase2，MRS HBase2.1对on OBS场景做了更多的可靠性优化：·    创建集群支持on OBS的模式，简化操作步骤；·    简化Region Location计算的算法，不再对数据本地性作要求；·    数据恢复过程中的WAL Split阶段统一在HDFS中完成，恢复时长同on HDFS。 Ø  新的多租户方案RegionServer Group作为新的多租户方案，可以将多个RegionServer进行分组，组成不同的RGS。不同的表可以分布在不同的RGS中，不同RGS中的表不会互相受到影响，以这种从RegionSever中物理隔离的方式，从而实现多租户的方案。Ø  优化region状态转换AssignmentManager V2基于Procedure V2实现，能够更快速的分配Region，维护的region状态机存储不再依赖于ZooKeeper，移除了region在zookeeper中的状态信息，只在HMaster的内存和Meta表中维护region状态，极大的解决了region状态转换过程中引起的问题。Ø  优化HFile实现方式MemStore中的数据达到一定大小以后，先Flush到内存中的一个不可改写的Segment，内存中的多个Segments可以预先合并，达到一定的大小以后，才Flush成HDFS中的HFile文件，这样做能够有效降低Compaction所带来的写IO放大问题。 此外，HBASE 2.x更改了数据的读写方式，会直接在二级缓存中进行读写，采用堆外内存Offheap替代之前的堆内内存，减少对Heap内存的使用，有效减少GC压力。HBase2.x 开始默认使用NettyRpcServer替代HBase原生的RPC server，大大提升了HBaseRPC的吞吐能力，降低了延迟。 五、MRS 2.0 vs 1.x ——Kafka篇：Ø  支持Kafka MirrorMakerMirrorMaker用于Kafka集群之间的流数据同步，可以把Kafka集群中的消息复制到另一个Kafka集群中，这在测试环境引流的时候，或者需要把多个不同的Kafka集群的消息合并在一个大集群时非常有用。Kafka mirrormaker通过Kafka集群间的数据镜像能力，实现跨kafka集群的消息实时同步备份，可用作在线kafka集群的数据容灾场景和kafka集群的数据在线迁移场景，提高数据迁移的吞吐量和容错性。 六、MRS 2.0 vs 1.x ——集群管理篇：Ø  混合集群原先MRS只支持独立的分析集群和流式集群，对于一些小型数据场景及测试场景，既要部署分析和流式组件，就需要部署两套集群。于是MRS2.0引入了“混合集群”概念，在同一集群中用户就可以同时部署分析和流式组件，节省了管理节点的成本，并且可以大大减少不同集群的通信成本，是小型集群和测试场景大大的福音。Ø  混合计费模式的弹性伸缩企业生产环境长期使用大数据集群，为节省成本往往会选择价格更优惠的包周期预付费购买模式。但大数据的计算资源率随着业务时段存在峰谷变化，如果包年包月购买的资源按照峰值就会存在大量时间段的浪费，按照谷值购买又会存在忙时资源不足影响业务。因此MRS 2.0提供了混合计费的弹性伸缩能力，可以在包周期集群上配置弹性策略（按时间段或者业务指标进行集群节点弹性伸缩），弹性部分节点按需收费。客户可以根据业务情况配置自动弹性伸缩策略，MRS服务会在繁忙时申请额外资源，空闲时释放多余资源，帮助客户降低成本，聚焦核心业务。Ø  Manager的监控展示的优化MRS2.0的Manager界面默认显示历史监控数据，用户可以选择实时或者任意区间查看监控数据查看监控数据更便捷。磁盘使用率、内存使用率等指标细化显示，主机监控更细致，星型符号标注主备管理节点，用户体验更友好。 MRS2.0新增了这么多特性，进一步实现了完整统一的计算系统，为大家提供7*24小时不间断服务的系统级平台。同时具有强大的包容的生态圈，并支持计算存储分离的功能，大家从各个平台迁移过来都非常方便。开源中的所有新特性，都可以来MRS 2.0上抢先一步体验到。 MRS 2.0 敬请期待。。。

课程内容：1、大数据流式集群+分析集群的创建2、基于大数据的水务数据的分析展示课程材料见附件华为云AI+大数据学习营MRS服务高阶课程.rar

高校学习营活动贴地址：https://bbs.huaweicloud.com/forum/thread-13291-1-1.html服务地址：https://www.huaweicloud.com/product/cs.html 学习课堂：https://education.huaweicloud.com:8443/courses/course-v1:HuaweiX+CBUCNXE021+Self-paced/about学习流程：注册华为云（完成认证）——下载附件中的资料——进入学习课堂（学习相关课程）——完成作业并上传邮箱注意：开始学习之前请先阅读【华为云AI+大数据高校学习营】课程学习FAQ相关事项，熟悉作业流程，格式。确认代金券已成功发放到账户，再开始学习&作业。完成作业的同学请及时删除闲置的图，避免造成欠费。作业一：通过Flink StreamSQL实现车辆超速告警场景，即车辆一旦超过限速，即时短信和邮件告警。超速标准和超速数据随意，实现功能即可。参考链接：https://github.com/huaweicloud/huaweicloud-cs-sdk/tree/master/huaweicloud-cs-examples注意：创建最小spu，完成后停止作业即可作业二：开放性题目，使用CS自定义模板，实现任意一个功能，提交作业内容包含：问题描述：描述作业解决什么问题或实现什么功能 ，解决方案：说明问题的解决方案和实现步骤 ，源码提交：提交过程中使用的源码及jar包，结果展示：结果的输出和展示。

【摘要】 华为云社区月刊，每月更新一刊，欢迎大家品读。本期推荐2018年度华为云社区十大精品专题、21天晋级大数据实战营小结、云安全2018年度小结、年终庆典开发者英雄大会活动，精彩内容值得分享。

AI 功能相关 AT 命令模组发送上行数据时携带 RAI 指示标志， 核心网根据此指示标志来决定是否需要立即释放当前 RRC 连接状态， 具体指示标志有两种：⚫ 当前数据发送完成后，后续没有上行或下行数据，则立即释放 RRC 连接；⚫ 当前数据发送完成后，仅有一条下行数据（如应答或对上行数据的响应），且后续没有其他上行数据交互，则立即释放 RRC 连接。2.1. RAI 功能相关 AT 命令2.1.1. AT+NSOSTF 发送 UDP 数据并携带标志位通过 AT+NSOSTF 命令向远端服务器发送 UDP 数据并携带标志位。参数AT+NSOSTF 发送 UDP 数据并携带标志位设置命令AT+NSOSTF=<socket>,<remote_addr>,<remote_port>,<flag>,<length>,<data>响应<socket>,<length>OK如果出现错误，响应：ERROR或+CME ERROR:<err>最大响应时间 300 毫秒<socket> 通过 AT+NSOCR 建立的 Socket<remote_addr> IPv4 地址 点分表示的 IP 地址<remote_port> 远端服务器 UDP 端口号。 范围为 0-65535。<flag> 标志位，十六进制格式表示；若需要同时设置多个标志，则该参数由各标志位进行逻辑或运算（OR） 得到。0 不设置任何标志位备注1. <remote_addr>支持八进制、十进制或十六进制表示法。2. <remote_addr>仅支持 IPv4 地址。3. 目前<data>仅支持十六进制字符串格式。4. 关于此命令的更多详情，请参考文档 [1]&[2]。2.1.2. AT+QLWULDATAEX 发送 CON/NON 数据通过 AT+QLWULDATAEX 命令可向华为 IoT 平台发送携带辅助释放指示的 CoAP CON (Confirmable)数据或 NON (Non-confirmable) 数据。参数0x100 特殊消息数据，以高优先级发送。 该功能需要 USIM 支持。0x200 RRC 连接释放指示： 上行数据发送完成后， 指示核心网立即释放连接0x400 RRC 连接释放指示： 上行数据发送完成并收到下行数据回复后， 指示核心网立即释放连接<length> 已发送数据长度；以十进制表示。 最大数据长度为 512 字节。<data> 已接收的数据； 以十六进制字符串或带引号的字符串格式表示。AT+QLWULDATAEX 发送 CON/NON 数据设置命令AT+QLWULDATAEX=<length>,<data>,<mode>响应OK如果出现错误，响应：ERROR或+CME ERROR:<err>最大响应时间 300 毫秒<length> 已发送数据长度；以十进制表示。最大数据长度为 512 字节。<data> 已接收的数据；以十六进制字符串表示。<mode> 发送的 CON/NON 数据模式0x0000：发送 NON 数据0x0100： 发送 CON 数据0x0001： 发送 NON 数据，带 RELEASE 标记0x0101： 发送 CON 数据，带 RELEASE_AFTER_REPLY 标记备注1. 针对 BC95 模组， <mode>值 0x0001 和 0x0101 仅在 B657SP5 或之后版本上支持。2. 发送 CON 消息之后， 必须在收到响应或发送超时之后才能发送下一条 CON/NON 消息。3. 关于此命令的更多详情，请参考文档 [1]&[2]。RAI 功能操作示例3.1. 发送 UDP 数据并携带标志位执行 AT+CSCON 命令使能 URC 上报功能，通过 URC 的上报状态，可判断标志位是否生效。[13:38:08:105]AT+CSCON=1 //使能 URC 上报功能[13:38:08:121]OK[13:38:08:344][13:38:08:344]+CSCON:0[13:38:24:470]AT+NSOCR=DGRAM,17,1234,1 //创建 UDP socket[13:38:24:502]0[13:38:24:518]OK[13:38:28:717]AT+NSOSTF=0,220.180.239.212,8052,0x400,2,AB30 //使用 0x400 标志位发送数据[13:38:28:765]0,2[13:38:28:765]OK[13:38:29:340][13:38:29:340]+CSCON:1[13:38:29:611][13:38:29:611]+NSONMI:0,2 //收到下行数据后， 立即释放 RRC 连接[13:38:29:931][13:38:29:931]+CSCON:0[13:38:37:244]AT+NSORF=0,512[13:38:37:276]0,220.180.239.212,8052,2,AB30,0 //读出下行数据[13:38:37:307]OK[13:38:56:275]AT+NSOSTF=0,220.180.239.212,8052,0x200,2,AB30 //使用 0x200 标志位发送数据[13:38:56:323]0,2[13:38:56:339]OK[13:38:58:782][13:38:58:782]+CSCON:1 //建立 RRC 连接，并开始发送数据[13:38:59:086][13:38:59:086]+CSCON:0 //数据发送完毕后，立即释放 RRC 连接3.2. 发送 CoAP CON/NON 数据执行 AT+CSCON 命令使能 URC 上报功能，通过 URC 的上报状态，可判断 RAI 功能是否生效。[14:17:35:307]AT+CSCON=1 //使能 URC 上报功能[14:17:35:322]OK[14:17:45:876][14:17:45:876]+CSCON:0[14:17:53:301]AT+NCDP?[14:17:53:301]+NCDP:180.101.147.115,5683 //IoT 平台服务器地址[14:17:53:333]OK[14:18:03:920]AT+QLWULDATAEX=3,AA34BB,0x0001 //使用 0x0001 标志位发送 NON CoAP 数据[14:18:05:404]OK[14:18:05:532][14:18:05:532]+CSCON:1 //建立 RRC 连接，并开始发送数据[14:18:05:947][14:18:05:947]+CSCON:0 //数据发送完毕后，立即释放 RRC 连接[14:21:06:880]AT+QLWULDATAEX=3,AA34BB,0x0101 //使用 0x0101 标志位发送 CON CoAP 数据[14:21:06:911]OK[14:21:07:933][14:21:07:933]+CSCON:1 //建立 RRC 连接，并开始发送数据[14:21:08:221][14:21:08:221]+QLWULDATASTATUS:4 //CON CoAP 数据被平台确认收到[14:21:09:179][14:21:09:179]+CSCON:0 //数据发送完毕后，立即释放 RRC 连接 

11月22日，"知者创物——全球互联网技术大会GITC2018北京站"在北京国家会议中心盛大召开，大会共有1个主会场涵盖无人驾驶、人工智能、区块链、AR&VR、智慧城市、全球化、智能制造、技术论坛等8大主题以及大数据应用、网络安全、基础架构、质量测试、前端技术、运维等十余个分会场，同时还有闭门垂直峰会和领袖峰会。在主会场方面，"华为云EI 智能体，行业升级新引擎"的演讲引起与会嘉宾的强烈反响；分会场方面，华为AI Fabric与华为云视频服务全景等议题也大受追捧。同时，华为云视频服务的高清低码技术和短视频服务系列应用产品也在会上进行了展出。华为云中国区CTO 彭柯，来自全球160位的互联网演讲嘉宾以及其他互联网人士出席了大会。全球互联网技术大会GITC2018北京站现场盛况华为云EI智能体,行业升级新引擎华为云EI（企业智能）服务基于华为最新AI芯片实现能力升级，经过不断发展迎来华为云EI城市智能体的问世。华为云中国区CTO彭柯在大会主会场作了"华为云EI 智能体，行业升级新引擎"的主题演讲，其绘声绘色的演讲多次博得阵阵掌声，他指出，华为云EI企业智能自问世以来，已经经过华为云在城市、制造、物流、互联网等8大行业的超过200个项目进行探索，基于华为最新发布的Ascend 310及910AI芯片，华为云EI从"芯"出发，终于以全栈全场景服务强力升级。华为云EI正致力于助力产业升级，针对海量重复场景、专家经验场景及多域协同场景，实现效率提升、专业传承和突破极限。华为AI芯片大大提升了算力，这也标志着华为云将全面进入AI新时代。华为云EI城市智能体希望与更多伙伴同行，共同创造城市的美好未来。华为云EI智能体希望能更好地结合行业智慧，成为行业升级新引擎，最终实现'用得起、用得好、用得放心'的普惠AI。"华为云中国区CTO彭柯在大会主会场发表演讲AI新时代，智享未来新体验在大会华为分会场，华为AI Fabric与华为云视频服务全景等议题大放异彩。数据中心交换机产品总监邓一鸥作了"华为AI Fabric，引领数据中心进入极速无损的高性能时代"的演讲，他指出，AI正在以前所未有的速度深刻改变人类社会生活，改变世界。越来越多的企业将AI视为数字化转型的下一站，利用AI助力决策、重塑商业模式与生态系统、重建客户体验的能力将是数字化转型计划取得成功的关键推动力。与云计算时代相比，AI时代企业DC的使命正在从聚焦业务快速发放向聚焦数据高效处理进行转变。伴随着AI的热潮，深度学习服务器集群涌现，以及各种SSD等高性能新型存储介质的发展，对端到端通信时延提出了更高的要求，华为AI Fabric解决方案始终致力于无损网络研究，为AI时代数据存储和处理提升效率提供端到端的解决方案。数据中心交换机产品总监邓一鸥在演讲中如今，视频已成为各行业基础能力，多业务、全接入场景成为方案的核心，在这一领域，华为云视频服务高级营销经理孙浩在会上作了"智能视界，乐享未来---解码华为云视频服务全景"的演讲，他指出，在视频编码器测评领域享有盛誉的MSU（Moscow State University，莫斯科国立大学）视频编码器大赛中，华为自主研发的HW265软件编码器在结构相似度（SSIM）及多方法评估融合（VMAF）评价指标均获得第一名的好成绩。华为实时转码支持H.265高清低码，极致压缩，画质更清晰，使得客户的出流带宽成本进一步降低。画质重生，让你尽享视觉盛宴。华为云视频服务专家在大会作主题演讲华为云游戏文娱项目群总经理聂颂在"创新要素的改变，现在与未来"的主题演讲中指出，多年持续投入，华为成为全球领先的ICT解决方案供应商。强力投资核心技术，依托"云+联接"，提供稳定可靠、安全可信、可持续演进的云服务，打造智能世界的"黑土地"，成为客户面向未来发展的发动机和永远的伙伴。基于华为云，我们提供游戏开发测试、游戏部署、游戏运营、游戏创新全场景覆盖的游戏解决方案。华为云游戏文娱项目群专家AI时代的企业智能，华为云EI为互联网行业赋能。华为云EI产品部解决方案架构师翁哲宇在题为"AI时代的企业智能"的演讲中提到，人工智能正在推动影响国计民生的制造业、物流业、金融业、家电业、媒体娱乐业等产业智能化升级，华为全栈全场景AI解决方案打造客户用得起，用得好，用得放心的普惠AI平台。华为云EI产品部专家在演讲中创新合作，从芯开始华为平台聚集了许多合作伙伴，英特尔就是一位和华为经过了20多年的合作的老朋友，Intel资深技术顾问卢玉峰在演讲中指出，从最开始的网络侧计算，到现在的NFV、AI和云计算，英特尔与华为的合作越来越广，也越来越深入，英特尔与华为20+年核心业务合作历程覆盖全球。我们相信，在华为公有云上，从芯片开始的等多项创新合作将有助于打造一朵与众不同的华为云。Intel资深技术顾问卢玉峰映客直播高级技术总监陈雪峰在演讲中提到了人工智能在直播推荐中的应用，包括通过人工智能对用户外表/风格画像及直播场景识别，对行为理解的处理等能力，促进直播产业的发展。映客直播高级技术总监陈雪峰成果展示，出彩夺目在四层大会展示区展示了华为云视频服务的高清低码技术和短视频服务，华为云视频服务，为您提供从视频采集、上传、 转码、存储、分发到播放的一站式服务，依托华为云，致力打造简单、高效、智能、可信的视频服务平台，帮助行业伙伴更好的开展视频转码、视频点播、视频直播、视频AI等业务。华为云视频服务的高清低码技术，可将高清视频以极低带宽占用实现流畅、清晰、稳定传输，同等视频质量下码率下降20%~30%，在提升用户视频体验同时，极大降低带宽成本。华为云视频服务还提供集短视频录制、上传、转码、存储、分发、播放于一体的一站式短视频端到端解决方案，开放了丰富多样的API、SDK，帮助开发者快速构建优秀短视频应用。拍摄、剪辑、混音，实时美颜、滤镜和酷炫粒子特效，自定义皮肤、AI贴纸，人脸手势识别炫酷玩法，轻松嵌入，分分钟搞定。大会展示区的应用展示GITC 全球互联网技术大会·北京站，着眼2018互联网领域的最新技术成果，聚焦未来行业发展趋势。未来，华为将继续发挥自身在人工智能、智慧城市、智能制造、技术论坛等领域优势，助力每一位合作伙伴拨开迷雾，乘风破浪。视频直播服务（Live）依托华为云，凭借在视频业务领域长期技术积累，快速敏捷为行业提供高并发、低延迟、高清流畅、安全可靠的端到端直播解决方案。计划于2018/12/01 00:00:00将视频直播服务（Live）正式转商用。如需继续使用视频直播服务，请您提前确保账户余额充足。另若公测期间您使用体验域名测试的，请您及时申请域名并完成备案。华为云在此提醒您，相关资源如果不再使用，请于2018/12/01 00:00:00前登陆控制台，删除对应资源，避免产生费用。详情点击官网查看更多信息，请您点击了解。

经过数十位技术工程师，以及本小编的辛苦劳作，MapReduce服务重磅推出新版本1.8.1，无论是在集群安全性、易用性、灵活性，还是在组件的功能性都变得更加强大！下面由小编来简单地对比一下：MRS1.8.1与友商服务对比A云E-MapReduceT云   EMR弹性MapReduce华为云 MRSMapReduce Service版本组件Kafka(1.0.1)Storm(1.1.2)Kafka(不支持)Storm(1.1.0)Kafka(1.1.0)Storm(1.2.1)是否专属云服务否否是，像私有云一样灵活使用专属云集群访问通道弹性公网IP弹性公网IP弹性公网IP是否支持弹性伸缩支持，按时间伸缩规则配置不支持支持，按照时间/资源自定义伸缩规则配置 MapReduce服务不愧是华为云重点打造的服务，它基于华为历经行业数万节点成功使用经验，在云上打造的企业级Hadoop大数据平台服务。一键部署、灵活弹性伸缩，包含了Hadoop、Spark、HBase、Kafka、Storm、Hive等丰富内核组件，帮助用户在云上轻松完成高可靠、高安全、低成本、一站式大数据平台的搭建。 读到这里是不是很想知道MRS1.8.1到底有什么详细的更新呢？且听小编一一道来： 1.       MRS专属大数据服务 在金融、公安、政府等项目中，由于数据的敏感性，对大数据的存储、清洗、处理过程中需要更高的隔离性与安全。因此，需要建立一个隔离度高、满足企业自身行业更强监管的专属云服务。业务上云痛点铁三角专属云服务（Dedicated Cloud）是在公有云上隔离出来的专属计算和存储资源池，租户可以在其中申请专用物理服务器来构建自己的计算和存储资源池，并使用高度可靠的隔离网络。专属云用户部署的云主机（ECS）和物理机（BMS）将分布在用户自己的专属资源池中，并且可在管理控制台管理资源，查看计算资源使用情况，就像私有云一样灵活使用专属云。专属云服务客户价值专属云大数据是将大数据集群服务与专属云服务进行结合的一种综合**，在专属云内用户独占物理设备、独享计算和存储资源，使用专属云内的资源搭建大数据服务。基于弹性IP的集群快捷访问通道虚拟私有云(vpc)为MRS集群上的弹性云服务器构建了隔离的虚拟网络环境，用户无法直接使用本机的浏览器访问MRS Manager， MRS服务提供了弹性公网IP功能，可以通过固定的公网IP地址与互联网互通，并且比用户自绑弹性公网IP更便捷，功能更全面。·         便捷访问MRS Manager步骤减少至2步，简化添加安全组规则，获取公网IP等步骤，便捷性提升四倍以上，用户用起来更方便。·         功能更全面MRS绑定的弹性公网IP的特性为用户提供的六大功能，如下图所示，不仅能够针对性的解决用户的痛点，也把用户体验提至最佳。 Kafka升级到1.1.0版本 Kafka是一个使用广泛的分布式消息队列，MRS在1.8.1版本中Kafka升级到了1.1.0，主要有以下几个特性的更新：1)  关于存储的一些优化。对于Kafka集群来说存储太昂贵并且容错性不高，最好的办法应该是使用JBOD，并且设置replication factor为4，与RAID-10比较，冗余度没变，提高了系统可用性。此优化针对JBOD，允许Broker下的单个磁盘故障后Broker依然可以运行，提供在单个Broker内和多个Broker之间的多个磁盘之间的数据移动。2)  部分配置可以做到不用重启进程即可动态更新。3)  Kafka Streams API的优化。Kafka Streams是Apache Kafka从0.10版本引入的一个新特性，它提供了对存储于Kafka内的数据进行流式处理和分析的功能，它是一个客户端类库，相比Storm、Flink等流式处理框架，易于开发和理解，编程简单。4)  支持基于delegation token的认证，可以在不给Kerberos过大的压力的情况下支持更多的客户端。Kafka从1.x版本开始，开始朝着从以分布式消息队列为己任到分布式消息队列和流处理平台方向发力。MRS作为一站式的大数据处理平台，快速更新Kafka版本，结合华为c3ne规格的虚拟机，利用其超大的网络带宽，可以充分发挥Kafka的性能。 Storm升级到1.2.1版本Storm是一个分布式实时大数据处理系统。Storm设计用于在容错和水平可扩展方法中处理大量数据。它是一个流数据框架，具有最高的摄取率。MRS在1.8.1版本中Storm升级到了1.2.1，这是一个常规维护版本，其中包含许多重要的错误修复，可以提高 Storm 的性能，稳定性和容错能力。 MRS资源锁特性：MRS资源锁通过对大数据集群中的ECS、EVS等资源进行加锁，在集群使用期间，防止用户在ECS页面的误操作而产生可能影响集群功能的后果，比如删除虚拟机、重装操作系统、切换操作系统、变更虚拟机规格等，来保证我们大数据集群的稳定可靠运行。MRS资源锁默默地为您保驾护航，用户不需要做任何额外操作。当我们创建大数据集群时，MRS资源锁就会相应加上；当我们终止大数据集群时，MRS资源锁就会相应释放。 弹性伸缩增强：资源计划在大数据应用，尤其是实时分析处理数据的场景中，常常需要根据数据量的变化动态调整集群节点数量以增减资源。MRS的弹性伸缩功能已经支持根据集群负载对集群进行弹性伸缩。此外，如果数据量以天为周期有规律的变化，并且希望在数据量变化前提前完成集群的扩缩容，MRS新特性资源计划将派上用场。 资源计划也可以理解为定时弹性伸缩，可以单独使用，也可以与按负载弹性伸缩叠加使用。具体使用方法可以参见https://bbs.huaweicloud.com/forum/thread-12598-1-1.html。 弹性伸缩增强：自动化脚本对于弹性伸缩来说，一些特定的业务场景，可以自动化实现根据节点数量的变化对资源分配或业务逻辑进行更改。MRS支持的自定义弹性伸缩自动化脚本的解决方案，预定义了一些与扩缩容的类型、节点数等相关几个参数，包括扩缩容节点数、扩缩容类型、节点ip，触发规则名。客户可以将自动化脚本存储在MRS集群虚拟机或OBS上，也可以传递自定义参数（多个参数中间用空格隔开），直接填写在参数配置框中传递给脚本。自动化脚本给用户实现个性需求提供了途径，完全自定义的脚本与多个可选的执行时机基本可以满足用户的各项需求，使弹性伸缩更具灵活性。 通过上述的介绍，相信大家已经大致了解MRS新版本带来的新特性。为了让大家能第一时间体验到新特性，MRS服务再发福利，免费为个人赠送包月的大数据分析集群套餐，不花一分钱就能体验云上的MRS大数据平台。赶快点击如下链接，申请免费包月的大数据集群（已经参与过上次免费领取活动的童鞋不能再次参与哦）。https://activity.huaweicloud.com/free_test/index.html

Hello DevClouder！各位开发者们，大家好。近几年最HOT的新兴行业是什么？不用怀疑，走在技术前沿的你一定知道！没错！就是大数据！！！想不想紧跟时代步伐，成为High Level的大数据人才？21天晋级大数据实战营重磅来袭！！！华为云DevCloud & 华为云EI联合出品，第二期大数据活动将为您带来更豪华的课程盛宴！在第一期21天大数据活动基础上，华为云再次推出以大数据实战为主题的活动！21天精编课程，八大真实企业场景实战，搭配作业专家指导，全方位掌握大数据处理和分析技术。还等什么？线上限时免费入营学习！面向人群：（1）所有渴望学习大数据知识的朋友们（2）每日完成学习、实践、打卡任务，就有机会获得惊喜奖品参与方式：戳此链接进行报名哦：课程预览：

【云端大事件】北京佳格卫星+AI时空大数据平台入驻华为云市场，助力现代农业产业升级上云 【导语】2018年11月14日，北京佳格天地科技有限公司入驻华为云市场，在华为云市场发布了“耘镜系列”农业农村大数据产品体系，依托卫星遥感、AI技术优势，为农业互联网提供大数据的服务和运营，帮助省级农业政府部门、农业金融、中大型种植企业，解决了资产盘点、风险预警、智能决策三方面的问题。 【标签】华为云市场、云端大事件、卫星遥感、AI人工智能、农业大数据 北京佳格天地科技有限公司由归国的美国国家航空航天局（NASA）前科学家团队创立，是全球第一家将深度学习技术应用于气象和卫星遥感影像领域，并率先实现商业化应用的高科技创新企业，并且同华为公司在云计算、大数据等方面都有深入的合作。一、产品介绍 佳格利用中、美、欧十余颗多源的卫星数据，通过集合全方位的卫星遥感、无人机、物联网以及气象等大数据获取、存储、分析以及可视化模块，为用户带来稳定、高效、精准的农业大数据服务。同时，佳格还通过大数据分析帮助客户进行标准化生产，实现生产全称可追溯，助力食品安全，以大数据驱动中国农业从“看天吃饭”向“知天而作”转型升级。 二、产品功能 围绕农业的业务应用，佳格构建了“耘境系列”的产品体系，通过1+5的“耘境系列”产品体系，我们可以服务于农业的全产业链，形成农业大数据的数字链条。 “耘境知数”，这是佳格大数据的基础平台，包括大数据的采集、加工处理、数据建模分析、共享交换等。“耘境知天”，为农业标准化生产监测预警大数据平台。“耘境单品”，围绕依托区域的特色优势产业，构建的农业单品种大数据平台。“耘境知价”，围绕农产品价格，构建农产品价格大数据平台。“耘境知源”，围绕农产品质量安全，构建农产品质量安全监管与区块链溯源大数据平台。“耘境信价”，围绕生产经营主体信用，构建数据信用大数据平台。 三、产品应用于哪些行业 佳格所提供的农业大数据应用已服务全国超过 2 亿亩耕地，包括北方的主粮产区，也有南方经济作物种植园。服务范围涵盖省级农业管理部门、农业金融、中大型种植企业等客户，覆盖国内 20 多个省市地区，是中国领先的农业大数据服务提供商。佳格公司通过AI人工智能深度学习技术的优势，还可以跨行业为环保、林业、水利、城管、安监等相关客户提供高效率的时空数据服务和运营。四、产品能够解决什么问题 佳格为这些用户提供数据与基于数据的可视化资源盘点、智能决策和风险预警服务。五、产品的价值 佳格基于人工智能技术，成功将卫星遥感和人工智能成果应用于农业生产和农业金融方向，推出的“耘境”农业管理SaaS平台和“种客”手机端APP，帮助新型农业经营主体，更加精准地管理农业生产过程，大幅度实现增产增效，以及降低生产成本。为保险公司，提供标的管理、费率厘定，以及农险数据服务与支持。为银行等金融信贷公司提供土地风险评估服务。佳格人希望致力于为中国的智慧农业助力，为以大数据支撑的乡村振兴战略尽绵薄之力。

省首期华为认证物联网工程师培训在福州开班（记者 许琳晶 通讯员 孟祥君）7月2日上午,首期华为认证物联网工程师(HCIA-IoT)原厂培训在福州开班。本次培训由中国·福州物联网开放实验室、全国物联网人才培养基地联合主办,参加培训的学员主要来自于福州的物联网骨干企业、物联网技术应用典型企业,北京、上海、江西鹰潭等全国多地物联网企业也纷纷选派人员参训，此次培训时间共计5天。　　华为战略合作伙伴—中国·福州物联网开放实验室专为学员量身打造了HCIA-IoT华为原厂培训课程。福州市马尾区经济和信息化局局长何杰、中国·福州物联网开放实验室副总裁许明伟、华为福州办事处企业业务部副部长王玮出席了开班仪式,全国物联网人才培养基地副主任刘建芳主持了本次仪式。　　福州市马尾区经济和信息化局局长何杰表示,马尾区是国家级物联网产业示范基地,也是福建省物联网产业人才聚集基地和智能制造试点示范基地,肩负着国家发展物联网产业的重任。这次华为全球培训中心和福州物联网开放实验室强强联手,首次把原厂的培训资源落地福州,由华为原厂一线专职物联网师资授课,定制化课程设计,就是对马尾、对实验室最大的信任和支持。　　中国·福州物联网开放实验室副总裁许明伟表示,开放实验室致力于成为全球物联网行业标准的主导者以及物联网真实场景应用模拟的先行者,在构建物联网领域的顶层架构、突破物联网核心技术、服务国家重大需求和重点行业应用、培育物联网专业人才等方面做出卓越贡献,并为产业提供物联网“一站式”、“端到端”的解决方案。　　全国物联网人才培养基地副主任刘建芳表示,实验室和工信部共建全国物联网人才培养基地,以与产业融合、为产业升级转型服务为目标,围绕物联网、大数据、云计算等高新科技,培养专业开发人才、运维人才、经管人才,从初、中、高级三个层次帮助企业一站式建设专业人才梯队;与著名高校、机构、行业龙头企业保持密切合作,并通过行业赛事、智库建设、人力资源合作以及企业家交流&论坛活动等形式,形成国内最完善的物联网人才培养体系。　　本次培训由华为物联网课程开发及交付专家、华为物联网课程专职讲师程冠桥老师当面授课,程老师通过丰富的物联网应用案例,由浅入深的讲解了物联网的基础知识、常用的开发工具、典型产品与解决方案等内容,培养了学员们一定的物联网基础开发与运维能力。　　未来为期5天的华为原厂HCIA-IoT培训将包括物联网分层架构,物联网通信技术、物联网行业应用、物联网安全、IoT联接管理平台、OceanConnect业务流程、物联网操作系统、Huawei LiteOS开发软硬件环境、工业物联网关功能及应用、家庭物联网关功能及应用、NB-IoT技术、eLTE-IoT技术等内容。　　作为全国规模最大、设备最先进的物联网新技术实验室,中国·福州物联网开放实验室致力于为物联网生态建设服务,配备了与运营商现网一致的核心网测试环境、模块化的软硬件开发平台、丰富垂直应用项目真实案例、资深的端到端开发团队,为学员提供基于真实项目的端到端实践操作,从零开始系统化学习体验前期开发、测试全流程。　　华为作为全球领先的ICT解决方案供应商,凭借多年信息通信技术人才培养经验及对行业发展的深刻理解,推出业界唯一的覆盖ICT全技术领域认证体系及培训。根据IoT技术特点和客户多层次的需求,实验室后续将推出面向物联网、大数据、云计算、数据中心等方向的三级华为认证培训,以层次化认证满足ICT从业者的多样化需求。

【南京子频电子科技有限公司是一家从事互联网技术服务、软件开发及应用于一体的创新型高科技企业。公司秉承与科技共成长，与伙伴共成长，与员工共成长的发展理念，致力于打造移动互联时代的智慧出行新生态。南京子频发挥其在云计算、大数据、移动互联等方面的技术优势，深挖交通出行需求，创建全新的智慧交通生态圈，提供全方位出行服务解决方案。】很多车主驾车走高速公路时有时会遇到这类烦心事：在收费站口经常会经历排长队等候缴过路费，特别是在出行高峰期，在高速公路出入口经常出现长距离拥堵现象，甚至有时收费站会堵成大型停车场。这不仅增加了驾乘人员出行的时间成本，影响交通出行的获得感与幸福感，同时也一定程度不符合减能减排的绿色交通发展理念。如何解决高速收费站缴费耗时问题，以及打造通过不停车、缴费不排队的高效运营模式呢？华为与云战略合作伙伴南京子频电子科技有限公司（以下简称“子频电子”）强强联手，在华为云服务器、存储、网络、安全等丰富ICT产品平台基础上，双方发挥在云计算、大数据、移动互联等方面的技术优势，打造高速公路无感支付解决方案，研发发布“高速公路不停车无感支付系统”——“吉行宝”，创建全新的智慧交通生态圈。数字化转型将是市场发展的趋势，交通行业的数字化转型也已多维度展开。基于对行业数字化转型的深刻理解和思考，华为在坚持“平台+生态”战略基础上，进一步提出要做“平台的平台，生态的沃土”。华为携手子频电子发力高速公路无感支付解决方案，通过分享华为云服务器、存储、网络、安全等丰富ICT产品技术支撑，同时还将自身在云计算、大数据、物联网等方面的深厚积累能力充分分享给到合作伙伴子频电子，共同推动高速公路缴费平台的数字化转型。比如其中用到的数据安全方面，数据库上云的安全问题不仅是用户最关心的重点之一，也是华为尤为重视的能力之一。华为云构建了一体化的云上数据库安全方案，可同时提供攻击防范、数据脱敏、审计监控等防护。该产品基于反向代理机制，提供敏感数据发现、数据脱敏、数据库审计和防注入攻击等功能，真正实现从事前、事中到事后的全生命周期防护，保障云上数据库的安全。在此场景中，华为云切实保障“吉行宝”用户的数据安全。在交通运输部今年举行的5月份例行新闻发布会上，发言人在回答“无感支付”（一种手机支付方式）相关问题时就曾表示，手机支付是对高速公路联网收费ETC系统的有利补充，交通运输部对此持积极鼓励态度。所谓“无感支付”，是指车辆通过高速公路的时候，既不需要停车领卡，也不需要停车交费，只要通过手机绑定车牌号和行驶证信息，车辆上高速后，摄像头扫描车牌号并记录，下高速时车牌自动识别，系统完成扣费。其中就体现了华为云在网络、云计算和大数据方面的能力支持，部署在华为云上的“吉行宝”，通过多算法推举自学习车牌云端计算在100毫秒内迅速完成车牌拍摄、上传、云端多算法计算、回传给收费道口，从而实现不停车缴费、无感通行的良性运营目标。华为携手子频电子打造的部署在华为云上的“吉行宝”，作为国内首创路桥虚拟卡通行系统，采用“多模”车辆精准定位技术，实现了车辆在高速公路入出口的不停车无感通行。车主只需要下载“吉行宝”App，上传车辆照片和行驶证信息，并绑定信用卡，就可以在收费口实现免停车通行。该产品有效解决了高速公路传统收费系统在气候、车型、车况、车牌等产生的因素影响收费站通行效率的问题。而且“吉行宝”对高速公路投产改造成本低、部署和投入生产便捷，非常适合行业内进行大面积推广，让更多的出行者、公路营运管理单位收益。在今年5月份，“吉行宝”已在南京长江二桥收费站正式投入使用，目前南京二桥使用吉行宝通行数量量大约为1200辆/日，用户数量还在持续增长 。“吉行宝”是华为目前重点打造的行业沃土平台战略的一个缩影。华为希望将行业沃土平台打造一个先进技术的集大成者，包括行业使能平台、大数据、物联网大平台，在以往IT技术设施基础上，建立一个面向具体行业应用场景的云平台。该平台坚持开放、合作、共赢的行业发展理念，以云计算、大数据的基础为平台，构建新的生产流程，助力客户数字化转型成功。同时华为致力于以行业发展为己任来构建生态，驱动交通商业模式和运营模式创新，与各位合作伙伴同行共享未来数字化时代的红利。

OBSFileSystem封装对象存储，提供HDFS的FileSystem语义。OBSFileSystem 下载地址：https://github.com/huaweicloud/obsa-hdfs/tree/master/release环境搭建和配置指南 下载地址：https://github.com/huaweicloud/obsa-hdfs/blob/master/release/doc/%E5%AF%B9%E8%B1%A1%E5%AD%98%E5%82%A8%E6%9C%8D%E5%8A%A1OBSA-HDFS%E4%BD%BF%E7%94%A8%E6%8C%87%E5%8D%97.pdf