• [技术干货] 0业务中断!全国首个1000+大数据集群成功升级!
    8月4日,广东移动大数据平台再获重大突破,全国首个1000+大数据集群升级成功,打破传统离线升级方式迫使业务中断的桎梏,通过滚动升级完成了大数据平台的平滑演进,实现业务0中断,升级无感知,用户体验持续在线。此次升级意义重大,正式开启了广东移动大数据平台的融合时代,全面提升用户体验。广东移动大数据平台简介广东移动大数据平台自2016年建设以来,对内为省市各业务部门、对外为各行业提供大数据分析处理能力。大数据平台整体规模达到1500+节点、平台承载租户282个,日均处理21万+作业量,陆续完成了各个重大节假日(春节、国庆、70周年、灯光节等)的活动支撑与保障工作。广东移动大数据平台架构图伴随5G、互联网、AI的高速发展,数据种类和量级呈指数级增长,这对大数据平台分析处理的准确性与及时性提出了更高的要求,现网大数据平台在应对数据浪涌中逐渐显露疲态。为此,广东移动大数据平台的升级项目势在必行。项目升级面临巨大挑战广东移动大数据平台作为业界首个1000+节点的大数据生产集群平台,实现版本从V100R002C70跨版本升级6.5.1,面临着三大挑战:l  业界首次大集群跨版本升级:广东移动大数据平台升级工程是现网同类大数据局点中首个大集群跨版本升级改造工程。集群规模大,滚动升级时间周期长,业务应用多,需要根据不同业务的闲忙时间段,合理制定升级批次计划;升级工程计划制定无参考案例,现场根据前期调研、业务评估、测试验证后制定大集群的批次升级计划;l  集群规模大,服务组件多,方案复杂:三水大数据集群是广东移动大数据平台中规模最大的单集群,节点数达到1000+,同时提供多种组件服务和场景解决方案。多方案混合应用的集群的升级工程在技术上第一次商用场景下实施,多组件混合应用的业务场景多,对升级期间平台稳定性要求高;l  业务种类多,且不便不中断:广东移动大数据平台承载业务项目达200+,日处理业务量达21万+,月增长数据量接近1PB,日查询作业峰值达23W+;每天需运行关键业务,如对内精准营销、收入稽核,对外广告精准投放等;大量运行中的业务和关键业务在升级过程中不允许被中断。作为承载广东省大数据分析处理的核心平台,时刻存在关键业务的运作,传统大数据平台离线升级方式,对业务的顺利进行有着极大的制约。例如,新版本发布后,如果想使用特定的补丁版本,在安装/升级场景下,需要先升级到新版本后,再安装补丁;如此一来,不仅变更次数多,还需多次重启集群操作,变更操作难度高且效率低下,按当前平台规模采用离线方式升级,预计中断业务72小时以上。        全力应对,逐个攻破为保障大集群升级过程的平滑,广东移动携手华为云FusionInsight智能数据湖,端到端分步骤的完成滚动升级,实现升级过程中的可视化控制和管理。为应对上述挑战,此次升级主要进行了以下操作:l  在开源社区部分组件并不支持大版本滚动升级的背景下,我们解决了社区协议和元数据格式不相同、及API变化等导致的兼容性问题,实现了在滚动升级过程中,仍可继续使用未升级的软件设备进行业务处理的方法,降低大集群跨版本升级改造工程对现有业务的干扰影响;l  面对集群规模大、服务组件多、方案复杂的升级场景,为避免各种突发事件中断升级进程,我们提供了故障节点隔离能力。在故障发生时,可以跳过该节点的升级动作,使得故障处理和升级可以有序进行;l  为降低在升级过程中对关键任务SLA的影响,我们新增按升级批次进行暂停的能力,关键作业或者作业高峰时段,可以暂停升级动作,保障关键任务平稳执行。本次操作使得1000+大数据集群获得滚动升级,新的平台版本6.5.1,在平台组件内核版本升级的同时,提供了精细化指标监控、统一在线日志检索等功能,支持ARM生态以及ARM&X86混合部署(全球唯一)、计算存储分离方案、引入ZooKeeper防过载特性等,并做到了全面的优化提升。6.5.1版本平台架构组件版本变更提前部署,稳步推进l  前期准备,经过近半年的不断测试、预演、与100+个重要关键租户协调沟通项目后,确认升级改造工程实施方案;l  7月8日-7月23日,历时半个月,在0业务中断的情况下,顺利完成大数据平台的平滑升级,实现大数据技术及组件的最新版本更新;l  7月24日-8月3日,业务观察期内平台业务稳定无任何故障;l  8月4日,广东移动大数据Hadoop平台大版本升级宣告成功。广东移动站在了大数据技术前端,紧随社区技术的快速发展,大数据平台本次Hadoop版本由2.7.2版本直接升级到3.1.1版本,实现了一个升级无感知的融合大数据平台,大幅提升了用户体验。未来,广东移动将继续推进技术创新,助力大数据平台进一步更新迭代。华为将持续以客户为中心,为客户提供一站式,易使用,高可靠,可持续演进的FusionInsight融合大数据平台。        截至目前,华为云FusionInsight智能数据湖已是60+国家,3000+客户的共同选择,广泛应用于政府、金融、运营商、大企业、互联网等领域。面向未来,华为云联合800+合作伙伴,用智能数据湖帮助企业构建领先的数据基础平台,释放政企数据价值,让数据“慧”说话,使企业更智能。相关文章:再获殊荣!华为云Fusioninsight智能数据湖、GaussDB(DWS)数据仓库斩获业界两项大奖FusionInsight亮相华为云与计算城市峰会深圳站FusionInsight MRS 技术解读:单集群如何做到2万+规模华为云FusionInsight MRS融合大数据平台进阶之路华为云FusionInsight MRS通过信通院大数据能力评估 单集群突破2万+规模重磅发布!华为云EI智能数据湖FusionInsight 8.0 MRS 6月30日发布新特性,更快更安全,小伙伴们快来GET√+CarbonData,华为云EI智能数据湖FusionInsight让数据处理飞起来!华为云EI智能数据湖FusionInsight 成功助力10000+大数据集群滚动升级!华为云EI智能数据湖FusionInsight携手Kyligence助力保险业数字化转型!华为云EI智能数据湖FusionInsight MRS大数据在银行业的应用探索与典型案例进而有为!华为云EI智能数据湖FusionInsight亮相华为云与计算城市峰会南京站!直击痛点!华为云EI智能数据湖FusionInsight助力政企客户释放数据价值!
  • [生态对接] FusionInsight与第三方组件对接指导汇总贴
    ## 本帖收集所有涉及第三方工具对接的指导帖 ### 数据集成 ---- - [kettle对接FusionInsight Hetu](https://bbs.huaweicloud.com/forum/thread-67689-1-1.html) ### 数据可视化&分析 ---- - [永洪BI对接FusionInsight Hetu](https://bbs.huaweicloud.com/forum/thread-63680-1-1.html) - [KyligenceEnterprise 4.0对接FusionInsight 6.5.1](https://bbs.huaweicloud.com/forum/thread-63255-1-1.html) - [tableau对接HetuEngine指导](https://bbs.huaweicloud.com/forum/thread-93050-1-1.html) ### 集成开发环境 ---- - [DBeaver对接FusionInsight Hive](https://bbs.huaweicloud.com/forum/thread-66023-1-1.html) - [DBeaver对接FusionInsight Hetu](https://bbs.huaweicloud.com/forum/thread-63172-1-1.html) - [JupyterNotebook对接FusionInsight HDFS](https://bbs.huaweicloud.com/forum/thread-65639-1-1.html) - [JupyterNotebook对接FusionInsight Hive](https://bbs.huaweicloud.com/forum/thread-65636-1-1.html) - [JupyterNobetook安装以及对接FusionInsight Spark2x组件](https://bbs.huaweicloud.com/forum/thread-65634-1-1.html) ### 其他 ---- - [Apache Beam对接FusionInsight Spark](https://bbs.huaweicloud.com/forum/thread-68236-1-1.html) - [Filebeat对接FusionInsight Elasticsearch](https://bbs.huaweicloud.com/forum/thread-67507-1-1.html) - [Logstash对接FusionInsight Elasticsearch](https://bbs.huaweicloud.com/forum/thread-67504-1-1.html) - [Kibana对接FusionInsight Elasticsearch](https://bbs.huaweicloud.com/forum/thread-66788-1-1.html) - [Cerebro对接FusionInsight Elasticsearch](https://bbs.huaweicloud.com/forum/thread-68719-1-1.html) - [第三方AD服务对接FusionInsight](https://bbs.huaweicloud.com/forum/thread-63306-1-1.html) ### FusionInsight生态对接问题解决三板斧 ---- ## Kerberos认证相关问题总结 - [生态对接常见问题总结之Kerberos篇(一)](https://bbs.huaweicloud.com/forum/thread-86710-1-1.html) - [生态对接常见问题总结之Kerberos篇(二)](https://bbs.huaweicloud.com/forum/thread-86713-1-1.html) - [生态对接常见问题总结之Kerberos篇(三)](https://bbs.huaweicloud.com/forum/thread-86748-1-1.html) - [生态对接常见问题总结之Kerberos篇(四)](https://bbs.huaweicloud.com/forum/thread-86751-1-1.html) ## 集群配置相关问题总结 - [生态对接常见问题总结之集群配置篇(一)](https://bbs.huaweicloud.com/forum/thread-86753-1-1.html) - [生态对接常见问题总结之集群配置篇(二)](https://bbs.huaweicloud.com/forum/thread-86754-1-1.html) - [生态对接常见问题总结之集群配置篇(三)](https://bbs.huaweicloud.com/forum/thread-86756-1-1.html)
  • [行业动态] FusionInsight亮相华为云与计算城市峰会深圳站
            7月28日,“深圳·进而有为 华为云与计算城市峰会2020”在深圳鹏瑞莱佛士酒店举行。深圳市人民政府领导、华为公司领导及企业代表和行业专家共同就发力新基建,培育新产业,构建智慧深圳等议题展开深入研讨。FusionInsight在近年来深入理解招商局、深交所、平安银行、深圳机场、深圳地铁、深圳万科等头部客户对大数据+人工智能的需求,助力深圳客户数字化转型,让数据“慧”说话,使政企客户业务场景更智能。华为公司高级副总裁、云与计算BG总裁侯金龙做峰会演讲        峰会现场设置了大面积展区,供与会者亲自体验华为的最新技术应用,感受科技的魅力。作为向上承接丰富应用,向下承载海量数据的大数据平台,华为云EI智能数据湖FusionInsight亮相峰会,吸引众多与会观众交流讨论!        如今,新基建浪潮袭来,5G、大数据、物联网等新一代信息技术高速发展,面对政企数字化转型带来的机遇和挑战,华为云 FusionInsight智能数据湖为业界提供了全融合、智能化、云化的湖仓一体解决方案。方案包含MRS大数据、DWS数据仓库、CSS云搜索、GES图计算、DAYU数据运营等云服务;支持大数据离线分析、实时流处理、实时检索、交互查询等常见大数据使用场景,为政府、金融、运营商、大企业等政企客户,提供建得快、存得省、用得好的智能数据湖,从海量数据中发掘数据价值,加速政企智能升级。华为云FusionInsight助力政企数字化转型一、化繁为简 建设大数据中心        企业高速发展,业务诉求随之增多,为满足不断增长的需求,大数据中心的资源扩容刻不容缓。传统大数据中心建设涉及诸多复杂繁琐的人为操作部署,费时费力且跟不上业务多变的需求。        FusionInsight实现大数据全面云化,支持资源的弹性发放,可根据业务需求自动调整资源分配的配置和策略,资源申请周期也从原来的22天缩短至1小时,轻松应对业务浪涌,简化了大数据中心建设的步骤,保障了业务的稳定高效运作,实现了大数据中心的快速建设。        同时, FusionInsight支持多集群统一运维,1000+的精细化运维指标,实时掌握集群运行状况,5分钟快速响应,问题定位提效30%,使得运维效率和能力大幅提升。二、存算分离 让数据每比特性价比最优        随着5G、IoT、AI的高速发展导致数据量的暴增,传统大数据中心使用原生Hadoop架构存储数据,1:3的备份方式,存储与计算耦合,扩容后易导致存储利用率高、CPU利用率低,造成资源浪费。加之系统建设烟囱林立,数据冗余现象严重,使得存储成本居高不下。        FusionInsight采用OBS存算分离技术替代Hadoop传统的本地HDFS存储,计算存储按需独立扩容。结合华为企业级EC技术将副本率降低至1:1.09,存储资源利用率由传统的33%提升至91%,数据存储周期提升2倍+,TCO下降30%,极大的降低了数据存储成本,让数据每比特性价比最优。三、算以致用 释放数据价值        大数据技术涉及的组件繁杂,需要专业的技术开发人员和运维人员进行开发和维护。很多大数据中心低水平运营,数据使用杂乱无章,无法跨源跨域协同分析,导致资源无法充分发挥价值,造成了数据中心资源的浪费。加上运维人才的短缺、运维能力跟不上数据中心建设速度,使得数据中心持续发展面临着严峻的挑战。        FusionInsight采用湖仓一体技术,把批量处理、实时处理、交互查询、实时查询等20+大数据分析技术统一资源池,结合HetuEngine引擎,实现一个接口、一个目录、一份数据,解决政企客户的取数难、找数难、用数难问题,分析提效2-10倍,助力政企释放数据价值,加速数字化转型。        行稳致远,进而有为。在新基建加速落地的智慧城市建设时代,华为云FusionInsight将继续大数据技术的创新,通过企业级的融合大数据平台,实现全部业务场景一站式解决方案,让数据有温度、用科技促发展,打造数字基础设施的黑土地,携手合作伙伴赋能千行百业。        十多年来FusionInsight 致力于为全球60+国家地区、3000+政企客户构建企业级智能数据湖,结合平台+生态战略,与800+商业合作伙伴 ,广泛应用于金融、运营商、政府、能源、医疗、制造、交通等多个行业,在政企数字化转型中,释放数据价值,助力政企客户业务高速增长。相关文章:FusionInsight MRS 技术解读:单集群如何做到2万+规模华为云FusionInsight MRS融合大数据平台进阶之路华为云FusionInsight MRS通过信通院大数据能力评估 单集群突破2万+规模重磅发布!华为云EI智能数据湖FusionInsight 8.0 MRS 6月30日发布新特性,更快更安全,小伙伴们快来GET√+CarbonData,华为云EI智能数据湖FusionInsight让数据处理飞起来!华为云EI智能数据湖FusionInsight 成功助力10000+大数据集群滚动升级!华为云EI智能数据湖FusionInsight携手Kyligence助力保险业数字化转型!华为云EI智能数据湖FusionInsight MRS大数据在银行业的应用探索与典型案例进而有为!华为云EI智能数据湖FusionInsight亮相华为云与计算城市峰会南京站!直击痛点!华为云EI智能数据湖FusionInsight助力政企客户释放数据价值!
  • [生态对接] FusionInsight Elasticsearch对接Kibana
    ## 对接场景 Kibana提供了图形化操作界面,通过可视化界面对Elasticsearch进行索引构建、查询、分析等操作。 本指导适用FusionInsight HD 6.5.1版本 ## 前提条件 已下载安装Kibana。 - 下载Kibana安装包“kibana-oss-6.7.1-linux-x86_64.tar.gz”并上传至任意EsMaster实例所在节点,例如`/opt`目录下。 开源社区下载地址:https://www.elastic.co/cn/downloads/past-releases/kibana-oss-6-7-1。 - 解压安装包,并进入对应解压目录。 ``` cd /opt tar -zxvf kibana-oss-6.7.1-linux-x86_64.tar.gz cd kibana-6.7.1-linux-x86_64/ ``` > - 使用Dev Tools功能的用户,需要在elasticsearch组内。 > - 使用其他功能的用户,需要在supergroup组内。 ## 操作步骤 修改配置并启动Kibana。 - 如果当前系统为TaiShan服务器,需要下载Nodejs的ARM版本替换kibana解压目录下的node目录 下载node-v10.15.2-linux-arm64.tar.gz,解压后替换kibana-6.7.1-linux-x86_64下的node。下载地址:https://nodejs.org/dist/v10.15.2/ ``` tar -zxvf node-v10.15.2-linux-arm64.tar.gz -C /opt rm -rf /opt/kibana-6.7.1-linux-x86_64/node/* mv /opt/node-v10.15.2-linux-arm64/* /opt/kibana-6.7.1-linux-x86_64/node/ ``` - 修改`config/kibana.yml`配置,示例如下: ``` #Kibana在Elasticsearch中使用的索引名称。 #若需要启动多个Kibana,请确保不同用户的该配置项内容不重复。 kibana.index: ".kibana" #Kibana服务端口。 server.port: 5601 #当前节点ip,默认localhost。 server.host: "10.1.1.1" #需要访问的Elasticsearch节点IP及端口号,建议配置EsNode1实例的IP和端口号。普通模式下,请将https修改为http。 elasticsearch.hosts: ["https://10.1.1.1:24100"] #直接填写none即可。 elasticsearch.ssl.verificationMode: none #修改xxxxxx为“用户名:密码”的base64转码结果;普通模式不需要此项配置。 elasticsearch.customHeaders: {"custom-proxy-username":"xxxxxx"} #Kibana日志目录,根据实际场景自定义即可,请提前手动创建该文件。 logging.dest: /opt/kibana-6.7.1-linux-x86_64/log/kibana.log #Kibana健康检查周期,请根据实际使用场景合理填写,单位ms。 elasticsearch.healthCheck.delay: 60000 ``` > - elasticsearch.hosts禁止配置EsMaster节点的IP和Port。EsMaster实例为重要的管理进程,为确保Elasticsearch集群稳定性,不允许配置EsMaster节点IP和Port。 > - 因部分java库仍遵循RFC的Base64规定,在进行加密时会增加换行符,请保证elasticsearch.customHeaders配置项中的信息无换行符。 > - 可下载Elasticsearch客户端,导入RestClient二次开发样例,使用com.huawei.fusioninsight.elasticsearch.example.util.Base64Utils工具类进行Base64加密。 > - 请确保Base64转码结果在填写时,只替换“xxxxxx”部分。 例如,当前用户名为test,密码为123,“test:123”转base64后为“dGVzdDoxMjM=”,则配置项填写为:elasticsearch.customHeaders: {"custom-proxy-username":"dGVzdDoxMjM="} - 使用命令`./bin/kibana`启动Kibana > 如需后台运行,可执行如下命令`nohup ./bin/kibana &`启动Kibana: - 查看Kibana日志,确认启动成功后,登录Kibana界面。 在配置的Kibana日志文件中,找到如下类似日志,即表明Kibana已经启动成功,在浏览器输入日志中打印的链接即可,如http://10.1.1.1:5601。 ``` "type":"log","@timestamp":"2019-06-07T07:07:32Z","tags":["status","plugin:elasticsearch@6.7.1","info"],"pid":44252,"state":"green","message":"Status changed from yellow to green - Ready","prevState":"yellow","prevMsg":"Waiting for Elasticsearch"} {"type":"log","@timestamp":"2019-06-07T07:07:32Z","tags":["listening","info"],"pid":44252,"message":"Server running at http://10.1.1.1:5601"} ``` > - create index pattern等操作,Kibana会创建相关索引,默认为".kibana"开头。 > - Kibana会根据健康检查状态进行信息反馈,如果在healthCheck周期内,信息发生变化(例如切换登录用户),可能需要等到下一次healthCheck的反馈结果才会生效;同时,健康检查会发送多个http请求到Elasticsearch,为防止增加Elasticsearch集群的压力,请根据使用场景,合理配置kibana.yml中的健康检查周期,即参数elasticsearch.healthCheck.delay。
  • 华为云FusionInsight系列文章
    奖项荣誉领跑中国大数据平台市场,华为云再获第一(华为云官微)cid:link_116华为云FusionInsight位居中国数字政府大数据市场第一(华为云官网)cid:link_20四获权威机构认可!华为云持续领跑政务大数据领域(IT168)cid:link_149华为云FusionInsight三次蝉联中国大数据市场第一(华为云官微)cid:link_117 华为云FusionInsight连续三次获得第一 加速释放数据要素价值http://ex.chinadaily.com.cn/exchange/partners/82/rss/channel/cn/columns/j3u3t6/stories/WS61f11154a3107be497a0410b.html(中国日报网)cid:link_174 (搜狐网)华为云再次位居中国政务大数据市场领导者位置https://mp.weixin.qq.com/s/03sf-oiSA8A2OU_w_3mUiw (华为云官微)大数据平台,第一!cid:link_118 (华为云官微)华为云位居IDC中国大数据平台市场研究报告第一cid:link_21  (CSDN)华为云再次位居IDC MarketScape 中国大数据管理平台领导者象限,市场份额和技术实力维度双领先!cid:link_32巨头激烈竞逐大数据,“差异化”如何成就华为云的领导者地位(科技向令说)https://baijiahao.baidu.com/s?id=1682516174333252035强者恒强,华为云是如何走出自己的硬核大数据之路?(天极网)https://baijiahao.baidu.com/s?id=1682422802041458052   你要的真相来了!IDC报告指点中国大数据江山,华为云何以独占鳌头?(云报)cid:link_119创新、成长、基础能力全面领先,华为云领跑中国大数据厂商cid:link_143(华为云头条)https://baijiahao.baidu.com/s?id=1699456220819177122&wfr=spider&for=pc(人民网)cid:link_33(视频证言)主流大数据厂商激烈角逐湖仓一体新架构,华为云引领技术潮流cid:link_120(InfoQ)数据战略高地,华为云FusionInsight再次领跑cid:link_34cid:link_22(CSDN)政务专区华为斩获2021中国领军智慧政务解决方案提供商大奖(华为数字中国官微)cid:link_121 1.19亿,软通智慧联合华为中标北京市社保卡项目,助力“互联网+人社”政务服务!cid:link_178 刚刚!十堰与华为签署战略合作协议!cid:link_122 27 亿!华为中标东莞“数字政府”cid:link_123华为北京总经理:“数”领新征程,助力打造数字北京名片cid:link_124深圳龙岗城市大脑:基层治理重器,让城市更聪明cid:link_107 9428万元,华为中标吉安市智慧城市二期(城市大脑)项目cid:link_125北京市西城区与华为签署战略合作协议 共同推动“数字孪生城市”建设https://baijiahao.baidu.com/s?id=1697645026731253420&wfr=spider&for=pc福州市与华为签署深化战略合作协议,持续推进建设“数字应用第一城”https://baijiahao.baidu.com/s?id=1698000099928529071&wfr=spider&for=pc恭喜!大数据“星河”标杆案例奖+1cid:link_126· 华为云FusionInsight湖仓一体助力威海市商业银行荣膺2022大数据“星河”标杆案例奖华为助力交通银行荣膺《亚洲银行家》“最佳大数据应用奖”https://mp.weixin.qq.com/s/zXyyhBSoDXKnghQuH_0Rhg数博会拍了拍我们,恭喜获奖cid:link_129 (华为云官微)· 华为云FusionInsight MRS IoTDB获2022数博会领先科技成果——优秀项目奖2021中国大数据企业50强重磅发布,华为云大数据连续六年入选榜单cid:link_158 cid:link_23 (CSDN)· 华为获2021中国大数据企业50强“民生信用卡-华为大数据联合创新实验室”荣获亚洲银行家“中国最佳AI创新实室”奖cid:link_130(微信公众号)cid:link_35 华为云FusionInsight智能数据湖获2021中国大数据最佳解决方案奖cid:link_144  (头条)· 华为云FusionInsight智能数据湖获“2021中国大数据平台最佳解决方案”奖华为云斩获第七届中国国际大数据大会两项大奖cid:link_108· 华为云FusionInsight MRS云原生数据湖获“2020年度大数据行业优秀解决方案”奖华为云FusionInsight MRS全面升级,斩获金融行业大数据最佳解决方案奖cid:link_59 https://www.toutiao.com/i6904920539622539784/#tt_daymode=1&tt_font=m(头条)· 华为云FusionInsight MRS云原生数据湖获“金融行业大数据最佳解决方案”奖华为云大数据创新普惠,释放海量数据价值,获2020中国大数据最佳解决方案奖cid:link_24(CSDN)cid:link_60 · 华为云FusionInsight智能数据湖获“2020中国大数据平台最佳解决方案”奖· 华为云DWS获“2020中国大数据数据仓库领域最佳产品”奖· 华为云DAYU数据运营获“2020中国大数据数据治理领域最佳产品”奖2020中国大数据企业50强重磅发布,华为云大数据连续四年荣登榜首cid:link_131(华为云官微)cid:link_61 · 华为获2020中国大数据企业50强再获殊荣!华为云Fusioninsight智能数据湖、DWS数据仓库斩获业界两项大奖https://tech.china.com/article/20200730/072020_570371.html(中华网)cid:link_62 · 华为云FusionInsight智能数据湖获“2020中国信息通信大数据行业影响力奖”· 华为云数据仓库DWS获“2020中国信息通信大数据创新方案奖”华为云FusionInsight MRS通过信通院大数据能力评估 单集群突破2万+规模cid:link_25(CSDN)cid:link_63 视频专区招商银行&红柳林用数实践cid:link_132 华为云FusionInsight智能数据湖打造千行百业数据底座cid:link_31 视频证言:华为云位居中国数据管理解决方案领导者位置cid:link_1中国工商银行:金融数据创新应用实践cid:link_150  广东移动:运营商大数据创新应用实践cid:link_151 清华大学:产学研深度融合,培养大数据顶尖技术人才cid:link_152  华为FusionInsight广东移动大数据案例cid:link_2   华为FusionInsight助力招商银行发现大数据的价值cid:link_5   青海绿能数据:绿色科技守护和谐生态cid:link_3   青海绿能数据有限公司总经理采访cid:link_4    技术解读视频华为云FusionInsight携手国家级大数据实验室,探索时序数据库IoTDBcid:link_14 金融行业智能数据湖创新与探索cid:link_109华为云FusionInsight MRS,一个架构实现三种数据湖https://www.huaweicloud.com/about/techwave_cloudnative_2_0.html千级节点的大数据集群如何无业务中断升级?cid:link_110跨源、跨域场景下如何实现海量数据分钟级分析?cid:link_111大数据技术普惠创新,释放千行百业数据价值cid:link_153 华为云FusionInsight引领全球大数据技术发展cid:link_154 DWS,新一代全场景云数据仓库cid:link_155 CarbonData,释放海量数据价值,尽享数据湖之美cid:link_156  硬核技术解读现代数据栈构建要选对路,才能上“高速”https://www.toutiao.com/article/7208081476032659968/现代数据平台要实现自助用数还要解决的三大问题cid:link_159工业数据分析为什么要用FusionInsight MRS IoTDB?cid:link_160实时数据湖表存储设计方法(基于Hudi表)cid:link_161华为云FusionInsight MRS基于Apache IoTDB打造时序数据库引擎cid:link_162FusionInsight MRS RTD 实时决策引擎在医保行业实践cid:link_163华为云基于 Apache Hudi 极致查询优化的探索实践!cid:link_164【大架光临】第7期:湖仓一体天花板,大数据一站式SQL分析技术实践cid:link_165 华为MRS基于Hudi和HetuEngine构建实时数据湖最佳实践cid:link_166 基于MRS-Hudi构建数据湖的典型应用场景介绍cid:link_167华为FusionInsight MRS实战 - Hudi实时入湖之DeltaStreamer工具最佳实践cid:link_36 (CSDN)cid:link_168 华为云FusionInsight携手国家级大数据实验室,探索时序数据库IoTDBcid:link_169华为云FusionInsight MRS容灾:大数据两地三中心的容灾也可以如此省心cid:link_170 MRS CDL架构设计与实现cid:link_171深度解读MRS IoTDB时序数据库的整体架构设计与实现cid:link_37 (CSDN)cid:link_172 华为云FusionInsight MRS如何实现千余节点滚动升级无业务中断升级cid:link_38cid:link_26(CSDN)华为云FusionInsight MRS跨湖跨仓场景下如何实现海量数据分钟级分析cid:link_39cid:link_27(CSDN)华为云FusionInsight与世界同行,持续创新,引领大数据技术发展cid:link_64  ClickHouse如何成为OLAP开源引擎的黑马?cid:link_65  华为云FusionInsight湖仓一体解决方案的前世今生cid:link_66    华为云FusionInsight MRS打造技术领先、越用越快、越用越省、越用越易、越用越稳的数据湖cid:link_67  HC2020:华为云FusionInsight携手生态伙伴,共创行业新价值cid:link_68 新一代智能数据湖华为云FusionInsight,用数据驱动业务增长新动能cid:link_69华为云FusionInsight引领全球大数据技术发展cid:link_70华为云TechWave大数据专题日,CarbonData释放海量数据价值cid:link_71 从比特到信息 华为云DAYU使能行业数据价值释放cid:link_72 华为云FusionInsight MRS融合大数据平台进阶之路cid:link_73 FusionInsight MRS 技术解读:单集群如何做到2万+规模cid:link_74 重磅发布!FusionInsight 8.0 MRS新特性,更快更安全,小伙伴们快来GET√cid:link_75 +CarbonData,华为云智能数据湖让数据处理飞起来!cid:link_76 Spark 3.0.0 is comingcid:link_77 FusionInsight大数据存算分离,使客户每比特成本最优cid:link_78 (2019)FusionInsight,一个融合的大数据平台cid:link_175 最新资讯报道一片数据湖,蕴藏多少智慧生机?cid:link_133华为云FusionInsight助力客户全面演进到现代数据栈 云领未来cid:link_115清华大学携手华为云FusionInsight探索软件创新体系之路cid:link_15永洪BI携手华为云FusionInsight,让数据分析更敏捷cid:link_134华为全联接2021:华为云FusionInsight智能数据湖观影一览cid:link_16HC2021揭秘华为云FusionInsight智能数据湖 8.1.0 版本新能力cid:link_17 华傲数据携手华为云FusionInsight打造政务“三算一景”方案,加速释放“数字红利”cid:link_18 东华博泰携手华为云FusionInsight发布能源大数据的解决方案cid:link_19 华为云提出 “DIGITS”理念,最大化释放数据要素价值cid:link_135 (InfoQ)华为云FusionInsight智能数据湖加速政企数字化转型cid:link_40重磅!AI&数据系列新品发布,加速千行百业智能升级cid:link_136 (华为云)让数据成为新的生产要素,解读华为云数据领域最新进展与布局cid:link_137 (公众号)再推数据、AI新品,华为云又有哪些能力升级?cid:link_138 (InfoQ)中国信通院发布《2021大数据十大关键词》https://city.huanqiu.com/article/43fZj0e0By4(环球网)cid:link_416月18日,华为云FusionInsight MRS云原生数据湖为你解密如何提升大数据分析时效性cid:link_42华为云FusionInsight湖仓一体,加速金融行业数字化转型升级cid:link_145(头条)cid:link_43AI与数据双轮驱动金融业务创新,构建全场景智慧金融cid:link_146(头条)华为云数据使能,加速金融数据资产化cid:link_147(头条)一架构三湖,解密华为云FusionInsight MRS组件新特性cid:link_44华为云FusionInsight MRS云原生数据湖携合作伙伴共建繁荣生态cid:link_45cid:link_106业界领先的FusionInsight MRS湖仓一体方案,如何用1个架构实现3种数据湖?5月20日华为云带你一起解密cid:link_46https://baijiahao.baidu.com/s?id=1699550446141551411&wfr=spider&for=pcHDC.Cloud2021 | 一文回顾华为云FusionInsight MRS云原生数据湖亮点cid:link_47cid:link_28华为云TechWave全球技术峰会成功召开,数据使能,驱动业务增长cid:link_139  cid:link_48 华为云TechWave数据使能分论坛,“鹏城论数”邀您来cid:link_140  cid:link_49 业务0中断,金融行业首个1000+大数据集群滚动升级成功cid:link_50云原生2.0,华为云FusionInsight智能数据湖构建坚实数据底座cid:link_79华为云FusionInsight MRS云原生数据湖直击传统大数据三大痛点,赋能新云原生企业cid:link_80华为云TechWave云原生2.0数据服务分论坛,精彩内容抢先知!cid:link_81华为参与编制的《信息技术 大数据 系统运维和管理功能要求》国家标准正式实施cid:link_82  华为云FusionInsight亮相高交会 三大硬核能力成就最懂行的大数据领导者cid:link_83  精彩不断,好礼不停!尽在华为云FusionInsight高交会展台!cid:link_84  问卷抽奖,好礼不断。我为华为云FusionInsight打Call!cid:link_85华为云FusionInsight领跑中国大数据管理平台头部厂商cid:link_86  HC2020精彩回顾,华为云FusionInsight智能数据湖点亮数据未来cid:link_87 请保持清醒:开源是和世界同步的绝佳机会cid:link_88 Flink 1.11:更好用的流批一体 SQL 引擎cid:link_89 华为云FusionInsight大数据技术普惠创新,释放千行百业数据价值cid:link_90 华为云TechWave大数据专题日独家播报cid:link_141  华为云TechWave大数据专题日,清华大学王建民院长畅谈大数据顶尖人才培养之道cid:link_91 亮点抢先看,华为云 TechWave 大数据专题日有啥料?cid:link_92 有奖观影:华为云TechWave大数据专题日好礼不断cid:link_93 FusionInsight亮相华为云与计算城市峰会深圳站cid:link_94 进而有为!华为云EI智能数据湖FusionInsight亮相华为云与计算城市峰会南京站cid:link_95 重磅发布!Apache CarbonData 2.0线上发布会,6月3日见!cid:link_96 2020年华为FusionInsight大数据开启渠道与伙伴线上赋能cid:link_97 实操案例分析金融上千节点无中断升级,华为云FusionInsight是如何做到的?cid:link_113(华为云头条)cid:link_51交通银行携手华为云FusionInsight,加速建设数字化新交行cid:link_52工商银行携手华为云FusionInsight共建大数据体系cid:link_53  数字化转型提升太平洋保险风险治理能力cid:link_54  华为云FusionInsight MRS在金融行业存算分离的实践cid:link_157  (51CTO)cid:link_55 (CSDN)cid:link_56 华为云FusionInsight助力宇宙行打造金融数据湖新标杆cid:link_29(CSDN)cid:link_57 华为云FusionInsight MRS金融行业首个1000+大集群滚动升级成功cid:link_30(CSDN)cid:link_58 华为云TechWave大数据专题日,解密金融业为何“偏爱”华为云?cid:link_98 招商银行借助华为FusionInsight变革金融服务cid:link_173 华为云FusionInsight携手Kyligence助力保险业数字化转型cid:link_99 大数据在银行业的应用探索与典型案例cid:link_100 (2018)上交所大数据平台建设 华为FusionInsight解决方案功不可没cid:link_177 运营商华为云FusionInsight助力广东移动利用大数据技术应对5G数据浪涌,释放海量数据价值cid:link_101 0业务中断!全国首个1000+大数据集群成功升级!cid:link_102 浙江移动携手华为FusionInsight打造0业务中断的融合大数据平台cid:link_103 大企业城轨信息化优秀案例分享 | 深圳地铁数字地铁项目cid:link_142 智慧民航先行者!华为为民航运行中枢装上“智慧大脑” cid:link_176 华为云FusionInsight+永洪BI共建政企用数之道,普惠千行百业cid:link_148  深圳地铁6号线、10号线采用华为城轨云,以实现5G覆盖cid:link_114 华为与中国铁路西安局合作开发首台“5G+AI智慧机务系统”正式投用https://baijiahao.baidu.com/s?id=1643810563228081483&wfr=spider&for=pc 华为云EI智能数据湖FusionInsight 成功助力10000+大数据集群滚动升级!cid:link_104 HDC期间华为云FusionInsight提供HetuEngine展点直播以及合作伙伴华傲数据线上展点cid:link_105 
  • [赋能学习] 华为云FusionInsight学习视频
    免费视频在线教学,从概述到细节让你充分了解FusionsInsight零基础入门FusionInsight Hadoop系列视频https://bbs.huaweicloud.com/forum/thread-94451-1-1.html 大数据进阶之路,华为云FusionInsight MRS二次开发训练营视频直播https://bbs.huaweicloud.com/forum/thread-93320-1-1.html 华为云大数据FusionInsight MRS邀您来学培训视频及课件宝典https://bbs.huaweicloud.com/forum/thread-90936-1-1.htmlFusionInsight MRS关键价值解读https://bbs.huaweicloud.com/videos/103242FusionInsight MRS关键技术解读(一)https://bbs.huaweicloud.com/videos/103208FusionInsight MRS关键技术解读(二)https://bbs.huaweicloud.com/videos/103209FusionInsight MRS关键场景解读(一)https://bbs.huaweicloud.com/videos/103211FusionInsight MRS关键场景解读(二)https://bbs.huaweicloud.com/videos/103210FusionInsight MRS关键特性carbondatahttps://bbs.huaweicloud.com/videos/103212FusionInsight MRS关键特性HetuEnginehttps://bbs.huaweicloud.com/videos/103213FusionInsight MRS关键特性Rangerhttps://bbs.huaweicloud.com/videos/103215FusionInsight MRS关键特性多租户https://bbs.huaweicloud.com/videos/103216FusionInsight MRS关键特性managerhttps://bbs.huaweicloud.com/videos/103217FusionInsight MRS二次开发https://bbs.huaweicloud.com/videos/103219FusionInsight MRS技术生态https://bbs.huaweicloud.com/videos/103218FusionInsight MRS运维HDFS/Hive问题定位解决https://bbs.huaweicloud.com/videos/103220FusionInsight MRS运维HBase/Spark问题定位解决https://bbs.huaweicloud.com/videos/103222FusionInsight MRS运维ES问题定位解决https://bbs.huaweicloud.com/videos/103221FusionInsight MRS规划部署实https://bbs.huaweicloud.com/videos/103223FusionInsight MRS巡检升级补丁https://bbs.huaweicloud.com/videos/103224华为大学大数据相关在线视频课程https://ilearningx.huawei.com/portal/courses?q=%E5%A4%A7%E6%95%B0%E6%8D%AE
  • [活动分享] FusionInsight 在腾讯云机器部署出现问题
    FusionInsight 在腾讯云机器部署出现问题,有没有经验的人搞过?
  • FusionInsight源报404错误
    FusionInsight源什么也没有,报404错误
总条数:203 到第
上滑加载中