- 通过配置集群参数以便支持在phoenix中支持使用自定义函数,涉及产品授权暂时不上传已经开发的jar包文件。 通过配置集群参数以便支持在phoenix中支持使用自定义函数,涉及产品授权暂时不上传已经开发的jar包文件。
- HDFS上数据的安全风险一般情况下要访问HDFS中的文件,需要经过Kerberos认证确认是大数据平台的合法用户,在经过HDFS服务端鉴权,确定用户具有相应文件的权限,才允许操作。 但是从整个IT系统层面看,OS和硬件这两个攻击面可以绕过HDFS的权限控制,非法获取到HDFS中的文件。比如当系统或硬件出现故障需要进行维护修复的时候,节点或者硬盘有可能进入系统管理员的管理范围之外,这时... HDFS上数据的安全风险一般情况下要访问HDFS中的文件,需要经过Kerberos认证确认是大数据平台的合法用户,在经过HDFS服务端鉴权,确定用户具有相应文件的权限,才允许操作。 但是从整个IT系统层面看,OS和硬件这两个攻击面可以绕过HDFS的权限控制,非法获取到HDFS中的文件。比如当系统或硬件出现故障需要进行维护修复的时候,节点或者硬盘有可能进入系统管理员的管理范围之外,这时...
- 近期,华为云FusionInsight MRS成功突破单集群2万+节点,刷新业内记录。超大规模单集群彻底解决了多系统烟囱林立的局面,消除数据孤岛,减少数据冗余,还能为数据分析的时效性提供保障,加速数据价值变现。 近期,华为云FusionInsight MRS成功突破单集群2万+节点,刷新业内记录。超大规模单集群彻底解决了多系统烟囱林立的局面,消除数据孤岛,减少数据冗余,还能为数据分析的时效性提供保障,加速数据价值变现。
- 浙江移动携手华为FusionInsight打造0业务中断的融合大数据平台 数字经济时代,运营商面临产业升级。浙江移动以数据为驱动,以华为FusionInsight融合大数据平台为底座,打造一站式智慧运营平台,拓展新的产业空间。对内,实现智慧运营(精准营销,客流分析,客流分析,自动运维…),降低运营成本,优化客户体验;对外,发展产业生态,打造多元服务(商铺选址, 交通规划, 广... 浙江移动携手华为FusionInsight打造0业务中断的融合大数据平台 数字经济时代,运营商面临产业升级。浙江移动以数据为驱动,以华为FusionInsight融合大数据平台为底座,打造一站式智慧运营平台,拓展新的产业空间。对内,实现智慧运营(精准营销,客流分析,客流分析,自动运维…),降低运营成本,优化客户体验;对外,发展产业生态,打造多元服务(商铺选址, 交通规划, 广...
- 博客内容 通过本博客,您将了解到以下内容: 1.如何查看并处理告警。 2.如何配置告警阈值。 3.如何查看事件。 博客内容 通过本博客,您将了解到以下内容: 1.如何查看并处理告警。 2.如何配置告警阈值。 3.如何查看事件。
- 客户需求:使用自定义扩展的similarity class,让关键字出现的频率对搜索得分的影响为0,即关键字出现的频率不影响得分。1.编写SolrSimilarity类,并打包SolrSimilarity-1.0-SNAPSHOT.jar2. 将SolrSimilarity-1.0-SNAPSHOT.jar拷贝到每个solr所安装的机器的/opt/huawei/Bigdata/FusionI... 客户需求:使用自定义扩展的similarity class,让关键字出现的频率对搜索得分的影响为0,即关键字出现的频率不影响得分。1.编写SolrSimilarity类,并打包SolrSimilarity-1.0-SNAPSHOT.jar2. 将SolrSimilarity-1.0-SNAPSHOT.jar拷贝到每个solr所安装的机器的/opt/huawei/Bigdata/FusionI...
- 原文链接:https://support.huaweicloud.com/productdesc-mrs/mrs_08_0076.htmlClickHouse简介ClickHouse是一款开源的面向联机分析处理的列式数据库,其独立于Hadoop大数据体系,最核心的特点是极致压缩率和极速查询性能。同时,ClickHouse支持SQL查询,且查询性能好,特别是基于大宽表的聚合分析查询性能非常优异... 原文链接:https://support.huaweicloud.com/productdesc-mrs/mrs_08_0076.htmlClickHouse简介ClickHouse是一款开源的面向联机分析处理的列式数据库,其独立于Hadoop大数据体系,最核心的特点是极致压缩率和极速查询性能。同时,ClickHouse支持SQL查询,且查询性能好,特别是基于大宽表的聚合分析查询性能非常优异...
- 原文链接:https://support.huaweicloud.com/productdesc-mrs/mrs_08_0002.htmlMapReduce服务(MRS)提供租户完全可控的企业级大数据集群云服务,轻松运行Hadoop、Spark、HBase、Kafka、Storm等大数据组件,用户无需关注硬件的购买和维护。MRS服务拥有强大的Hadoop内核团队,基于华为FusionInsi... 原文链接:https://support.huaweicloud.com/productdesc-mrs/mrs_08_0002.htmlMapReduce服务(MRS)提供租户完全可控的企业级大数据集群云服务,轻松运行Hadoop、Spark、HBase、Kafka、Storm等大数据组件,用户无需关注硬件的购买和维护。MRS服务拥有强大的Hadoop内核团队,基于华为FusionInsi...
- 2021年上半年,湖仓一体俨然已经成为大数据领域最火热的流行词,各大云厂商推出自己的湖仓一体产品,在众多产品中,企业如何找到符合自身需求的数据管理产品?近日,国际权威分析机构弗若斯特沙利文 Frost & Sullivan(以下简称“沙利文”)发布了《2020 年中国数据管理解决方案市场报告》,对中国主流大数据厂商从产品创新能力、成长能力、基础能力三个维度进行了全面评估。华为云凭借 Fusi... 2021年上半年,湖仓一体俨然已经成为大数据领域最火热的流行词,各大云厂商推出自己的湖仓一体产品,在众多产品中,企业如何找到符合自身需求的数据管理产品?近日,国际权威分析机构弗若斯特沙利文 Frost & Sullivan(以下简称“沙利文”)发布了《2020 年中国数据管理解决方案市场报告》,对中国主流大数据厂商从产品创新能力、成长能力、基础能力三个维度进行了全面评估。华为云凭借 Fusi...
- 基本原理简介 DBService是一个高可用性的关系型数据库存储系统,适用于存储小量数据(10GB左 右),比如:组件元数据。 DBService仅提供给集群内部的组件使用,提供数据存储、查询、删除等功能。结构 DBService组件在集群中采用主备模式部署两个DBServer实例,每个DBServer实例包 含三个模块:HA、Database和Floatip。 ... 基本原理简介 DBService是一个高可用性的关系型数据库存储系统,适用于存储小量数据(10GB左 右),比如:组件元数据。 DBService仅提供给集群内部的组件使用,提供数据存储、查询、删除等功能。结构 DBService组件在集群中采用主备模式部署两个DBServer实例,每个DBServer实例包 含三个模块:HA、Database和Floatip。 ...
- 前言前面已经介绍了HetuEngine是什么以及应用场景与案例,想必读者对HetuEngine已经有了一个初步的了解,本篇文章将手把手带你进行集群部署和资源规划,开启玩转HetuEngine第一步。HetuEngine支持在服务层角色实例和计算实例两个维度进行资源规划,并且支持在高并发场景下通过启动多个计算实例进行负载分担和均衡,从而满足各种业务场景下的资源规划需求。一、HetuEngine... 前言前面已经介绍了HetuEngine是什么以及应用场景与案例,想必读者对HetuEngine已经有了一个初步的了解,本篇文章将手把手带你进行集群部署和资源规划,开启玩转HetuEngine第一步。HetuEngine支持在服务层角色实例和计算实例两个维度进行资源规划,并且支持在高并发场景下通过启动多个计算实例进行负载分担和均衡,从而满足各种业务场景下的资源规划需求。一、HetuEngine...
- 前言前面已经介绍了HetuEngine是什么,本篇文章讲带你了解HetuEngine常见的应用场景,与业务场景相结合,判断HetuEngine是否适应于业务场景。HetuEngine常见应用场景交互式查询场景 现状和挑战:查询慢:数据从入湖、Hive批加工,再搬迁到DWS进行交互式分析,整个链条数据消费时延长,对“反欺诈”、“实时风控”等高效应用存在不满足的情况;效率低:数据从Hadoop... 前言前面已经介绍了HetuEngine是什么,本篇文章讲带你了解HetuEngine常见的应用场景,与业务场景相结合,判断HetuEngine是否适应于业务场景。HetuEngine常见应用场景交互式查询场景 现状和挑战:查询慢:数据从入湖、Hive批加工,再搬迁到DWS进行交互式分析,整个链条数据消费时延长,对“反欺诈”、“实时风控”等高效应用存在不满足的情况;效率低:数据从Hadoop...
- 目前Hudi只支持FlinkSQL进行数据读写,但是在实际项目开发中一些客户存在使用Flink DataStream API读写Hudi的诉求。 目前Hudi只支持FlinkSQL进行数据读写,但是在实际项目开发中一些客户存在使用Flink DataStream API读写Hudi的诉求。
- 在分布式系统中负载均衡是一个非常重要的功能,Apache HBase通常通过Region的数量实现负载均衡,本文将展开分析HBase负载均衡中SimpleLoadBalancer相关内容。 在分布式系统中负载均衡是一个非常重要的功能,Apache HBase通常通过Region的数量实现负载均衡,本文将展开分析HBase负载均衡中SimpleLoadBalancer相关内容。
- kafka消费端性能优化主要从下面几个方面优化:1.接口使用方面优化:旧版本highlevel-consumer:偏移量信息存储在zookeeper,最大消费线程数与分区数量相同,不推荐旧版本simpleconsumer:自行选择存储偏移量的方式,可以实现多线程消费单分区,若无特殊的性能要求,不推荐新版本highlevel-consumer:偏移量信息存储在kafka指定的topic中,默认... kafka消费端性能优化主要从下面几个方面优化:1.接口使用方面优化:旧版本highlevel-consumer:偏移量信息存储在zookeeper,最大消费线程数与分区数量相同,不推荐旧版本simpleconsumer:自行选择存储偏移量的方式,可以实现多线程消费单分区,若无特殊的性能要求,不推荐新版本highlevel-consumer:偏移量信息存储在kafka指定的topic中,默认...
上滑加载中
推荐直播
-
openEuler Summit 2024
2024/11/16 周六 09:30-12:00
华为讲师团
2024年11月15日-16日,我们将在北京中关村国际创新中心举办 操作系统大会&openEuler Summit 2024,本次大会旨在汇聚全球产业发展力量,邀请思想引领者、商业精英、技术专家、合作伙伴以及全球开源基金会等业界同仁,共同探讨操作系统产业发展方向和未来机遇,联合伙伴展示最新合作成果,分享数字化转型实践,以技术驱动创新不断激发新质生产力。
回顾中 -
华为云AI入门课:AI发展趋势与华为愿景
2024/11/18 周一 18:20-20:20
Alex 华为云学堂技术讲师
本期直播旨在帮助开发者熟悉理解AI技术概念,AI发展趋势,AI实用化前景,了解熟悉未来主要技术栈,当前发展瓶颈等行业化知识。帮助开发者在AI领域快速构建知识体系,构建职业竞争力。
去报名 -
华为云软件开发生产线(CodeArts)10月新特性解读
2024/11/19 周二 19:00-20:00
苏柏亚培 华为云高级产品经理
不知道产品的最新特性?没法和产品团队建立直接的沟通?本期直播产品经理将为您解读华为云软件开发生产线10月发布的新特性,并在直播过程中为您答疑解惑。
去报名
热门标签