- 在河图中可以使用和开源presto一样的自定义UDF,本文用于指导如何使用自定义UDF 在河图中可以使用和开源presto一样的自定义UDF,本文用于指导如何使用自定义UDF
- 承接上一篇博客《GaussDB(DWS)性能调优系列基础篇一:万物之始analyze统计信息》,在GaussDB(DWS)的优化器根据analyze统计信息生成计划后,这里继续介绍如何详细解读计划以及计划的执行过程,从中发现可能存在的性能瓶颈点及其产生的原因。 承接上一篇博客《GaussDB(DWS)性能调优系列基础篇一:万物之始analyze统计信息》,在GaussDB(DWS)的优化器根据analyze统计信息生成计划后,这里继续介绍如何详细解读计划以及计划的执行过程,从中发现可能存在的性能瓶颈点及其产生的原因。
- Spark 是专为大规模数据处理而设计的快速通用的计算引擎,起源于UC Berkeley AMP lab的一个研究项目。相比传统的Hadoop(MapReduce) ,Spark的性能快了将近100x倍。Spark在计算中用到的数据可能会存在DWS、HBase或者HDFS上,其读写速度都和Spark计算的速度相差甚远。而Redis基于内存的读写可以成功解决这个问题,于是诞生了Spark-Redis Spark 是专为大规模数据处理而设计的快速通用的计算引擎,起源于UC Berkeley AMP lab的一个研究项目。相比传统的Hadoop(MapReduce) ,Spark的性能快了将近100x倍。Spark在计算中用到的数据可能会存在DWS、HBase或者HDFS上,其读写速度都和Spark计算的速度相差甚远。而Redis基于内存的读写可以成功解决这个问题,于是诞生了Spark-Redis
- 本文主要进行Hive/Hadoop的安装配置,最后实现IDEA远程调试Hive代码 本文主要进行Hive/Hadoop的安装配置,最后实现IDEA远程调试Hive代码
- Logstash是开源的服务器端数据处理管道,能够同时从多个来源采集数据,转换数据,然后将数据存储到Elasticsearch,如日志搜索场景等。本文介绍如何对接FusionInsight Elasticsearch。 Logstash是开源的服务器端数据处理管道,能够同时从多个来源采集数据,转换数据,然后将数据存储到Elasticsearch,如日志搜索场景等。本文介绍如何对接FusionInsight Elasticsearch。
- Kibana提供了图形化操作界面,通过可视化界面对Elasticsearch进行索引构建、查询、分析等操作。本文介绍如何对接FusionInsight Elasticsearch Kibana提供了图形化操作界面,通过可视化界面对Elasticsearch进行索引构建、查询、分析等操作。本文介绍如何对接FusionInsight Elasticsearch
- dbeaver是免费和开源(GPL)为开发人员和数据库管理员通用数据库工具,本文介绍如何在Windows下使用DBeaver对接FusionInsight Hive dbeaver是免费和开源(GPL)为开发人员和数据库管理员通用数据库工具,本文介绍如何在Windows下使用DBeaver对接FusionInsight Hive
- 模型设计完成后,如何生成端到端全流程的数据开发作业 模型设计完成后,如何生成端到端全流程的数据开发作业
- 简单介绍如何搭建Zookeeper,HBase,Phoenix单机开发环境,进行简单的功能测试 简单介绍如何搭建Zookeeper,HBase,Phoenix单机开发环境,进行简单的功能测试
- Spark作为优秀的大数据处理的处理框架,需要通过集群机器的协作来高效的处理数据,为了实现集群的功能,机器之间稳定及高性能的通信就成为了必要条件.为此,spark在2.x的版本就使用netty彻底替换掉了akka,作为spark的通信框架,并设计了如下通讯架构: 1.RpcEndpoint:RPC端点,Spark针对每个节点(Client/Master/Worker)都... Spark作为优秀的大数据处理的处理框架,需要通过集群机器的协作来高效的处理数据,为了实现集群的功能,机器之间稳定及高性能的通信就成为了必要条件.为此,spark在2.x的版本就使用netty彻底替换掉了akka,作为spark的通信框架,并设计了如下通讯架构: 1.RpcEndpoint:RPC端点,Spark针对每个节点(Client/Master/Worker)都...
- 本文对anchor-free的目标检测RepPoints系列算法进行梳理,具体包含RepPoints, RepPoints V2, Dense RepPoints. 本文对anchor-free的目标检测RepPoints系列算法进行梳理,具体包含RepPoints, RepPoints V2, Dense RepPoints.
- HBase的一个Retry次数引起的MultiActionResultTooLarge的问题 HBase的一个Retry次数引起的MultiActionResultTooLarge的问题
- 1. 环境异常现象及初步分析 项目中对接外部的thrift服务,使用该服务提供的thrift client进行访问;我们刚开始进行功能验证时一切运行正常,但后来请求量稍微高一点后,就出现了进程卡死的现象,查看后台日志,开始以为是哪个接口有bug导致服务崩溃,后来发现接口是随机性的报错,并且在异常抛出后,client无法再响应后继请求。 跟踪日志查看,每次在出现org.... 1. 环境异常现象及初步分析 项目中对接外部的thrift服务,使用该服务提供的thrift client进行访问;我们刚开始进行功能验证时一切运行正常,但后来请求量稍微高一点后,就出现了进程卡死的现象,查看后台日志,开始以为是哪个接口有bug导致服务崩溃,后来发现接口是随机性的报错,并且在异常抛出后,client无法再响应后继请求。 跟踪日志查看,每次在出现org....
- 服务公告DLI SDK 1.2.7版本升级公告服务功能更新1.【新功能】集群支持定时扩缩容用户可根据业务繁忙周期设置队列的定时扩缩容计划,满足客户不同时间段需要不同大小计算资源的需求,帮助用户节省计算成本。2.【新特性】DLI内部存储支持套餐包新上多规格存储套餐包,从1T到1PB,可根据业务需要灵活选购,降低DLI内表存储费用。3.【新功能】Flink流应用支持通过IEF边缘部署DLI提供的... 服务公告DLI SDK 1.2.7版本升级公告服务功能更新1.【新功能】集群支持定时扩缩容用户可根据业务繁忙周期设置队列的定时扩缩容计划,满足客户不同时间段需要不同大小计算资源的需求,帮助用户节省计算成本。2.【新特性】DLI内部存储支持套餐包新上多规格存储套餐包,从1T到1PB,可根据业务需要灵活选购,降低DLI内表存储费用。3.【新功能】Flink流应用支持通过IEF边缘部署DLI提供的...
- 保护高并发系统的稳定性的三把利器:缓存、降级和限流。 而降级、限流的本质都是基于限流算法,常见的限流算法有如下4种:计数器固定窗口算法、计数器滑动窗口算法、漏桶算法和令牌桶算法。 保护高并发系统的稳定性的三把利器:缓存、降级和限流。 而降级、限流的本质都是基于限流算法,常见的限流算法有如下4种:计数器固定窗口算法、计数器滑动窗口算法、漏桶算法和令牌桶算法。
上滑加载中
推荐直播
-
AI编码实干派,“码”力全开2026/02/26 周四 15:00-16:30
谈宗玮/于邦旭/丁俊卿/陈云亮/王一男
【中国,深圳,2026年2月26日】,以“AI编码实干派,码力全开”为主题的华为云码道(CodeArts)代码智能体新春发布会在线上成功召开。华为云码道公测版正式发布,为开发者和企业提供具备工程化能力的智能编码解决方案。
回顾中 -
华为云码道-玩转OpenClaw,在线养虾2026/03/11 周三 19:00-21:00
刘昱,华为云高级工程师/谈心,华为云技术专家/李海仑,上海圭卓智能科技有限公司CEO
OpenClaw 火爆开发者圈,华为云码道最新推出 Skill ——开发者只需输入一句口令,即可部署一个功能完整的「小龙虾」智能体。直播带你玩转华为云码道,玩转OpenClaw
回顾中 -
华为云码道-AI时代应用开发利器2026/03/18 周三 19:00-20:00
童得力,华为云开发者生态运营总监/姚圣伟,华为云HCDE开发者专家
本次直播由华为专家带你实战应用开发,看华为云码道(CodeArts)代码智能体如何在AI时代让你的创意应用快速落地。更有华为云HCDE开发者专家带你用码道玩转JiuwenClaw,让小艺成为你的AI助理。
回顾中
热门标签