- Hive命令使用记录 Hive命令使用记录
- 数仓采集通道的设计 数仓采集通道的设计
- 执行Hive查询时出现OOM 执行Hive查询时出现OOM
- NiFi监控在组件工具栏下的NiFi屏幕顶部附近有一个条形,称为状态栏。它包含一些关于NiFi当前健康状况的重要统计数据:活动线程的数量可以指示NiFi当前的工作状态,排队统计数据表示当前在整个流程中排队的FlowFile数量以及这些FlowFiles的总大小。画布上的每个处理器,进程组(Group)和远程进程组都提供了有关组件处理了多少数据的若干统计信息。这些统计信息提供有关在过去五分钟内... NiFi监控在组件工具栏下的NiFi屏幕顶部附近有一个条形,称为状态栏。它包含一些关于NiFi当前健康状况的重要统计数据:活动线程的数量可以指示NiFi当前的工作状态,排队统计数据表示当前在整个流程中排队的FlowFile数量以及这些FlowFiles的总大小。画布上的每个处理器,进程组(Group)和远程进程组都提供了有关组件处理了多少数据的若干统计信息。这些统计信息提供有关在过去五分钟内...
- 集群页面组操作在NiFi中重新创建“GetFile”和“PutFile”处理器,形成新的DataFlow,并且各自重新命名:以上重新创建新的DataFlow或者导入外部模板生成的DataFlow,都会与页面中已经存在的处理器“混”在一起,为了便于理解和维护DataFlow,可以创建组来将不同的DataFlow放入不同的组。拖拽“Process Group”,创建新的组,并命名为“FirstG... 集群页面组操作在NiFi中重新创建“GetFile”和“PutFile”处理器,形成新的DataFlow,并且各自重新命名:以上重新创建新的DataFlow或者导入外部模板生成的DataFlow,都会与页面中已经存在的处理器“混”在一起,为了便于理解和维护DataFlow,可以创建组来将不同的DataFlow放入不同的组。拖拽“Process Group”,创建新的组,并命名为“FirstG...
- Hive on Tez 的安装配置 Hive on Tez 的安装配置
- MapReduce报错:「MKDirs failed to create file」 MapReduce报错:「MKDirs failed to create file」
- NiFi入门案例一需求:将A目录下实时产生的文件导入到指定的B目录下。这里需要使用到的处理器是“GetFile”和“PutFile”,完成以上需求对“GetFile”和“PutFile”相关属性进行配置。一、配置“GetFile”处理器1、拖拽“Processor”,搜索“GetFile”,创建处理器2、双击“GetFile”处理器面板,打开配置,选择“PROPERTIES”... NiFi入门案例一需求:将A目录下实时产生的文件导入到指定的B目录下。这里需要使用到的处理器是“GetFile”和“PutFile”,完成以上需求对“GetFile”和“PutFile”相关属性进行配置。一、配置“GetFile”处理器1、拖拽“Processor”,搜索“GetFile”,创建处理器2、双击“GetFile”处理器面板,打开配置,选择“PROPERTIES”...
- MapReduce关于类型转换报错记录 MapReduce关于类型转换报错记录
- 执行MapReduce报错:无法分配内存 (errno=12) 执行MapReduce报错:无法分配内存 (errno=12)
- Structured Streaming报错记录:Overloaded method foreachBatch with alternatives Structured Streaming报错记录:Overloaded method foreachBatch with alternatives
- NiFi集群页面的添加、配置处理器操作下面以GetFile Processor为例来添加配置处理器:一、从工具栏中拖入Processor,在弹出的面板中搜索GetFile,然后点击“ADD”添加Processor在生成的GetFile processor上右键,弹出可操作选项:对以上操作选项的解释如下:操作选项功能描述Configure(配置)此选项允许用户建立或更改处理器的配置,也可以在对... NiFi集群页面的添加、配置处理器操作下面以GetFile Processor为例来添加配置处理器:一、从工具栏中拖入Processor,在弹出的面板中搜索GetFile,然后点击“ADD”添加Processor在生成的GetFile processor上右键,弹出可操作选项:对以上操作选项的解释如下:操作选项功能描述Configure(配置)此选项允许用户建立或更改处理器的配置,也可以在对...
- NiFi集群页面管理节点操作用户可以手动断开节点与集群的连接,节点也可能由于其他原因而断开连接,例如由于缺乏心跳。节点断开之后用户不能修改节点上的数据流,另外,有可能由于网络问题导致节点无法与集群协调器通信导致页面上显示节点断开连接,并不意味着它不起作用。一、断开节点手动断开节点可以点击“断开连接”图标:断开节点之后,可以对断开节点进行卸载、删除操作。二、卸载节点在断开节点上存储的数据可以... NiFi集群页面管理节点操作用户可以手动断开节点与集群的连接,节点也可能由于其他原因而断开连接,例如由于缺乏心跳。节点断开之后用户不能修改节点上的数据流,另外,有可能由于网络问题导致节点无法与集群协调器通信导致页面上显示节点断开连接,并不意味着它不起作用。一、断开节点手动断开节点可以点击“断开连接”图标:断开节点之后,可以对断开节点进行卸载、删除操作。二、卸载节点在断开节点上存储的数据可以...
- NiFi单节点安装一、介绍与下载Apache NiFi可以基于Linux和Window安装,这里建议基于Linux安装。安装NiFi的节点需要安装JDK8,NiFi0.x版本需要JDK7。NiFi安装可以单节点安装,也可以分布式安装。我们这里安装NiFi的1.13版本,需要JDK8。NiFI下载官网地址:Apache NiFi Downloads二、单节点安装1、将下载好的NiFi安装包上... NiFi单节点安装一、介绍与下载Apache NiFi可以基于Linux和Window安装,这里建议基于Linux安装。安装NiFi的节点需要安装JDK8,NiFi0.x版本需要JDK7。NiFi安装可以单节点安装,也可以分布式安装。我们这里安装NiFi的1.13版本,需要JDK8。NiFI下载官网地址:Apache NiFi Downloads二、单节点安装1、将下载好的NiFi安装包上...
- 什么是NiFiApache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统,在大数据生态中的定位是成为一个统一的,与数据源无关的大数据集成平台。Apache NiFi 是为数据流设计,它支持高度可配置的指示图,来指示数据路由、转换和系统中流转关系,支持从多种数据源动态拉取数据。简单地说,NiFi是为自动化系统之间的数据流而生。 这里的数据流表示系统之间的自动化和受管理的信息流... 什么是NiFiApache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统,在大数据生态中的定位是成为一个统一的,与数据源无关的大数据集成平台。Apache NiFi 是为数据流设计,它支持高度可配置的指示图,来指示数据路由、转换和系统中流转关系,支持从多种数据源动态拉取数据。简单地说,NiFi是为自动化系统之间的数据流而生。 这里的数据流表示系统之间的自动化和受管理的信息流...
上滑加载中
推荐直播
-
Skill 构建 × 智能创作:基于华为云码道的 AI 内容生产提效方案2026/03/25 周三 19:00-20:00
余伟,华为云软件研发工程师/万邵业(万少),华为云HCDE开发者专家
本次直播带来两大实战:华为云码道 Skill-Creator 手把手搭建专属知识库 Skill;如何用码道提效 OpenClaw 小说文本,打造从大纲到成稿的 AI 原创小说全链路。技术干货 + OPC创作思路,一次讲透!
回顾中 -
码道新技能,AI 新生产力——从自动视频生成到开源项目解析2026/04/08 周三 19:00-21:00
童得力-华为云开发者生态运营总监/何文强-无人机企业AI提效负责人
本次华为云码道 Skill 实战活动,聚焦两大 AI 开发场景:通过实战教学,带你打造 AI 编程自动生成视频 Skill,并实现对 GitHub 热门开源项目的智能知识抽取,手把手掌握 Skill 开发全流程,用 AI 提升研发效率与内容生产力。
回顾中 -
华为云码道:零代码股票智能决策平台全功能实战2026/04/18 周六 10:00-12:00
秦拳德-中软国际教育卓越研究院研究员、华为云金牌讲师、云原生技术专家
利用Tushare接口获取实时行情数据,采用Transformer算法进行时序预测与涨跌分析,并集成DeepSeek API提供智能解读。同时,项目深度结合华为云CodeArts(码道)的代码智能体能力,实现代码一键推送至云端代码仓库,建立起高效、可协作的团队开发新范式。开发者可快速上手,从零打造功能完整的个股筛选、智能分析与风险管控产品。
回顾中
热门标签