- Hive命令使用记录 Hive命令使用记录
- 数仓采集通道的设计 数仓采集通道的设计
- 执行Hive查询时出现OOM 执行Hive查询时出现OOM
- NiFi监控在组件工具栏下的NiFi屏幕顶部附近有一个条形,称为状态栏。它包含一些关于NiFi当前健康状况的重要统计数据:活动线程的数量可以指示NiFi当前的工作状态,排队统计数据表示当前在整个流程中排队的FlowFile数量以及这些FlowFiles的总大小。画布上的每个处理器,进程组(Group)和远程进程组都提供了有关组件处理了多少数据的若干统计信息。这些统计信息提供有关在过去五分钟内... NiFi监控在组件工具栏下的NiFi屏幕顶部附近有一个条形,称为状态栏。它包含一些关于NiFi当前健康状况的重要统计数据:活动线程的数量可以指示NiFi当前的工作状态,排队统计数据表示当前在整个流程中排队的FlowFile数量以及这些FlowFiles的总大小。画布上的每个处理器,进程组(Group)和远程进程组都提供了有关组件处理了多少数据的若干统计信息。这些统计信息提供有关在过去五分钟内...
- 集群页面组操作在NiFi中重新创建“GetFile”和“PutFile”处理器,形成新的DataFlow,并且各自重新命名:以上重新创建新的DataFlow或者导入外部模板生成的DataFlow,都会与页面中已经存在的处理器“混”在一起,为了便于理解和维护DataFlow,可以创建组来将不同的DataFlow放入不同的组。拖拽“Process Group”,创建新的组,并命名为“FirstG... 集群页面组操作在NiFi中重新创建“GetFile”和“PutFile”处理器,形成新的DataFlow,并且各自重新命名:以上重新创建新的DataFlow或者导入外部模板生成的DataFlow,都会与页面中已经存在的处理器“混”在一起,为了便于理解和维护DataFlow,可以创建组来将不同的DataFlow放入不同的组。拖拽“Process Group”,创建新的组,并命名为“FirstG...
- Hive on Tez 的安装配置 Hive on Tez 的安装配置
- MapReduce报错:「MKDirs failed to create file」 MapReduce报错:「MKDirs failed to create file」
- NiFi入门案例一需求:将A目录下实时产生的文件导入到指定的B目录下。这里需要使用到的处理器是“GetFile”和“PutFile”,完成以上需求对“GetFile”和“PutFile”相关属性进行配置。一、配置“GetFile”处理器1、拖拽“Processor”,搜索“GetFile”,创建处理器2、双击“GetFile”处理器面板,打开配置,选择“PROPERTIES”... NiFi入门案例一需求:将A目录下实时产生的文件导入到指定的B目录下。这里需要使用到的处理器是“GetFile”和“PutFile”,完成以上需求对“GetFile”和“PutFile”相关属性进行配置。一、配置“GetFile”处理器1、拖拽“Processor”,搜索“GetFile”,创建处理器2、双击“GetFile”处理器面板,打开配置,选择“PROPERTIES”...
- MapReduce关于类型转换报错记录 MapReduce关于类型转换报错记录
- 执行MapReduce报错:无法分配内存 (errno=12) 执行MapReduce报错:无法分配内存 (errno=12)
- Structured Streaming报错记录:Overloaded method foreachBatch with alternatives Structured Streaming报错记录:Overloaded method foreachBatch with alternatives
- NiFi集群页面的添加、配置处理器操作下面以GetFile Processor为例来添加配置处理器:一、从工具栏中拖入Processor,在弹出的面板中搜索GetFile,然后点击“ADD”添加Processor在生成的GetFile processor上右键,弹出可操作选项:对以上操作选项的解释如下:操作选项功能描述Configure(配置)此选项允许用户建立或更改处理器的配置,也可以在对... NiFi集群页面的添加、配置处理器操作下面以GetFile Processor为例来添加配置处理器:一、从工具栏中拖入Processor,在弹出的面板中搜索GetFile,然后点击“ADD”添加Processor在生成的GetFile processor上右键,弹出可操作选项:对以上操作选项的解释如下:操作选项功能描述Configure(配置)此选项允许用户建立或更改处理器的配置,也可以在对...
- NiFi集群页面管理节点操作用户可以手动断开节点与集群的连接,节点也可能由于其他原因而断开连接,例如由于缺乏心跳。节点断开之后用户不能修改节点上的数据流,另外,有可能由于网络问题导致节点无法与集群协调器通信导致页面上显示节点断开连接,并不意味着它不起作用。一、断开节点手动断开节点可以点击“断开连接”图标:断开节点之后,可以对断开节点进行卸载、删除操作。二、卸载节点在断开节点上存储的数据可以... NiFi集群页面管理节点操作用户可以手动断开节点与集群的连接,节点也可能由于其他原因而断开连接,例如由于缺乏心跳。节点断开之后用户不能修改节点上的数据流,另外,有可能由于网络问题导致节点无法与集群协调器通信导致页面上显示节点断开连接,并不意味着它不起作用。一、断开节点手动断开节点可以点击“断开连接”图标:断开节点之后,可以对断开节点进行卸载、删除操作。二、卸载节点在断开节点上存储的数据可以...
- NiFi单节点安装一、介绍与下载Apache NiFi可以基于Linux和Window安装,这里建议基于Linux安装。安装NiFi的节点需要安装JDK8,NiFi0.x版本需要JDK7。NiFi安装可以单节点安装,也可以分布式安装。我们这里安装NiFi的1.13版本,需要JDK8。NiFI下载官网地址:Apache NiFi Downloads二、单节点安装1、将下载好的NiFi安装包上... NiFi单节点安装一、介绍与下载Apache NiFi可以基于Linux和Window安装,这里建议基于Linux安装。安装NiFi的节点需要安装JDK8,NiFi0.x版本需要JDK7。NiFi安装可以单节点安装,也可以分布式安装。我们这里安装NiFi的1.13版本,需要JDK8。NiFI下载官网地址:Apache NiFi Downloads二、单节点安装1、将下载好的NiFi安装包上...
- 什么是NiFiApache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统,在大数据生态中的定位是成为一个统一的,与数据源无关的大数据集成平台。Apache NiFi 是为数据流设计,它支持高度可配置的指示图,来指示数据路由、转换和系统中流转关系,支持从多种数据源动态拉取数据。简单地说,NiFi是为自动化系统之间的数据流而生。 这里的数据流表示系统之间的自动化和受管理的信息流... 什么是NiFiApache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统,在大数据生态中的定位是成为一个统一的,与数据源无关的大数据集成平台。Apache NiFi 是为数据流设计,它支持高度可配置的指示图,来指示数据路由、转换和系统中流转关系,支持从多种数据源动态拉取数据。简单地说,NiFi是为自动化系统之间的数据流而生。 这里的数据流表示系统之间的自动化和受管理的信息流...
上滑加载中
推荐直播
-
华为云码道 × 仓颉编程:工程化AI编码探索2026/05/27 周三 19:00-21:00
刘俊杰-华为云仓颉语言专家/李炎-华为云码道技术专家/王智鹏-OpenCangjie开源社区发起人
本场直播围绕华为云仓颉语言与华为云码道的深度结合,展示华为云智能编程从零基础到高效落地的完整生态能力。以华为云码道为引擎,仓颉语言为载体,带给大家日常提效、趣味创新到极速量产的开发体验。
回顾中
热门标签