- 目录 Kudu入门介绍 一、背景介绍 二、新的硬件设备 三、Kudu是什么 四、Kudu的应用场景 五、Kudu架构 Kudu入门介绍 一、背景介绍 在Kudu之前,大数据主要以两种方式存储; 静态数据: 以 HDFS 引擎作为存储引擎,适用于高吞吐量的离线大数据分析... 目录 Kudu入门介绍 一、背景介绍 二、新的硬件设备 三、Kudu是什么 四、Kudu的应用场景 五、Kudu架构 Kudu入门介绍 一、背景介绍 在Kudu之前,大数据主要以两种方式存储; 静态数据: 以 HDFS 引擎作为存储引擎,适用于高吞吐量的离线大数据分析...
- 老规矩,先抛结论后验证 string:有点像java的hashMap,存的时候什么key,取的时候也什么key,常用于做缓存,保存用户信息、查询列表等; hash:这个有点像hashMap的va... 老规矩,先抛结论后验证 string:有点像java的hashMap,存的时候什么key,取的时候也什么key,常用于做缓存,保存用户信息、查询列表等; hash:这个有点像hashMap的va...
- 目录 ETL实现方案 一、ETL处理流程图 二、为什么使用Kudu作为存储介质 ETL实现方案 一、ETL处理流程图 数据来源: 来自于ogg同步到kafka的物流运输数据来自于canal同步到kafka的客户关系数据 二、为什么使用Kudu作为存储介质 数据库数据上的快速分析 目前很多业务使用事... 目录 ETL实现方案 一、ETL处理流程图 二、为什么使用Kudu作为存储介质 ETL实现方案 一、ETL处理流程图 数据来源: 来自于ogg同步到kafka的物流运输数据来自于canal同步到kafka的客户关系数据 二、为什么使用Kudu作为存储介质 数据库数据上的快速分析 目前很多业务使用事...
- 目录 Hue安装 一、Hue概述 二、HUE安装步骤 Hue安装 一、Hue概述 Hue来源 HUE=Hadoop User Experience(Hadoop用户体验),直白来说就一个开源的Apache Hadoop UI系统,由Cloudera Desktop演化而来,最后Cloudera公... 目录 Hue安装 一、Hue概述 二、HUE安装步骤 Hue安装 一、Hue概述 Hue来源 HUE=Hadoop User Experience(Hadoop用户体验),直白来说就一个开源的Apache Hadoop UI系统,由Cloudera Desktop演化而来,最后Cloudera公...
- 目录 安装Azkaban-3.71.0 一、下载Azkaban源码并编译 二、安装Azkaban 三、测试Azkaban的job 安装Azkaban-3.71.0 一、下载Azkaban源码并编译 操作步骤 说明 1 下载Azkaban-3.71.0 cd /export/so... 目录 安装Azkaban-3.71.0 一、下载Azkaban源码并编译 二、安装Azkaban 三、测试Azkaban的job 安装Azkaban-3.71.0 一、下载Azkaban源码并编译 操作步骤 说明 1 下载Azkaban-3.71.0 cd /export/so...
- 目录 安装ElasticSearch-7.6.1 一、配置ES 二、操作系统配置 三、运行ES 安装ElasticSearch-7.6.1 一、配置ES 操作步骤 说明 1 进入软件包所在目录 cd /export/softwares 2 下载ES-7.6.1 curl -L -O http... 目录 安装ElasticSearch-7.6.1 一、配置ES 二、操作系统配置 三、运行ES 安装ElasticSearch-7.6.1 一、配置ES 操作步骤 说明 1 进入软件包所在目录 cd /export/softwares 2 下载ES-7.6.1 curl -L -O http...
- 目录 CDH使用注意 一、HDFS使用前配置 二、Kafka使用前配置 CDH使用注意 一、HDFS使用前配置 默认情况下,CDH的HDFS服务是开启权限检查的,为方便使用HDFS,需先将HDFS的dfs.permissions选项取消选中,保存后重启HDFS服务。最终的配置如下: 二... 目录 CDH使用注意 一、HDFS使用前配置 二、Kafka使用前配置 CDH使用注意 一、HDFS使用前配置 默认情况下,CDH的HDFS服务是开启权限检查的,为方便使用HDFS,需先将HDFS的dfs.permissions选项取消选中,保存后重启HDFS服务。最终的配置如下: 二...
- 目录 大数据服务器环境准备 一、服务器规划 二、Linux虚拟机环境搭建 1、虚拟机准备 2、SSH免密登录 3、关闭SELINUX 大数据服务器环境准备 一、服务器规划 服务器 主机名 操作系统/版本 IP 内存 硬盘 大数据服务器 node2 Cento... 目录 大数据服务器环境准备 一、服务器规划 二、Linux虚拟机环境搭建 1、虚拟机准备 2、SSH免密登录 3、关闭SELINUX 大数据服务器环境准备 一、服务器规划 服务器 主机名 操作系统/版本 IP 内存 硬盘 大数据服务器 node2 Cento...
- 目录 Cloudera Manager简单介绍 一、cloudera manager的概念 二、cloudera manager的功能 三、cloudera manager的架构 Cloudera Manager简单介绍 一、cloudera manager的概念 Cloudera Manager是一个拥有... 目录 Cloudera Manager简单介绍 一、cloudera manager的概念 二、cloudera manager的功能 三、cloudera manager的架构 Cloudera Manager简单介绍 一、cloudera manager的概念 Cloudera Manager是一个拥有...
- 目录 OGG安装部署 一、配置Oracle11gR2数据库 1、Oracle11gR2打开归档模式 2、Oracle开启辅助日志和补充日志 二、安装OGG源端 1、解压和安装OGG源端软件包 2、在Oracle中创建OGG相关的用户和表空间 3、OGG源端初始化 三、配置OGG源端 1、Oracle创建测试表 2、... 目录 OGG安装部署 一、配置Oracle11gR2数据库 1、Oracle11gR2打开归档模式 2、Oracle开启辅助日志和补充日志 二、安装OGG源端 1、解压和安装OGG源端软件包 2、在Oracle中创建OGG相关的用户和表空间 3、OGG源端初始化 三、配置OGG源端 1、Oracle创建测试表 2、...
- 目录 OGG介绍 一、OGG简介 二、应用场景 三、基本原理 四、基本架构 五、常用的拓扑结构 六、支持的环境 OGG介绍 一、OGG简介 OGG 是一种基于日志的结构化数据复制软件,它通过解析源数据库在线日志或归档日志获得数据的增删改变化(数... 目录 OGG介绍 一、OGG简介 二、应用场景 三、基本原理 四、基本架构 五、常用的拓扑结构 六、支持的环境 OGG介绍 一、OGG简介 OGG 是一种基于日志的结构化数据复制软件,它通过解析源数据库在线日志或归档日志获得数据的增删改变化(数...
- 女生学大数据的就业方向好不好就业 女生是否适合学习大数据因人而言,不对大数据感兴趣的男女,他们都学不好大数据,对数据感兴趣的男女,能不能学好大数据也是看个人。 女生学大数据的就业方向有哪些 对于大数据的就业方向,实际上可以划分为三个... 女生学大数据的就业方向好不好就业 女生是否适合学习大数据因人而言,不对大数据感兴趣的男女,他们都学不好大数据,对数据感兴趣的男女,能不能学好大数据也是看个人。 女生学大数据的就业方向有哪些 对于大数据的就业方向,实际上可以划分为三个...
- 目录 物流管理系统服务器 一、虚拟机数据路径配置 二、软件下载和存放位置 1、Oracle11gR2软件下载 2、OGG软件下载 3、大数据软件下载 4、存储清单 物流管理系统服务器 一、虚拟机数据路径配置 创建文件夹路径 mkdir -p /export/softwa... 目录 物流管理系统服务器 一、虚拟机数据路径配置 二、软件下载和存放位置 1、Oracle11gR2软件下载 2、OGG软件下载 3、大数据软件下载 4、存储清单 物流管理系统服务器 一、虚拟机数据路径配置 创建文件夹路径 mkdir -p /export/softwa...
- 目录 Docker环境初始化 一、下载oracle11g_centos7镜像 二、启动oracle11g_centos7容器 三、Docker安装命令 四、Docker数据路径初始化 五、设置每次启动容器都会重新加载环境变量 Docker环境初始化 一、下载oracle11g_centos7镜像 操作... 目录 Docker环境初始化 一、下载oracle11g_centos7镜像 二、启动oracle11g_centos7容器 三、Docker安装命令 四、Docker数据路径初始化 五、设置每次启动容器都会重新加载环境变量 Docker环境初始化 一、下载oracle11g_centos7镜像 操作...
- 大数据开发分了几个方向: 1.底层的基础平台开发 2.面向用户的数据产品开发 3.数据仓库开发 4.大数据分析 5.算法,数据挖掘 一、基础平台开发: Java 为主。主要做统一数据开发平台、大数据源... 大数据开发分了几个方向: 1.底层的基础平台开发 2.面向用户的数据产品开发 3.数据仓库开发 4.大数据分析 5.算法,数据挖掘 一、基础平台开发: Java 为主。主要做统一数据开发平台、大数据源...
上滑加载中
推荐直播
-
昇腾AI算法挑战赛-核心算子如何优化?专家带你深度解析2025/11/17 周一 16:00-17:00
王老师 华为算子专家
昇腾AI算法挑战赛进阶赛战鼓催征!本期直播间,我们特邀华为算子专家王老师,为你深度剖析Matmul、wholereducesum等核心算子的底层原理与优化技巧,直击赛题核心。想提升代码效率、冲击更高排名?锁定直播,带你破局!
回顾中 -
AI编码实干派,“码”力全开2026/02/26 周四 15:00-16:30
谈宗玮/于邦旭/丁俊卿/陈云亮/王一男
【中国,深圳,2026年2月26日】,以“AI编码实干派,码力全开”为主题的华为云码道(CodeArts)代码智能体新春发布会在线上成功召开。华为云码道公测版正式发布,为开发者和企业提供具备工程化能力的智能编码解决方案。
回顾中 -
华为云码道-玩转OpenClaw,在线养虾2026/03/11 周三 19:00-21:00
刘昱,华为云高级工程师/谈心,华为云技术专家/李海仑,上海圭卓智能科技有限公司CEO
OpenClaw 火爆开发者圈,华为云码道最新推出 Skill ——开发者只需输入一句口令,即可部署一个功能完整的「小龙虾」智能体。直播带你玩转华为云码道,玩转OpenClaw
回顾中
热门标签