- 目录 一、为什么需要zookeeper 二、单机安装 zookeeper 三、常用的zk命令 四、使用ZooInspector 查看zookeeper 五、zk数据模型 六、安装分布式的zk 七、分布式zk的特点 一、为什么需要zookeeper 分布式协调管理者,用于在进群的环境下,选举出主节点,当主节点挂掉了之后,会选举其他的nameNode作为... 目录 一、为什么需要zookeeper 二、单机安装 zookeeper 三、常用的zk命令 四、使用ZooInspector 查看zookeeper 五、zk数据模型 六、安装分布式的zk 七、分布式zk的特点 一、为什么需要zookeeper 分布式协调管理者,用于在进群的环境下,选举出主节点,当主节点挂掉了之后,会选举其他的nameNode作为...
- 内容太多了,想着就这样大眼瞪小眼的也没办法,还不如整理一份。 Tips:真要学习的就绕开吧,仅为考试所用,太难的内容没有,我也不耽误宝贵的时间,有这时间多看几篇我其他的干货不好吗? 文章目录 大数据概述HadoopHadoop简介Hadoop特性大规模文件系统的整体结构通信协议冗余数据保存 SparkSpark简介Scala简介Spark VS Hado... 内容太多了,想着就这样大眼瞪小眼的也没办法,还不如整理一份。 Tips:真要学习的就绕开吧,仅为考试所用,太难的内容没有,我也不耽误宝贵的时间,有这时间多看几篇我其他的干货不好吗? 文章目录 大数据概述HadoopHadoop简介Hadoop特性大规模文件系统的整体结构通信协议冗余数据保存 SparkSpark简介Scala简介Spark VS Hado...
- 一、yarn 简介 分布式集群的计算资源管理,包括对内存以及cpu的管理,也是符合主从结构,主ResourceManager 负责集群资源的调控,负责单个服务器上资源的管理。 二、yarn的安装 三、分布式计算概述 四、yarn的资源调度机制 五、yarn Capacity Scheduler 配置 yarn applicati... 一、yarn 简介 分布式集群的计算资源管理,包括对内存以及cpu的管理,也是符合主从结构,主ResourceManager 负责集群资源的调控,负责单个服务器上资源的管理。 二、yarn的安装 三、分布式计算概述 四、yarn的资源调度机制 五、yarn Capacity Scheduler 配置 yarn applicati...
- 目录 1、高考是个什么难度级别的考试 2、未来高考人数会变少吗? 3、各地高考人数差异巨大 4、各地高考难度评级 5、上海能上到高中的人只有一半?——这是全国各地的普遍情况 6、部分省市点评 不同省份的高考难度,一直是一个争议严重的问题。 每个地方的人,都会觉得自己是比较难的那一个。因为其实不管在哪里,高考都是件不容易的事情。 高考录取,本质上是一种“省内... 目录 1、高考是个什么难度级别的考试 2、未来高考人数会变少吗? 3、各地高考人数差异巨大 4、各地高考难度评级 5、上海能上到高中的人只有一半?——这是全国各地的普遍情况 6、部分省市点评 不同省份的高考难度,一直是一个争议严重的问题。 每个地方的人,都会觉得自己是比较难的那一个。因为其实不管在哪里,高考都是件不容易的事情。 高考录取,本质上是一种“省内...
- 文章目录 前文回顾大数据排序sort_index方法sort_values方法 数据计算agg 数据分析常用计算方法describe方法value_counts方法 分组与聚合计算分组合并两列数据 前文回顾 跟我一起学点 数据分析 – 第三天:上手pandas(3) 大数据排序 sort_index方法 这个函数呢,你看到它的参数有很... 文章目录 前文回顾大数据排序sort_index方法sort_values方法 数据计算agg 数据分析常用计算方法describe方法value_counts方法 分组与聚合计算分组合并两列数据 前文回顾 跟我一起学点 数据分析 – 第三天:上手pandas(3) 大数据排序 sort_index方法 这个函数呢,你看到它的参数有很...
- 文章目录 1、序言2、2-3树2.1、2-3树的插入2.2 2-3树的删除 3、B树4、B树的典型应用 1、序言 曾今我不知道多叉树有上面用,所以对于多叉树并没有过多的关注,或者说,基本没关注。 直到我了解到了多路查找树(B树),我知道,是我浅薄了。 先不说那些高深莫测的内容,我们就通俗的聊聊。 我们现在常说大数据大数据,就算没说过也听过... 文章目录 1、序言2、2-3树2.1、2-3树的插入2.2 2-3树的删除 3、B树4、B树的典型应用 1、序言 曾今我不知道多叉树有上面用,所以对于多叉树并没有过多的关注,或者说,基本没关注。 直到我了解到了多路查找树(B树),我知道,是我浅薄了。 先不说那些高深莫测的内容,我们就通俗的聊聊。 我们现在常说大数据大数据,就算没说过也听过...
- 支部党员大会讨论接收预备党员的主要程序 召开支部大会讨论接收预备党员,是党章规定的必须履行的入党手续,因此,党支部必须认真开好接收预备党员的支部大会。 主要程序 (1)一般由支部书记担任会议主持人,宣布开会,报告出席会议的党员人数,提出会议的议题及开好会议的具体要求。 (2)发展对象宣读《入党志愿书》,汇报自己对党的认识、入党动机、本人履历、现实表现、家... 支部党员大会讨论接收预备党员的主要程序 召开支部大会讨论接收预备党员,是党章规定的必须履行的入党手续,因此,党支部必须认真开好接收预备党员的支部大会。 主要程序 (1)一般由支部书记担任会议主持人,宣布开会,报告出席会议的党员人数,提出会议的议题及开好会议的具体要求。 (2)发展对象宣读《入党志愿书》,汇报自己对党的认识、入党动机、本人履历、现实表现、家...
- #22个免费的数据可视化和分析工具推荐 本文总结推荐22个免费的数据可视化和分析工具。列表如下: ##数据清理(Data cleaning) 当你分析和可视化数据前,常需要“清理”工作。比如一些输入性列表“New York City" ,同时其他人会说"New York, NY" 。因此你需要标准化这些工作,使之可以看到统... #22个免费的数据可视化和分析工具推荐 本文总结推荐22个免费的数据可视化和分析工具。列表如下: ##数据清理(Data cleaning) 当你分析和可视化数据前,常需要“清理”工作。比如一些输入性列表“New York City" ,同时其他人会说"New York, NY" 。因此你需要标准化这些工作,使之可以看到统...
- 来源 | ITWord整理自网络 全球最厉害的14位程序员是谁?一起来看下让我们膜拜的这些大神都有哪些?排名不分先后! 01 Jon Skeet 个人名望:程序技术问答网站Stack Overflow总排名第一的大神,每月的问答量保持在425个左右。 个人简介/主要荣誉:谷歌软件工程师,代表作有《深入理解C#(C# In Depth)》。 网络上对Jo... 来源 | ITWord整理自网络 全球最厉害的14位程序员是谁?一起来看下让我们膜拜的这些大神都有哪些?排名不分先后! 01 Jon Skeet 个人名望:程序技术问答网站Stack Overflow总排名第一的大神,每月的问答量保持在425个左右。 个人简介/主要荣誉:谷歌软件工程师,代表作有《深入理解C#(C# In Depth)》。 网络上对Jo...
- 目录 1、高考是个什么难度级别的考试 2、未来高考人数会变少吗? 3、各地高考人数差异巨大 4、各地高考难度评级 5、上海能上到高中的人只有一半?——这是全国各地的普遍情况 6、部分省市点评 不同省份的高考难度,一直是一个争议严重的问题。 每个地方的人,都会觉得自己是比较难的那一个。因为其实不管在哪里,高考都是件不容易的事情。 高考录取,本质上是一种“省内... 目录 1、高考是个什么难度级别的考试 2、未来高考人数会变少吗? 3、各地高考人数差异巨大 4、各地高考难度评级 5、上海能上到高中的人只有一半?——这是全国各地的普遍情况 6、部分省市点评 不同省份的高考难度,一直是一个争议严重的问题。 每个地方的人,都会觉得自己是比较难的那一个。因为其实不管在哪里,高考都是件不容易的事情。 高考录取,本质上是一种“省内...
- 一、MapReduce 安装 (1)分布式计算概述 访问 master:8088 查看yarn 是否启动成功。 (2)验证mapreduce 是否安装成功 运行 hadoop 安装包中 自带的 mapreduce 正则匹配例子。 看到控制台有如下输出说明mapReduce 任务正在运行中,同时可以在yarn 监控界面上看到任务执行记录 二、ha... 一、MapReduce 安装 (1)分布式计算概述 访问 master:8088 查看yarn 是否启动成功。 (2)验证mapreduce 是否安装成功 运行 hadoop 安装包中 自带的 mapreduce 正则匹配例子。 看到控制台有如下输出说明mapReduce 任务正在运行中,同时可以在yarn 监控界面上看到任务执行记录 二、ha...
- 目录 一、HDFS常用操作命令 二、HDFS文件恢复机制 三、hadoop的window本地安装 四、mapreduce 单元测试、集成测试及验证 一、HDFS常用操作命令 查看根目录下的文件 hadoop fs -ls hdfs://master:9999/ 或 hadoop fs -ls / hadoop fs -ls -h... 目录 一、HDFS常用操作命令 二、HDFS文件恢复机制 三、hadoop的window本地安装 四、mapreduce 单元测试、集成测试及验证 一、HDFS常用操作命令 查看根目录下的文件 hadoop fs -ls hdfs://master:9999/ 或 hadoop fs -ls / hadoop fs -ls -h...
- 目录 一、HDFS HA 集群规划 二、修改hdfs-site 和 core-site 配置 三、同步namenode 的 EditsLog 数据 四、配置自动状态改变 五、杀死一个active状态的namenode进行验证 六、实现HA中的 zookeeper 的作用 七、清理垃圾数据 八、配置yarn(ResourceManager) 的集群 一、HD... 目录 一、HDFS HA 集群规划 二、修改hdfs-site 和 core-site 配置 三、同步namenode 的 EditsLog 数据 四、配置自动状态改变 五、杀死一个active状态的namenode进行验证 六、实现HA中的 zookeeper 的作用 七、清理垃圾数据 八、配置yarn(ResourceManager) 的集群 一、HD...
- 目录 前言 一、使用http的方式访问hdfs 二、hdfs各组件及其作用 三、hdfs中的数据块(Block) 四、java api 操作hdfs 五、java 开发 hdfs 应用时注意的事项 六、DataNode心跳机制的作用 七、NameNode中EditsLog 和FSImage 的作用 八、SecondaryNameNode ... 目录 前言 一、使用http的方式访问hdfs 二、hdfs各组件及其作用 三、hdfs中的数据块(Block) 四、java api 操作hdfs 五、java 开发 hdfs 应用时注意的事项 六、DataNode心跳机制的作用 七、NameNode中EditsLog 和FSImage 的作用 八、SecondaryNameNode ...
- 写在前面:博主是一只经过实战开发历练后投身培训事业的“小山猪”,昵称取自动画片《狮子王》中的“彭彭”,总是以乐观、积极的心态对待周边的事物。本人的技术路线从Java全栈工程师一路奔向大数据开发、数据挖掘领域,如今终有小成,愿将昔日所获与大家交流一二,希望对学习路上的你有所助益。同时,博主也想通过此次尝试打造一个完善的技术图书馆,任何与文章技术点有关的异常、错误、注... 写在前面:博主是一只经过实战开发历练后投身培训事业的“小山猪”,昵称取自动画片《狮子王》中的“彭彭”,总是以乐观、积极的心态对待周边的事物。本人的技术路线从Java全栈工程师一路奔向大数据开发、数据挖掘领域,如今终有小成,愿将昔日所获与大家交流一二,希望对学习路上的你有所助益。同时,博主也想通过此次尝试打造一个完善的技术图书馆,任何与文章技术点有关的异常、错误、注...
上滑加载中
推荐直播
-
昇腾AI算法挑战赛-核心算子如何优化?专家带你深度解析2025/11/17 周一 16:00-17:00
王老师 华为算子专家
昇腾AI算法挑战赛进阶赛战鼓催征!本期直播间,我们特邀华为算子专家王老师,为你深度剖析Matmul、wholereducesum等核心算子的底层原理与优化技巧,直击赛题核心。想提升代码效率、冲击更高排名?锁定直播,带你破局!
回顾中 -
AI编码实干派,“码”力全开2026/02/26 周四 15:00-16:30
谈宗玮/于邦旭/丁俊卿/陈云亮/王一男
【中国,深圳,2026年2月26日】,以“AI编码实干派,码力全开”为主题的华为云码道(CodeArts)代码智能体新春发布会在线上成功召开。华为云码道公测版正式发布,为开发者和企业提供具备工程化能力的智能编码解决方案。
回顾中 -
华为云码道-玩转OpenClaw,开启在线养虾模式2026/03/11 周三 19:00-20:00
刘昱,华为云高级工程师/谈心,华为云技术专家/李海仑,上海圭卓智能科技有限公司CEO
OpenClaw 火爆开发者圈,华为云码道最新推出 Skill ——开发者只需输入一句口令,即可部署一个功能完整的「小龙虾」智能体。直播带你玩转华为云码道,玩转OpenClaw
回顾中
热门标签