- 内容太多了，想着就这样大眼瞪小眼的也没办法，还不如整理一份。 Tips：真要学习的就绕开吧，仅为考试所用，太难的内容没有，我也不耽误宝贵的时间，有这时间多看几篇我其他的干货不好吗？ 文章目录 大数据概述HadoopHadoop简介Hadoop特性大规模文件系统的整体结构通信协议冗余数据保存 SparkSpark简介Scala简介Spark VS Hado... 内容太多了，想着就这样大眼瞪小眼的也没办法，还不如整理一份。 Tips：真要学习的就绕开吧，仅为考试所用，太难的内容没有，我也不耽误宝贵的时间，有这时间多看几篇我其他的干货不好吗？ 文章目录 大数据概述HadoopHadoop简介Hadoop特性大规模文件系统的整体结构通信协议冗余数据保存 SparkSpark简介Scala简介Spark VS Hado...
- 一、yarn 简介 分布式集群的计算资源管理，包括对内存以及cpu的管理，也是符合主从结构，主ResourceManager 负责集群资源的调控，负责单个服务器上资源的管理。 二、yarn的安装 三、分布式计算概述 四、yarn的资源调度机制 五、yarn Capacity Scheduler 配置 yarn applicati... 一、yarn 简介 分布式集群的计算资源管理，包括对内存以及cpu的管理，也是符合主从结构，主ResourceManager 负责集群资源的调控，负责单个服务器上资源的管理。 二、yarn的安装 三、分布式计算概述 四、yarn的资源调度机制 五、yarn Capacity Scheduler 配置 yarn applicati...
- 目录 1、高考是个什么难度级别的考试 2、未来高考人数会变少吗？ 3、各地高考人数差异巨大 4、各地高考难度评级 5、上海能上到高中的人只有一半？——这是全国各地的普遍情况 6、部分省市点评 不同省份的高考难度，一直是一个争议严重的问题。 每个地方的人，都会觉得自己是比较难的那一个。因为其实不管在哪里，高考都是件不容易的事情。 高考录取，本质上是一种“省内... 目录 1、高考是个什么难度级别的考试 2、未来高考人数会变少吗？ 3、各地高考人数差异巨大 4、各地高考难度评级 5、上海能上到高中的人只有一半？——这是全国各地的普遍情况 6、部分省市点评 不同省份的高考难度，一直是一个争议严重的问题。 每个地方的人，都会觉得自己是比较难的那一个。因为其实不管在哪里，高考都是件不容易的事情。 高考录取，本质上是一种“省内...
- 文章目录 前文回顾大数据排序sort_index方法sort_values方法 数据计算agg 数据分析常用计算方法describe方法value_counts方法 分组与聚合计算分组合并两列数据 前文回顾 跟我一起学点 数据分析 – 第三天：上手pandas（3） 大数据排序 sort_index方法 这个函数呢，你看到它的参数有很... 文章目录 前文回顾大数据排序sort_index方法sort_values方法 数据计算agg 数据分析常用计算方法describe方法value_counts方法 分组与聚合计算分组合并两列数据 前文回顾 跟我一起学点 数据分析 – 第三天：上手pandas（3） 大数据排序 sort_index方法 这个函数呢，你看到它的参数有很...
- 文章目录 1、序言2、2-3树2.1、2-3树的插入2.2 2-3树的删除 3、B树4、B树的典型应用 1、序言 曾今我不知道多叉树有上面用，所以对于多叉树并没有过多的关注，或者说，基本没关注。 直到我了解到了多路查找树（B树），我知道，是我浅薄了。 先不说那些高深莫测的内容，我们就通俗的聊聊。 我们现在常说大数据大数据，就算没说过也听过... 文章目录 1、序言2、2-3树2.1、2-3树的插入2.2 2-3树的删除 3、B树4、B树的典型应用 1、序言 曾今我不知道多叉树有上面用，所以对于多叉树并没有过多的关注，或者说，基本没关注。 直到我了解到了多路查找树（B树），我知道，是我浅薄了。 先不说那些高深莫测的内容，我们就通俗的聊聊。 我们现在常说大数据大数据，就算没说过也听过...
- 支部党员大会讨论接收预备党员的主要程序 召开支部大会讨论接收预备党员，是党章规定的必须履行的入党手续，因此，党支部必须认真开好接收预备党员的支部大会。 主要程序 （1）一般由支部书记担任会议主持人，宣布开会，报告出席会议的党员人数，提出会议的议题及开好会议的具体要求。 （2）发展对象宣读《入党志愿书》，汇报自己对党的认识、入党动机、本人履历、现实表现、家... 支部党员大会讨论接收预备党员的主要程序 召开支部大会讨论接收预备党员，是党章规定的必须履行的入党手续，因此，党支部必须认真开好接收预备党员的支部大会。 主要程序 （1）一般由支部书记担任会议主持人，宣布开会，报告出席会议的党员人数，提出会议的议题及开好会议的具体要求。 （2）发展对象宣读《入党志愿书》，汇报自己对党的认识、入党动机、本人履历、现实表现、家...
- #22个免费的数据可视化和分析工具推荐 本文总结推荐22个免费的数据可视化和分析工具。列表如下： ##数据清理（Data cleaning） 当你分析和可视化数据前，常需要“清理”工作。比如一些输入性列表“New York City" ，同时其他人会说"New York, NY" 。因此你需要标准化这些工作，使之可以看到统... #22个免费的数据可视化和分析工具推荐 本文总结推荐22个免费的数据可视化和分析工具。列表如下： ##数据清理（Data cleaning） 当你分析和可视化数据前，常需要“清理”工作。比如一些输入性列表“New York City" ，同时其他人会说"New York, NY" 。因此你需要标准化这些工作，使之可以看到统...
- 来源 | ITWord整理自网络 全球最厉害的14位程序员是谁？一起来看下让我们膜拜的这些大神都有哪些？排名不分先后！ 01 Jon Skeet 个人名望：程序技术问答网站Stack Overflow总排名第一的大神，每月的问答量保持在425个左右。 个人简介/主要荣誉：谷歌软件工程师，代表作有《深入理解C#(C# In Depth)》。 网络上对Jo... 来源 | ITWord整理自网络 全球最厉害的14位程序员是谁？一起来看下让我们膜拜的这些大神都有哪些？排名不分先后！ 01 Jon Skeet 个人名望：程序技术问答网站Stack Overflow总排名第一的大神，每月的问答量保持在425个左右。 个人简介/主要荣誉：谷歌软件工程师，代表作有《深入理解C#(C# In Depth)》。 网络上对Jo...
- 目录 1、高考是个什么难度级别的考试 2、未来高考人数会变少吗？ 3、各地高考人数差异巨大 4、各地高考难度评级 5、上海能上到高中的人只有一半？——这是全国各地的普遍情况 6、部分省市点评 不同省份的高考难度，一直是一个争议严重的问题。 每个地方的人，都会觉得自己是比较难的那一个。因为其实不管在哪里，高考都是件不容易的事情。 高考录取，本质上是一种“省内... 目录 1、高考是个什么难度级别的考试 2、未来高考人数会变少吗？ 3、各地高考人数差异巨大 4、各地高考难度评级 5、上海能上到高中的人只有一半？——这是全国各地的普遍情况 6、部分省市点评 不同省份的高考难度，一直是一个争议严重的问题。 每个地方的人，都会觉得自己是比较难的那一个。因为其实不管在哪里，高考都是件不容易的事情。 高考录取，本质上是一种“省内...
- 一、MapReduce 安装 （1）分布式计算概述 访问 master:8088 查看yarn 是否启动成功。 （2）验证mapreduce 是否安装成功 运行 hadoop 安装包中 自带的 mapreduce 正则匹配例子。 看到控制台有如下输出说明mapReduce 任务正在运行中，同时可以在yarn 监控界面上看到任务执行记录 二、ha... 一、MapReduce 安装 （1）分布式计算概述 访问 master:8088 查看yarn 是否启动成功。 （2）验证mapreduce 是否安装成功 运行 hadoop 安装包中 自带的 mapreduce 正则匹配例子。 看到控制台有如下输出说明mapReduce 任务正在运行中，同时可以在yarn 监控界面上看到任务执行记录 二、ha...
- 目录 一、HDFS常用操作命令 二、HDFS文件恢复机制 三、hadoop的window本地安装 四、mapreduce 单元测试、集成测试及验证 一、HDFS常用操作命令 查看根目录下的文件 hadoop fs -ls hdfs://master:9999/ 或 hadoop fs -ls / hadoop fs -ls -h... 目录 一、HDFS常用操作命令 二、HDFS文件恢复机制 三、hadoop的window本地安装 四、mapreduce 单元测试、集成测试及验证 一、HDFS常用操作命令 查看根目录下的文件 hadoop fs -ls hdfs://master:9999/ 或 hadoop fs -ls / hadoop fs -ls -h...
- 目录 一、HDFS HA 集群规划 二、修改hdfs-site 和 core-site 配置 三、同步namenode 的 EditsLog 数据 四、配置自动状态改变 五、杀死一个active状态的namenode进行验证 六、实现HA中的 zookeeper 的作用 七、清理垃圾数据 八、配置yarn（ResourceManager） 的集群 一、HD... 目录 一、HDFS HA 集群规划 二、修改hdfs-site 和 core-site 配置 三、同步namenode 的 EditsLog 数据 四、配置自动状态改变 五、杀死一个active状态的namenode进行验证 六、实现HA中的 zookeeper 的作用 七、清理垃圾数据 八、配置yarn（ResourceManager） 的集群 一、HD...
- 目录 前言 一、使用http的方式访问hdfs 二、hdfs各组件及其作用 三、hdfs中的数据块（Block） 四、java api 操作hdfs 五、java 开发 hdfs 应用时注意的事项 六、DataNode心跳机制的作用 七、NameNode中EditsLog 和FSImage 的作用 八、SecondaryNameNode ... 目录 前言 一、使用http的方式访问hdfs 二、hdfs各组件及其作用 三、hdfs中的数据块（Block） 四、java api 操作hdfs 五、java 开发 hdfs 应用时注意的事项 六、DataNode心跳机制的作用 七、NameNode中EditsLog 和FSImage 的作用 八、SecondaryNameNode ...
- 写在前面：博主是一只经过实战开发历练后投身培训事业的“小山猪”，昵称取自动画片《狮子王》中的“彭彭”，总是以乐观、积极的心态对待周边的事物。本人的技术路线从Java全栈工程师一路奔向大数据开发、数据挖掘领域，如今终有小成，愿将昔日所获与大家交流一二，希望对学习路上的你有所助益。同时，博主也想通过此次尝试打造一个完善的技术图书馆，任何与文章技术点有关的异常、错误、注... 写在前面：博主是一只经过实战开发历练后投身培训事业的“小山猪”，昵称取自动画片《狮子王》中的“彭彭”，总是以乐观、积极的心态对待周边的事物。本人的技术路线从Java全栈工程师一路奔向大数据开发、数据挖掘领域，如今终有小成，愿将昔日所获与大家交流一二，希望对学习路上的你有所助益。同时，博主也想通过此次尝试打造一个完善的技术图书馆，任何与文章技术点有关的异常、错误、注...
- 一、zookeeper 下载 安装 cdh 版本的 zookeeper 下载地址 http://archive.cloudera.com/cdh5/cdh/5/zookeeper-3.4.5-cdh5.7.0.tar.gz 解压 tar -zxvf zookeeper-3.4.5-cdh5.7.0.tar.gz 配置环境变量 export ZK_HOME=/home/h... 一、zookeeper 下载 安装 cdh 版本的 zookeeper 下载地址 http://archive.cloudera.com/cdh5/cdh/5/zookeeper-3.4.5-cdh5.7.0.tar.gz 解压 tar -zxvf zookeeper-3.4.5-cdh5.7.0.tar.gz 配置环境变量 export ZK_HOME=/home/h...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源，3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源，3步轻松管理成本，帮助提升日常管理效率！
回顾中
热门标签