- 文章目录 一、引入问题 问题1：100副牌，没有大小王，差一张牌，确定缺少的那张牌。 问题2：100GB网站访问日志文件，找出访问次数最多的IP地址。 ... 文章目录 一、引入问题 问题1：100副牌，没有大小王，差一张牌，确定缺少的那张牌。 问题2：100GB网站访问日志文件，找出访问次数最多的IP地址。 ...
- Bash语言移植到了windows dos，所以很多语法和linux shell是一样的。 比如，文件读写用<和>即可，这种流的概念就和linux shell一样。 代码： @echo offset /p str1=<./in.txtset str2=%str1:b=kk%echo %str2% > out... Bash语言移植到了windows dos，所以很多语法和linux shell是一样的。 比如，文件读写用<和>即可，这种流的概念就和linux shell一样。 代码： @echo offset /p str1=<./in.txtset str2=%str1:b=kk%echo %str2% > out...
- 批处理的方法就是隔一段时间就分批处理一次积攒的数据。 一般情况下是先把数据存入数据库里，隔一段时间就从数据库获取数据 批处理的重点在于要在规定时间内处理所有数据。因此，数据的数量越多，执行处理的机器性能就得越好。 随着以后万物互联时代的来临，数据量也会成几何倍数增加。 人们需要处理从数量庞大的设备发来的传感器数据和图像等大型... 批处理的方法就是隔一段时间就分批处理一次积攒的数据。 一般情况下是先把数据存入数据库里，隔一段时间就从数据库获取数据 批处理的重点在于要在规定时间内处理所有数据。因此，数据的数量越多，执行处理的机器性能就得越好。 随着以后万物互联时代的来临，数据量也会成几何倍数增加。 人们需要处理从数量庞大的设备发来的传感器数据和图像等大型...
- 文章目录 题目讲解分析 题目 讲解分析 记住这样一个知识点，你就知道怎么做了。 计算要占CPUI/O不占CPU先出发的先执行计算使用CPU可以与I/O一起进行，但是I/O不能与... 文章目录 题目讲解分析 题目 讲解分析 记住这样一个知识点，你就知道怎么做了。 计算要占CPUI/O不占CPU先出发的先执行计算使用CPU可以与I/O一起进行，但是I/O不能与...
- 本篇博客小菌为大家带来的是MapReduce的自定义分区与ReduceTask内容的分享(ReduceMap... 本篇博客小菌为大家带来的是MapReduce的自定义分区与ReduceTask内容的分享(ReduceMap...
- 在之前的博客中,小菌为大家分享了MapReduce的整体流程。这篇博客,主要针对MapTask与Reduce... 在之前的博客中,小菌为大家分享了MapReduce的整体流程。这篇博客,主要针对MapTask与Reduce...
- 现在有一些订单的评论数据，需求: &... 现在有一些订单的评论数据，需求: &...
- 相信小伙伴们看了小菌上一篇博客《什么是MapReduce(入门篇)》后,对MapReduce的概念有了更深的... 相信小伙伴们看了小菌上一篇博客《什么是MapReduce(入门篇)》后,对MapReduce的概念有了更深的...
- 在之前的博客《MapReduce中shuffle阶段概述及计算任务流程》,小菌为大家分享了MapReduce... 在之前的博客《MapReduce中shuffle阶段概述及计算任务流程》,小菌为大家分享了MapReduce...
- 在小菌上一篇博客《什么是MapReduce(入门篇)》中,小菌已经为大家介绍了MapReduce的相关概念介... 在小菌上一篇博客《什么是MapReduce(入门篇)》中,小菌已经为大家介绍了MapReduce的相关概念介...
- 目录 1、Properties子类 2、Collection接口加强 3、数据流基本操作 4、MapReduce操作（重要） 5、总结 1、Properties子类 Properties是专门存储属性信息操作的类，其为Hashtable的子类，Hashtable能保存各种类型数据，但Properties类只能进行字符串数... 目录 1、Properties子类 2、Collection接口加强 3、数据流基本操作 4、MapReduce操作（重要） 5、总结 1、Properties子类 Properties是专门存储属性信息操作的类，其为Hashtable的子类，Hashtable能保存各种类型数据，但Properties类只能进行字符串数...
- 大家好，我是 梦想家Alex 。之前实际上我也写了不少关于大数据技术组件的文章，例如： &nb... 大家好，我是 梦想家Alex 。之前实际上我也写了不少关于大数据技术组件的文章，例如： &nb...
- 本文已收录github：https://github.com/BigDataScholar/TheKingOfBigData，里面有大数据高频考点，Java一线大厂面试题资源，上百本免费电子书籍，作... 本文已收录github：https://github.com/BigDataScholar/TheKingOfBigData，里面有大数据高频考点，Java一线大厂面试题资源，上百本免费电子书籍，作...
- 简单回顾一下矩阵乘法： 矩阵乘法要求左矩阵的列数与右矩阵的行数相等，m×n的矩阵A，与n×p的矩阵B相乘，结果为m×p的矩阵C。详细内容可以查看：矩阵乘法。 为了方便描述,先进行假设： 矩阵A的行数为m，列数为n，aij为矩阵A第i行j列的元素。矩阵B的行数为n，列数为p，bij为矩阵B第i行j列的元素。 分析 因为分布... 简单回顾一下矩阵乘法： 矩阵乘法要求左矩阵的列数与右矩阵的行数相等，m×n的矩阵A，与n×p的矩阵B相乘，结果为m×p的矩阵C。详细内容可以查看：矩阵乘法。 为了方便描述,先进行假设： 矩阵A的行数为m，列数为n，aij为矩阵A第i行j列的元素。矩阵B的行数为n，列数为p，bij为矩阵B第i行j列的元素。 分析 因为分布...
- 在HDFS系列完结之后,小伙伴们期待的MapReduce系列已经在向大家挥手了。本篇博客,小菌将为大家带来M... 在HDFS系列完结之后,小伙伴们期待的MapReduce系列已经在向大家挥手了。本篇博客,小菌将为大家带来M...
上滑加载中
推荐直播
-
Skill 构建 × 智能创作：基于华为云码道的 AI 内容生产提效方案2026/03/25 周三 19:00-20:00
余伟，华为云软件研发工程师/万邵业（万少），华为云HCDE开发者专家
本次直播带来两大实战：华为云码道 Skill-Creator 手把手搭建专属知识库 Skill；如何用码道提效 OpenClaw 小说文本，打造从大纲到成稿的 AI 原创小说全链路。技术干货 + OPC创作思路，一次讲透！
回顾中 -
码道新技能，AI 新生产力——从自动视频生成到开源项目解析2026/04/08 周三 19:00-21:00
童得力-华为云开发者生态运营总监/何文强-无人机企业AI提效负责人
本次华为云码道 Skill 实战活动，聚焦两大 AI 开发场景：通过实战教学，带你打造 AI 编程自动生成视频 Skill，并实现对 GitHub 热门开源项目的智能知识抽取，手把手掌握 Skill 开发全流程，用 AI 提升研发效率与内容生产力。
回顾中 -
华为云码道：零代码股票智能决策平台全功能实战2026/04/18 周六 10:00-12:00
秦拳德-中软国际教育卓越研究院研究员、华为云金牌讲师、云原生技术专家
利用Tushare接口获取实时行情数据，采用Transformer算法进行时序预测与涨跌分析，并集成DeepSeek API提供智能解读。同时，项目深度结合华为云CodeArts（码道）的代码智能体能力，实现代码一键推送至云端代码仓库，建立起高效、可协作的团队开发新范式。开发者可快速上手，从零打造功能完整的个股筛选、智能分析与风险管控产品。
回顾中
热门标签