- MapReduce作为一个面向海量数据分布式处理的计算模型、框架和平台，具备以下三个特点：1、易于编程：程序员仅需描述Map阶段和Reduce阶段要如何解析、处理数据，具体怎么读取数据并对处理结果进行排序、分区、组合、合并等等，都可以交由系统的执行框架处理。2、良好的扩展性：可通过添加节点以扩展集群运算能力。3、高容错性：在程序运行过程中，当某些节点发生故障时，通过计算迁移或数据迁移等策略在... MapReduce作为一个面向海量数据分布式处理的计算模型、框架和平台，具备以下三个特点：1、易于编程：程序员仅需描述Map阶段和Reduce阶段要如何解析、处理数据，具体怎么读取数据并对处理结果进行排序、分区、组合、合并等等，都可以交由系统的执行框架处理。2、良好的扩展性：可通过添加节点以扩展集群运算能力。3、高容错性：在程序运行过程中，当某些节点发生故障时，通过计算迁移或数据迁移等策略在...
- 上一篇文章讲述了一个服务如何从配置中心读取文件，配置中心如何从远程git读取配置文件，当服务实例很多时，都从配置中心读取文件，这时可以考虑将配置中心做成一个微服务，将其集群化，从而达到高可用 上一篇文章讲述了一个服务如何从配置中心读取文件，配置中心如何从远程git读取配置文件，当服务实例很多时，都从配置中心读取文件，这时可以考虑将配置中心做成一个微服务，将其集群化，从而达到高可用
- 在分布式系统中，由于服务数量巨多，为了方便服务配置文件统一管理，实时更新，所以需要分布式配置中心组件。在Spring Cloud中，有分布式配置中心组件spring cloud config ，它支持配置服务放在配置服务的内存中（即本地），也支持放在远程Git仓库中。在spring cloud config 组件中，分两个角色，一是config server，二是config client。 在分布式系统中，由于服务数量巨多，为了方便服务配置文件统一管理，实时更新，所以需要分布式配置中心组件。在Spring Cloud中，有分布式配置中心组件spring cloud config ，它支持配置服务放在配置服务的内存中（即本地），也支持放在远程Git仓库中。在spring cloud config 组件中，分两个角色，一是config server，二是config client。
- 分布式存储简单的来说，就是将数据分散存储到多个数据存储存储服务器上。分布式存储目前多借鉴Google的经验，在众多的服务器搭建一个分布式文件系统，再在这个分布式文件系统上实现相关的数据存储业务，甚至是再实现二级存储业务如Bigtable。分布式存储具有可扩展性、可用性、可靠性、 高性能、易维护、低成本等特性。分布式存储系统中面临着的首要问题就是如何将大量的数据分布在不同的存储节点上，无论上层... 分布式存储简单的来说，就是将数据分散存储到多个数据存储存储服务器上。分布式存储目前多借鉴Google的经验，在众多的服务器搭建一个分布式文件系统，再在这个分布式文件系统上实现相关的数据存储业务，甚至是再实现二级存储业务如Bigtable。分布式存储具有可扩展性、可用性、可靠性、 高性能、易维护、低成本等特性。分布式存储系统中面临着的首要问题就是如何将大量的数据分布在不同的存储节点上，无论上层...
- Masstransit作为.Net平台下的一款优秀的开源产品却没有得到应有的关注，这段时间有机会阅读了Masstransit的源码，我觉得我有必要普及一下这个框架的使用。值得一提的是Masstransit的源码写的非常优秀，值得每个想提高自己编程能力的.Net选手阅读，整个代码看起来赏心悦目。反之，每次打开自己公司项目的时候心情都异常沉重。所以不是.Net不行，还是咱们水平不行。学会了Mas... Masstransit作为.Net平台下的一款优秀的开源产品却没有得到应有的关注，这段时间有机会阅读了Masstransit的源码，我觉得我有必要普及一下这个框架的使用。值得一提的是Masstransit的源码写的非常优秀，值得每个想提高自己编程能力的.Net选手阅读，整个代码看起来赏心悦目。反之，每次打开自己公司项目的时候心情都异常沉重。所以不是.Net不行，还是咱们水平不行。学会了Mas...
- YARN调度资源的介绍 YARN调度资源的介绍
- HDFS基本原理的介绍 HDFS基本原理的介绍
- 项目中除了主流业务，往往带有很多附带功能，比如订单确认给客户发送邮件或者短信，流程审批完成给申请人发送审批完成消息，根据会员生日提前发生日问候 等等，这些功能一般都是以任务的形式存在，少量的任务还好，如果多了，一个集中管理任务的平台还是非常有必要的，xxl-job非常的优秀，是许雪里大神的作品，官方介绍在http://www.xuxueli.com/xxl-job/#/ 这篇文章主要介绍平台... 项目中除了主流业务，往往带有很多附带功能，比如订单确认给客户发送邮件或者短信，流程审批完成给申请人发送审批完成消息，根据会员生日提前发生日问候 等等，这些功能一般都是以任务的形式存在，少量的任务还好，如果多了，一个集中管理任务的平台还是非常有必要的，xxl-job非常的优秀，是许雪里大神的作品，官方介绍在http://www.xuxueli.com/xxl-job/#/ 这篇文章主要介绍平台...
- 随着项目的复杂度越来越高，微服务的盛行，各个中间件相互配合并发挥其优势，各种配置是避免不了的，以前尝试过配置放在文件，后来spring cloud 也推出了自己的spring cloud config 配置组件，功能上没有问题，但真正使用起来还是不顺手，顺势而为，携程开发部门开源了一套配置平台，官方介绍详见 https://github.com/ctripcorp/apollo，这篇文章主要... 随着项目的复杂度越来越高，微服务的盛行，各个中间件相互配合并发挥其优势，各种配置是避免不了的，以前尝试过配置放在文件，后来spring cloud 也推出了自己的spring cloud config 配置组件，功能上没有问题，但真正使用起来还是不顺手，顺势而为，携程开发部门开源了一套配置平台，官方介绍详见 https://github.com/ctripcorp/apollo，这篇文章主要...
- 阅读本文，代表你将和 奎因 一起，从 0 开始快速入门 flask 开发以及 mongodb 的使用，打造一个稳定、健壮的分布式多机服务器资源监控平台 阅读本文，代表你将和 奎因 一起，从 0 开始快速入门 flask 开发以及 mongodb 的使用，打造一个稳定、健壮的分布式多机服务器资源监控平台
- 博客园首页是需要分享干货的地方，今天早上写的《HRMS(人力资源管理系统)-从单机应用到SaaS应用-系统介绍》内容下架了，所以我就按照相关规定，只分享干货，我把之前写完的内容整理发布上来。这次主要分享一下在架构设计过程中涉及的基础知识，主要是涵盖系统架构方法、架构模式及设计模式，便于大家在后续一起探讨HRMS系统的SaaS模式的架构设计。一、设计模式 大家或多或少的都接触并在实... 博客园首页是需要分享干货的地方，今天早上写的《HRMS(人力资源管理系统)-从单机应用到SaaS应用-系统介绍》内容下架了，所以我就按照相关规定，只分享干货，我把之前写完的内容整理发布上来。这次主要分享一下在架构设计过程中涉及的基础知识，主要是涵盖系统架构方法、架构模式及设计模式，便于大家在后续一起探讨HRMS系统的SaaS模式的架构设计。一、设计模式 大家或多或少的都接触并在实...
- 深入浅出「熔断」 深入浅出「熔断」
- 最重要的是选择合适的 最重要的是选择合适的
- 常见的负载均衡策略和优缺点 常见的负载均衡策略和优缺点
- 为后文做个铺垫 为后文做个铺垫
上滑加载中
推荐直播
-
华为云码道-AI时代应用开发利器2026/03/18 周三 19:00-20:00
童得力，华为云开发者生态运营总监/姚圣伟，华为云HCDE开发者专家
本次直播由华为专家带你实战应用开发，看华为云码道(CodeArts)代码智能体如何在AI时代让你的创意应用快速落地。更有华为云HCDE开发者专家带你用码道玩转JiuwenClaw，让小艺成为你的AI助理。
回顾中 -
Skill 构建 × 智能创作：基于华为云码道的 AI 内容生产提效方案2026/03/25 周三 19:00-20:00
余伟，华为云软件研发工程师/万邵业（万少），华为云HCDE开发者专家
本次直播带来两大实战：华为云码道 Skill-Creator 手把手搭建专属知识库 Skill；如何用码道提效 OpenClaw 小说文本，打造从大纲到成稿的 AI 原创小说全链路。技术干货 + OPC创作思路，一次讲透！
回顾中 -
码道新技能，AI 新生产力——从自动视频生成到开源项目解析2026/04/08 周三 19:00-21:00
童得力-华为云开发者生态运营总监/何文强-无人机企业AI提效负责人
本次华为云码道 Skill 实战活动，聚焦两大 AI 开发场景：通过实战教学，带你打造 AI 编程自动生成视频 Skill，并实现对 GitHub 热门开源项目的智能知识抽取，手把手掌握 Skill 开发全流程，用 AI 提升研发效率与内容生产力。
回顾中
热门标签