- 一说到CDN,就感觉心情很复杂,曾经从一个完全不入门的小白,短短的2年内,将运营商的CDN业务从零开始做起,搞得风风火火,在公司云业务发展的初期,CDN业务占据了很大一部分的收入。可不曾想到,短短几年内,国内以网宿为代表的传统CDN厂商(包括运营商CDN业务),被阿里云为代表的互联网公司以低价疯狂掠夺CDN市场,将流媒体业务CDN加速的价格从20多元/M/月,一直打压到现在的几块钱!然而,市... 一说到CDN,就感觉心情很复杂,曾经从一个完全不入门的小白,短短的2年内,将运营商的CDN业务从零开始做起,搞得风风火火,在公司云业务发展的初期,CDN业务占据了很大一部分的收入。可不曾想到,短短几年内,国内以网宿为代表的传统CDN厂商(包括运营商CDN业务),被阿里云为代表的互联网公司以低价疯狂掠夺CDN市场,将流媒体业务CDN加速的价格从20多元/M/月,一直打压到现在的几块钱!然而,市...
- ### 区块链定义 狭义上, 区块链是一种以区块为基本单位的链式数据结构, 区块中利用数字摘要对之前的交易历史进行校验, 适合分布式记账场景下防篡改和可扩展性的需求。 广义上, 区块链还指代基于区块链结构实现的分布式记账技术, 包括分布式共识、 隐私与安全保护、 点对点通信技术、 网络协议、 智能合约等。 区块链并不是凭空出现的新技术、而是多种技术在其商业应用场景推动下衍生的产物... ### 区块链定义 狭义上, 区块链是一种以区块为基本单位的链式数据结构, 区块中利用数字摘要对之前的交易历史进行校验, 适合分布式记账场景下防篡改和可扩展性的需求。 广义上, 区块链还指代基于区块链结构实现的分布式记账技术, 包括分布式共识、 隐私与安全保护、 点对点通信技术、 网络协议、 智能合约等。 区块链并不是凭空出现的新技术、而是多种技术在其商业应用场景推动下衍生的产物...
- 分布式SQL引擎 分布式SQL引擎
- 从Hadoop MR到Spark 从Hadoop MR到Spark
- Kafka是由LinkedIn开发的一个分布式的消息系统,使用Scala编写,它以可水平扩展和高吞吐率而被广泛使用。目前越来越多的开源分布式处理系统如Cloudera、Apache Storm、Spark都支持与Kafka集成。 Kafka是由LinkedIn开发的一个分布式的消息系统,使用Scala编写,它以可水平扩展和高吞吐率而被广泛使用。目前越来越多的开源分布式处理系统如Cloudera、Apache Storm、Spark都支持与Kafka集成。
- Storm分布式集群搭建 Storm分布式集群搭建
- CAP理论概述 一个分布式系统最多只能同时满足一致性(Consistency)、可用性(Availability)和分区容错性(Partition tolerance)这三项中的两项。 CAP理论概述 一个分布式系统最多只能同时满足一致性(Consistency)、可用性(Availability)和分区容错性(Partition tolerance)这三项中的两项。
- Storm集群的架构图 Storm集群的架构图
- HBase 的安装有两种方式:单机安装和分布式安装。HBase的单机安装了解即可,大家重点掌握HBase 分布式集群的安装。 HBase 的安装有两种方式:单机安装和分布式安装。HBase的单机安装了解即可,大家重点掌握HBase 分布式集群的安装。
- 本次使用hadoop2.6.0版本配置Hadoop集群,同时配置NameNode+HA、ResourceManager+HA,并使用zookeeper来管理Hadoop集群。 本次使用hadoop2.6.0版本配置Hadoop集群,同时配置NameNode+HA、ResourceManager+HA,并使用zookeeper来管理Hadoop集群。
- ZooKeeper 安装部署分为三种模式 ZooKeeper 安装部署分为三种模式
- ZooKeeper 是一个针对大型分布式系统的可靠协调系统;它提供的功能包括:配置维护、名字服务、分布式同步、组服务等; 它的目标就是封装好复杂易出错的关键服务,将简单易用的接口和性能高效、功能稳定的系统提供给用户; ZooKeeper 已经成为 Hadoop 生态系统中的基础组件。 ZooKeeper 是一个针对大型分布式系统的可靠协调系统;它提供的功能包括:配置维护、名字服务、分布式同步、组服务等; 它的目标就是封装好复杂易出错的关键服务,将简单易用的接口和性能高效、功能稳定的系统提供给用户; ZooKeeper 已经成为 Hadoop 生态系统中的基础组件。
- Join操作概述在关系型数据库中 Join 是非常常见的操作,各种优化手段已经到了极致。在海量数据的环境下,不可避免的也会碰到这种类型的需求, 例如在数据分析时需要连接从不同的数据源中获取到数据。不同于传统的单机模式,在分布式存储下采用 MapReduce 编程模型,也有相应的处理措施和优化方法。我们先简要地描述待解决的问题。假设有两个数据集:气象站数据库和天气记录数据库,并考虑如何合二为一... Join操作概述在关系型数据库中 Join 是非常常见的操作,各种优化手段已经到了极致。在海量数据的环境下,不可避免的也会碰到这种类型的需求, 例如在数据分析时需要连接从不同的数据源中获取到数据。不同于传统的单机模式,在分布式存储下采用 MapReduce 编程模型,也有相应的处理措施和优化方法。我们先简要地描述待解决的问题。假设有两个数据集:气象站数据库和天气记录数据库,并考虑如何合二为一...
- Hadoop主要由HDFS和MapReduce 两个核心部分组成。其中最底部就是HDFS,它被用来存储Hadoop 集群中所有存储节点上的文件。 Hadoop主要由HDFS和MapReduce 两个核心部分组成。其中最底部就是HDFS,它被用来存储Hadoop 集群中所有存储节点上的文件。
- Hadoop伪分布式集群的安装部署Hadoop伪分布式集群的安装部署首先可以为Linux虚拟机搭建起来的最初状态做一个快照,方便后期搭建分布式集群时多台Linux虚拟机的准备。一、如何为虚拟机做快照? 1、什么是快照? 快照就是对当前的虚拟机状态进行拍照,保留虚拟机当前状态的操作信息。 2、为什么要为虚拟机做快照? 第一:为克隆不同状态的虚拟机提前做准备。 ... Hadoop伪分布式集群的安装部署Hadoop伪分布式集群的安装部署首先可以为Linux虚拟机搭建起来的最初状态做一个快照,方便后期搭建分布式集群时多台Linux虚拟机的准备。一、如何为虚拟机做快照? 1、什么是快照? 快照就是对当前的虚拟机状态进行拍照,保留虚拟机当前状态的操作信息。 2、为什么要为虚拟机做快照? 第一:为克隆不同状态的虚拟机提前做准备。 ...
上滑加载中
推荐直播
-
昇腾AI算法挑战赛-核心算子如何优化?专家带你深度解析2025/11/17 周一 16:00-17:00
王老师 华为算子专家
昇腾AI算法挑战赛进阶赛战鼓催征!本期直播间,我们特邀华为算子专家王老师,为你深度剖析Matmul、wholereducesum等核心算子的底层原理与优化技巧,直击赛题核心。想提升代码效率、冲击更高排名?锁定直播,带你破局!
回顾中 -
AI编码实干派,“码”力全开2026/02/26 周四 15:00-16:30
谈宗玮/于邦旭/丁俊卿/陈云亮/王一男
【中国,深圳,2026年2月26日】,以“AI编码实干派,码力全开”为主题的华为云码道(CodeArts)代码智能体新春发布会在线上成功召开。华为云码道公测版正式发布,为开发者和企业提供具备工程化能力的智能编码解决方案。
回顾中 -
华为云码道-玩转OpenClaw,开启在线养虾模式2026/03/11 周三 19:00-20:00
刘昱,华为云高级工程师/谈心,华为云技术专家/李海仑,上海圭卓智能科技有限公司CEO
OpenClaw 火爆开发者圈,华为云码道最新推出 Skill ——开发者只需输入一句口令,即可部署一个功能完整的「小龙虾」智能体。直播带你玩转华为云码道,玩转OpenClaw
回顾中
热门标签