- 作者：小傅哥博客：https://bugstack.cn沉淀、分享、成长，让自己和他人都能有所收获！😄 一、来自深夜的电话！咋滴，你那上线的系统是裸奔呢？周末熟睡的深夜，突然接到老板电话☎的催促。“赶紧看微信、看微信，咋系统出问题了，我们都不知道，还得用户反馈才知道的！！！”深夜爬起来，打开电脑连上 VPN ，打着哈欠、睁开朦胧的眼睛，查查系统日志，原来是系统挂了，赶紧重启恢复！虽然重启恢... 作者：小傅哥博客：https://bugstack.cn沉淀、分享、成长，让自己和他人都能有所收获！😄 一、来自深夜的电话！咋滴，你那上线的系统是裸奔呢？周末熟睡的深夜，突然接到老板电话☎的催促。“赶紧看微信、看微信，咋系统出问题了，我们都不知道，还得用户反馈才知道的！！！”深夜爬起来，打开电脑连上 VPN ，打着哈欠、睁开朦胧的眼睛，查查系统日志，原来是系统挂了，赶紧重启恢复！虽然重启恢...
- DCS基于开源Redis、Memcached向用户提供一定程度定制化的缓存服务，因此，除了拥有开源服务缓存数据库的优秀特性，DCS提供更多实用功能。 DCS基于开源Redis、Memcached向用户提供一定程度定制化的缓存服务，因此，除了拥有开源服务缓存数据库的优秀特性，DCS提供更多实用功能。
- 本期精彩看点现在的模型以及其参数愈加复杂，这时你需要了解分布式训练Allreduce算法；让我们继续剖析鸿蒙轻内核的中断模块的源代码；从运维数据可视化和提高运维工具的易用性角度，来分析如何构建GaussDB(DWS)数据库智能运维系统的页面… 本期精彩看点现在的模型以及其参数愈加复杂，这时你需要了解分布式训练Allreduce算法；让我们继续剖析鸿蒙轻内核的中断模块的源代码；从运维数据可视化和提高运维工具的易用性角度，来分析如何构建GaussDB(DWS)数据库智能运维系统的页面…
- 在某些高性能工作负载业务场景下，需要使用大规模分布式离线计算。Volcano是在Kubernetes上运行高性能工作负载的容器批量计算引擎。锐天投资——基于Volcano的大规模分布式离线计算平台的应用实践，并且深度定制Volcano。 在某些高性能工作负载业务场景下，需要使用大规模分布式离线计算。Volcano是在Kubernetes上运行高性能工作负载的容器批量计算引擎。锐天投资——基于Volcano的大规模分布式离线计算平台的应用实践，并且深度定制Volcano。
- 揭秘一代数据库大侠的修炼秘笈同时支持和鼓励其他门派基于openGauss开放能力同时支持新增分片的数据在线重分布能力【第五招：混元功-丰富的企业级特性】5月31日华为云TechWave云基础设施专题日，将基于… 揭秘一代数据库大侠的修炼秘笈同时支持和鼓励其他门派基于openGauss开放能力同时支持新增分片的数据在线重分布能力【第五招：混元功-丰富的企业级特性】5月31日华为云TechWave云基础设施专题日，将基于…
- 在大学时学习Hadoop大数据技术的时候，安装配置Hadoop框架，发现找的一些资料介绍得不够详细，比如一些路径的变化没有说清楚，这对于初学者来说是不够友好的，所以在这里做个详细总结介绍一下Hadoop框架，以及Ubuntu版本的Hadoop伪分布式的安装配置。 在大学时学习Hadoop大数据技术的时候，安装配置Hadoop框架，发现找的一些资料介绍得不够详细，比如一些路径的变化没有说清楚，这对于初学者来说是不够友好的，所以在这里做个详细总结介绍一下Hadoop框架，以及Ubuntu版本的Hadoop伪分布式的安装配置。
- 《三天给你聊清楚redis》第3天说说redis大概怎么用，和面试题（18000字）五、实战5.1基础实战5.1.1实战点赞点赞功能随处可见，我们都知道点赞是一个非常高频的操作，redis就非常适合做这种工作。实现效果：分析：三种类型：给帖子点赞，给评论点赞，给回复点赞我们只实现查看点赞数量的话，只要一个int记录一下就可以，但是我们之后还想查看点赞的人，所以要把每一个点赞的信息都记录好，... 《三天给你聊清楚redis》第3天说说redis大概怎么用，和面试题（18000字）五、实战5.1基础实战5.1.1实战点赞点赞功能随处可见，我们都知道点赞是一个非常高频的操作，redis就非常适合做这种工作。实现效果：分析：三种类型：给帖子点赞，给评论点赞，给回复点赞我们只实现查看点赞数量的话，只要一个int记录一下就可以，但是我们之后还想查看点赞的人，所以要把每一个点赞的信息都记录好，...
- GaussDB(for openGauss)是分布式架构，数据分布在各个DN上，设计好的数据分布策略是分布式数据库设计中最关键的环节。 GaussDB(for openGauss)是分布式架构，数据分布在各个DN上，设计好的数据分布策略是分布式数据库设计中最关键的环节。
- DAOS (Distributed Asynchronous Object Storage) 是一个开源的对象存储系统，专为大规模分布式非易失性内存设计，利用了 SCM 和 NVMe 等的下一代 NVM 技术。 DAOS 同时在硬件之上提供了键值存储接口，提供了诸如事务性非阻塞 I/O、具有自我修复的高级数据保护、端到端数据完整性、细粒度数据控制和弹性存储的高级数据保护，从而优化性能并降低成本。 DAOS (Distributed Asynchronous Object Storage) 是一个开源的对象存储系统，专为大规模分布式非易失性内存设计，利用了 SCM 和 NVMe 等的下一代 NVM 技术。 DAOS 同时在硬件之上提供了键值存储接口，提供了诸如事务性非阻塞 I/O、具有自我修复的高级数据保护、端到端数据完整性、细粒度数据控制和弹性存储的高级数据保护，从而优化性能并降低成本。
- 我们在 前面 介绍了 nsq 的相关概念以及 nsq 的安装与应用以及 nsqd 的实现原理。本篇将会结合源码介绍 nsqlookupd 的实现细节。nsqlookupd 主要流程与上一篇文章介绍的 nsqd 执行逻辑相似，区别在于具体运行的任务不同。 入口函数在 nsq/apps/nsqlookupd/main.go 可以找到执行入口文件。// 位于apps/nsqlookupd/main... 我们在 前面 介绍了 nsq 的相关概念以及 nsq 的安装与应用以及 nsqd 的实现原理。本篇将会结合源码介绍 nsqlookupd 的实现细节。nsqlookupd 主要流程与上一篇文章介绍的 nsqd 执行逻辑相似，区别在于具体运行的任务不同。 入口函数在 nsq/apps/nsqlookupd/main.go 可以找到执行入口文件。// 位于apps/nsqlookupd/main...
- 今天教大家如何利用鲲鹏服务器搭建Hadoop全分布式集群，动起来··· 今天教大家如何利用鲲鹏服务器搭建Hadoop全分布式集群，动起来···
- 我们在 前面 介绍了 nsq 的相关概念以及 nsq 的安装与应用。从本篇开始将会结合源码介绍 nsq 的实现细节。nsq 中单个 nsqd 可以有多个 topic，每个 topic 可以有多个 channel。channel 接收这个 topic 所有消息的副本，从而实现多播分发，而 channel 上的每个消息被均匀的分发给它的订阅者，从而实现负载均衡。 入口函数首先看下 nsqd 的入... 我们在 前面 介绍了 nsq 的相关概念以及 nsq 的安装与应用。从本篇开始将会结合源码介绍 nsq 的实现细节。nsq 中单个 nsqd 可以有多个 topic，每个 topic 可以有多个 channel。channel 接收这个 topic 所有消息的副本，从而实现多播分发，而 channel 上的每个消息被均匀的分发给它的订阅者，从而实现负载均衡。 入口函数首先看下 nsqd 的入...
- 本文为基于500lineofcode的cluster项目分享。 本文为基于500lineofcode的cluster项目分享。
- Actor 管理 Actor 创建Actor的创建任务是由GCS服务来进行调度的，如下图在Python代码中创建一个Actor时，负责创建的worker首先同步注册actor到GCS中，这样可以确保Actor被创建之前worker就failure的场景下，所有的worker使用Actor的reference都可以发现这个failure一旦actor创建任务的所有输入依赖都被解析完成，cre... Actor 管理 Actor 创建Actor的创建任务是由GCS服务来进行调度的，如下图在Python代码中创建一个Actor时，负责创建的worker首先同步注册actor到GCS中，这样可以确保Actor被创建之前worker就failure的场景下，所有的worker使用Actor的reference都可以发现这个failure一旦actor创建任务的所有输入依赖都被解析完成，cre...
- 资源管理和调度Ray中的资源是任何“Key”->浮点数。为方便起见，Ray调度程序原生支持CPU、GPU和内存资源类型，Ray会自动检测每个节点上可用资源。同时，用户也可以使用任何有效字符串定义自定义资源需求，例如，指定{“某物”:1}的资源要求。分布式调度程序的目的是将来自所有者的资源请求与集群中的可用资源相匹配。资源请求是硬调度约束。例如，{“CPU”: 1.0, “GPU”: 1.0... 资源管理和调度Ray中的资源是任何“Key”->浮点数。为方便起见，Ray调度程序原生支持CPU、GPU和内存资源类型，Ray会自动检测每个节点上可用资源。同时，用户也可以使用任何有效字符串定义自定义资源需求，例如，指定{“某物”:1}的资源要求。分布式调度程序的目的是将来自所有者的资源请求与集群中的可用资源相匹配。资源请求是硬调度约束。例如，{“CPU”: 1.0, “GPU”: 1.0...
上滑加载中
推荐直播
-
崇本英才·智汇吴江·无人车挑战赛赛前培训2022/08/12 周五 19:00-21:00
无人车领域大咖
本次直播主要介绍初赛总结&开发者认证宣讲、决赛赛题介绍&决赛赛前备赛培训、往届优胜队伍经验分享。
回顾中 -
华为云杯“少年开发者”空中课堂 —— 体验人工智能2022/08/13 周六 14:00-15:00
刘烨 上海市高中通用技术学科中心组成员/复旦大学附属中学通用技术教师
华为云杯“少年开发者”空中课堂，特邀复旦附中讲师，助力初中阶段参赛选手在本次大赛中取得优异成绩！
回顾中 -
如何基于华为云开天aPaaS实现积木式应用创新2022/08/15 周一 19:00-21:00
包老师/梁老师
华为云开天aPaaS提供面向行业开发和使用的业务能力积木组装平台，简单几步实现应用创新，本次直播将解读aPaaS赛题，演示API->连接器->自动化流的过程和两个工业应用间的数据集成操作。
即将直播
热门标签