- 为了解决现阶段大数据存算分离痛点问题，华为云大数据推出重量级数据湖Catalog服务。 为了解决现阶段大数据存算分离痛点问题，华为云大数据推出重量级数据湖Catalog服务。
- 异常体系分类Q： Throwable 和 Error的关系A： Throwable是Error(错误）的基类，也是Exception的基类1个好图，可看到常见的异常和errorQ： Error和Exception的关系A：Error一般是会直接引起jvm出错的错误，例如Java虚拟机运行错误等，如果出现了当前线程会无法继续运行。Excpetion是程序本身可以处理的异常。发生后还能正常运... 异常体系分类Q： Throwable 和 Error的关系A： Throwable是Error(错误）的基类，也是Exception的基类1个好图，可看到常见的异常和errorQ： Error和Exception的关系A：Error一般是会直接引起jvm出错的错误，例如Java虚拟机运行错误等，如果出现了当前线程会无法继续运行。Excpetion是程序本身可以处理的异常。发生后还能正常运...
- Grafana+Prometheus是目前非常流行监控方案，图形化展示非常强大。 Grafana+Prometheus是目前非常流行监控方案，图形化展示非常强大。
- 在自建Spark集群安装完后，当运行Spark On Yarn的作业运行时以及完成后，无法访问Task在Yarn上的日志。 在自建Spark集群安装完后，当运行Spark On Yarn的作业运行时以及完成后，无法访问Task在Yarn上的日志。
- 在云服务业务开发中，善于使用代码新特性，往往能让开发效率大大提升，这里简单介绍下lambad表达式及函数式接口特性。 在云服务业务开发中，善于使用代码新特性，往往能让开发效率大大提升，这里简单介绍下lambad表达式及函数式接口特性。
- 数据质量异常数据输出功能，可将质量作业中不符合设定规则的异常数据存储在异常表中，下面介绍如何通过DAYU中的数据质量模块实现异常数据的输出。 数据质量异常数据输出功能，可将质量作业中不符合设定规则的异常数据存储在异常表中，下面介绍如何通过DAYU中的数据质量模块实现异常数据的输出。
- 有关DAG作业依赖图的更多内容，华为云社区后续会持续更新。 有关DAG作业依赖图的更多内容，华为云社区后续会持续更新。
- 概述 上个版本简单的连线在一些复杂场景，尤其层级比较多，连线跨层级比较多的情况下，会出现线条会穿过矩形的情况，这一讲就是在这个基础上，去优化这个连线。场景分析 在下面几种情况下，简单版本的画法已经没法办规避障碍节点了。 这种情况,由于简单版本，我们只在整条路径上添加了2个拐点，这种画法，当出现上述情况，线条就会被B挡住，实际的需求，我们要规避... 概述 上个版本简单的连线在一些复杂场景，尤其层级比较多，连线跨层级比较多的情况下，会出现线条会穿过矩形的情况，这一讲就是在这个基础上，去优化这个连线。场景分析 在下面几种情况下，简单版本的画法已经没法办规避障碍节点了。 这种情况,由于简单版本，我们只在整条路径上添加了2个拐点，这种画法，当出现上述情况，线条就会被B挡住，实际的需求，我们要规避...
- 概述 分层布局弄好之后，每一层的节点上下的相对位置基本确定了，我们最简单的方式，就是每一层平铺所有节点，节点宽度固定以及间距固定，每个节点的位置基本就确定了。我们只要基于这些节点进行连线就可以了。方案思路 直线方式 最简单的方式就是直线，我们只要确定两个节点之间的相对具体坐标，然后两点之间画一条直线就可以了。效果如下 从上图可以看出，直线实现... 概述 分层布局弄好之后，每一层的节点上下的相对位置基本确定了，我们最简单的方式，就是每一层平铺所有节点，节点宽度固定以及间距固定，每个节点的位置基本就确定了。我们只要基于这些节点进行连线就可以了。方案思路 直线方式 最简单的方式就是直线，我们只要确定两个节点之间的相对具体坐标，然后两点之间画一条直线就可以了。效果如下 从上图可以看出，直线实现...
- 前一篇博客介绍了Spark-Redis入门篇：包括一些基础概念和重要的类、方法。Spark-Redis是用Spark在redis上面进行读写数据操作的包。其支持redis的所有数据结构。由于redis是基于内存的数据库，稳定性并不是很高，尤其是standalone模式下的redis。于是工作中在使用Spark-Redis时也会碰到很多问题，尤其是执行海量数据插入与查询的场景中。 前一篇博客介绍了Spark-Redis入门篇：包括一些基础概念和重要的类、方法。Spark-Redis是用Spark在redis上面进行读写数据操作的包。其支持redis的所有数据结构。由于redis是基于内存的数据库，稳定性并不是很高，尤其是standalone模式下的redis。于是工作中在使用Spark-Redis时也会碰到很多问题，尤其是执行海量数据插入与查询的场景中。
- Actor模型作为一种高性能网络中的并行处理方式由Carl Hewitt几十年前提出－高性能网络环境在当时还不可用。如今，硬件和基础设施的能力已经赶上并超越了Hewitt的愿景。因此，高要求的分布式系统的建造者遇到了不能完全由传统的面向对象编程(OOP)模型解决的挑战，但这可以从Actor模型中获益。今天，Actor模型不仅被认为是高效的解决方案——这已经被世界上要求最高的应用所检验。 Actor模型作为一种高性能网络中的并行处理方式由Carl Hewitt几十年前提出－高性能网络环境在当时还不可用。如今，硬件和基础设施的能力已经赶上并超越了Hewitt的愿景。因此，高要求的分布式系统的建造者遇到了不能完全由传统的面向对象编程(OOP)模型解决的挑战，但这可以从Actor模型中获益。今天，Actor模型不仅被认为是高效的解决方案——这已经被世界上要求最高的应用所检验。
- UAVStack是一个全维监控与应用运维平台。UAV.Monitor具备监控功能，包含基础监控、应用/服务性能监控、日志监控、业务监控等。在应用监控中，UAV可以根据应用实例画像；其中应用实例组件可以对日志、服务、客户端等进行画像；基于客户端的画像又分为Http、Dubbo、MQ、Kafka、JDBC、Redis、MongoDB等等。一、背景作为一个工作多年的程序员或运维人员，相信你一定遇到... UAVStack是一个全维监控与应用运维平台。UAV.Monitor具备监控功能，包含基础监控、应用/服务性能监控、日志监控、业务监控等。在应用监控中，UAV可以根据应用实例画像；其中应用实例组件可以对日志、服务、客户端等进行画像；基于客户端的画像又分为Http、Dubbo、MQ、Kafka、JDBC、Redis、MongoDB等等。一、背景作为一个工作多年的程序员或运维人员，相信你一定遇到...
- MRS是一个在华为云上部署和管理Hadoop系统的服务，一键即可部署Hadoop集群。我们可以使用官方文档提供API对MRS服务进行相关操作，如创建集群、删除集群、调整集群节点、创建作业并执行等。支持的全部操作可以参见官方文档API概览。但是如果基于文档去进行API的开发和调试，还是有一定的入门门槛， 依赖本地需要有API调用软件， 如果要开发代码还必须得有开发环境才能测试。例如创建集群的A... MRS是一个在华为云上部署和管理Hadoop系统的服务，一键即可部署Hadoop集群。我们可以使用官方文档提供API对MRS服务进行相关操作，如创建集群、删除集群、调整集群节点、创建作业并执行等。支持的全部操作可以参见官方文档API概览。但是如果基于文档去进行API的开发和调试，还是有一定的入门门槛， 依赖本地需要有API调用软件， 如果要开发代码还必须得有开发环境才能测试。例如创建集群的A...
- 近期工作上开始接触了大量容器化和华为云云容器引擎CCE的内容，因此整理学习了一堆有关容器化的知识，特此进行分享。在学习容器化之前，首先要了解一个内容，为什么要使用容器，好处是什么？ 兼容性问题我们在工程实践中，经常会遇到一些兼容性的问题，比如：ISA兼容：目标机器指令集的兼容性ABI兼容：目标系统或者依赖库的二进制兼容性环境兼容： 目标环境的兼容性。例如环境变量、配置、注册中心等。以一个多服... 近期工作上开始接触了大量容器化和华为云云容器引擎CCE的内容，因此整理学习了一堆有关容器化的知识，特此进行分享。在学习容器化之前，首先要了解一个内容，为什么要使用容器，好处是什么？ 兼容性问题我们在工程实践中，经常会遇到一些兼容性的问题，比如：ISA兼容：目标机器指令集的兼容性ABI兼容：目标系统或者依赖库的二进制兼容性环境兼容： 目标环境的兼容性。例如环境变量、配置、注册中心等。以一个多服...
- 云服务、API、SDK，调试，查看，我都行 阅读短文您可以学习到：人工智能AI之ModelArts的训练、识别、分析、分类1 Classroom和Toolkit的关系1.1 Classroom的简介classroom是基于华为云的云上软件教学服务，支持初级开发者和高校师生实现备课、上课、作业、考试、实验、实训等全教学流程的线上教学，提供多类习题自动判题、企业级DevOps... 云服务、API、SDK，调试，查看，我都行 阅读短文您可以学习到：人工智能AI之ModelArts的训练、识别、分析、分类1 Classroom和Toolkit的关系1.1 Classroom的简介classroom是基于华为云的云上软件教学服务，支持初级开发者和高校师生实现备课、上课、作业、考试、实验、实训等全教学流程的线上教学，提供多类习题自动判题、企业级DevOps...
上滑加载中
推荐直播
-
华为云云原生FinOps解决方案，为您释放云原生最大价值2024/04/24 周三 16:30-18:00
Roc 华为云云原生DTSE技术布道师
还在对CCE集群成本评估感到束手无策？还在担心不合理的K8s集群资源申请和过度浪费？华为云容器服务CCE全新上线云原生FinOps中心，为用户提供多维度集群成本可视化，结合智能规格推荐、混部、超卖等成本优化手段，助力客户降本增效，释放云原生最大价值。
回顾中 -
鲲鹏开发者创享日·江苏站暨数字技术创新应用峰会2024/04/25 周四 09:30-16:00
鲲鹏专家团
这是华为推出的旨在和众多技术大牛、行业大咖一同探讨最前沿的技术思考，分享最纯粹的技术经验，进行最真实的动手体验，为开发者提供一个深度探讨与交流的平台。
即将直播 -
产教融合专家大讲堂·第①期《高校人才培养创新模式经验分享》2024/04/25 周四 16:00-18:00
于晓东 上海杉达学院信息科学与技术学院副院长；崔宝才 天津电子信息职业技术学院电子与通信技术系主任
本期直播将与您一起探讨高校人才培养创新模式经验。
去报名
热门标签