- 前言前面已经介绍了HetuEngine是什么以及应用场景与案例，想必读者对HetuEngine已经有了一个初步的了解，本篇文章将手把手带你进行集群部署和资源规划，开启玩转HetuEngine第一步。HetuEngine支持在服务层角色实例和计算实例两个维度进行资源规划，并且支持在高并发场景下通过启动多个计算实例进行负载分担和均衡，从而满足各种业务场景下的资源规划需求。一、HetuEngine... 前言前面已经介绍了HetuEngine是什么以及应用场景与案例，想必读者对HetuEngine已经有了一个初步的了解，本篇文章将手把手带你进行集群部署和资源规划，开启玩转HetuEngine第一步。HetuEngine支持在服务层角色实例和计算实例两个维度进行资源规划，并且支持在高并发场景下通过启动多个计算实例进行负载分担和均衡，从而满足各种业务场景下的资源规划需求。一、HetuEngine...
- 前言前面已经介绍了HetuEngine是什么，本篇文章讲带你了解HetuEngine常见的应用场景，与业务场景相结合，判断HetuEngine是否适应于业务场景。HetuEngine常见应用场景交互式查询场景 现状和挑战：查询慢：数据从入湖、Hive批加工，再搬迁到DWS进行交互式分析，整个链条数据消费时延长，对“反欺诈”、“实时风控”等高效应用存在不满足的情况；效率低：数据从Hadoop... 前言前面已经介绍了HetuEngine是什么，本篇文章讲带你了解HetuEngine常见的应用场景，与业务场景相结合，判断HetuEngine是否适应于业务场景。HetuEngine常见应用场景交互式查询场景 现状和挑战：查询慢：数据从入湖、Hive批加工，再搬迁到DWS进行交互式分析，整个链条数据消费时延长，对“反欺诈”、“实时风控”等高效应用存在不满足的情况；效率低：数据从Hadoop...
- 强化学习从基础到进阶-常见问题和面试必知必答5：：梯度策略、添加基线（baseline）、优势函数、动作分配合适的分数（credit） 强化学习从基础到进阶-常见问题和面试必知必答5：：梯度策略、添加基线（baseline）、优势函数、动作分配合适的分数（credit）
- Spark是一个快速、可扩展的大数据处理引擎，它提供了一个统一的编程模型，可以处理各种数据源，包括Hadoop HDFS、Hive、Cassandra、HBase等。本文将介绍Spark的基本概念和使用方法，帮助初学者快速入门。一、Spark的基本概念Spark应用程序Spark应用程序是由Spark API编写的程序，它们运行在Spark集群上，可以对大数据进行处理和分析。Spark应用程... Spark是一个快速、可扩展的大数据处理引擎，它提供了一个统一的编程模型，可以处理各种数据源，包括Hadoop HDFS、Hive、Cassandra、HBase等。本文将介绍Spark的基本概念和使用方法，帮助初学者快速入门。一、Spark的基本概念Spark应用程序Spark应用程序是由Spark API编写的程序，它们运行在Spark集群上，可以对大数据进行处理和分析。Spark应用程...
- 引言有这样的一个面试题:给20亿个不重复的unsigned int的整数的文件,每一行一个数字，没排过序的，然后再给一个数，如何快速判断这个数是否在那20亿个数当中？在php中,其实是有sort 和in_array函数可以实现的,例如:<?php$arr = [ 5,8,1,3,54,745,123];var_dump($arr);sort($arr);var_dump($arr);var... 引言有这样的一个面试题:给20亿个不重复的unsigned int的整数的文件,每一行一个数字，没排过序的，然后再给一个数，如何快速判断这个数是否在那20亿个数当中？在php中,其实是有sort 和in_array函数可以实现的,例如:<?php$arr = [ 5,8,1,3,54,745,123];var_dump($arr);sort($arr);var_dump($arr);var...
- 强化学习从基础到进阶-常见问题和面试必知必答[2]：马尔科夫决策、贝尔曼方程、动态规划、策略价值迭代 强化学习从基础到进阶-常见问题和面试必知必答[2]：马尔科夫决策、贝尔曼方程、动态规划、策略价值迭代
- 在当今大数据时代，实时数据分析和大数据处理对于许多企业和组织来说至关重要。华为云提供了一系列功能强大的服务和工具，使开发人员能够轻松在云上构建和管理实时数据分析和大数据处理解决方案。本文将介绍如何利用华为云的服务和技术实现这一目标，并提供相应的实例代码。步骤1：创建云服务器和存储资源首先，在华为云上创建一个云服务器实例，选择适当的规格和配置。同时，创建一个存储桶或文件系统，用于存储数据和结果... 在当今大数据时代，实时数据分析和大数据处理对于许多企业和组织来说至关重要。华为云提供了一系列功能强大的服务和工具，使开发人员能够轻松在云上构建和管理实时数据分析和大数据处理解决方案。本文将介绍如何利用华为云的服务和技术实现这一目标，并提供相应的实例代码。步骤1：创建云服务器和存储资源首先，在华为云上创建一个云服务器实例，选择适当的规格和配置。同时，创建一个存储桶或文件系统，用于存储数据和结果...
- 合运用 Flink 的各种 API，基于 EventTime 实现分析电商用户行为。 合运用 Flink 的各种 API，基于 EventTime 实现分析电商用户行为。
- 前言什么是爬虫网络爬虫(Web Spider)又叫网络蜘蛛，或者网络机器人(在FOAF社区中间，更经常的称为网页追逐者)，正如他的英文名一样,很形象的一个名字。把互联网比喻成一个蜘蛛网，那么Spider就是在网上爬来爬去的蜘蛛。它是一种按照一定的规则，自动的抓取万维网信息的程序或者脚本。其中的工作原理就是通过编程让程序自动化,模拟人的操作,模仿人给服务器发送请求,从返回的信息中抓取需要的数据... 前言什么是爬虫网络爬虫(Web Spider)又叫网络蜘蛛，或者网络机器人(在FOAF社区中间，更经常的称为网页追逐者)，正如他的英文名一样,很形象的一个名字。把互联网比喻成一个蜘蛛网，那么Spider就是在网上爬来爬去的蜘蛛。它是一种按照一定的规则，自动的抓取万维网信息的程序或者脚本。其中的工作原理就是通过编程让程序自动化,模拟人的操作,模仿人给服务器发送请求,从返回的信息中抓取需要的数据...
- 制作趋势分析图表一、折线图反应数据变化的趋势表，需求：使用折线图展示"2022年点播订单表"每日营收金额变化。新建页面并命名为折线图，在可视化区域点击"折线图"，然后按照如下配置：美化图表格式，打开可视化区域中的"设置视觉对象格式"，按照如下步骤设置格式：视觉对象中打开"数据标签"，设置"值"中的单位为无视觉对象中打开"缩放滑块"常规对象中修改"标题"为"2022年每日营收金额"并居中显示... 制作趋势分析图表一、折线图反应数据变化的趋势表，需求：使用折线图展示"2022年点播订单表"每日营收金额变化。新建页面并命名为折线图，在可视化区域点击"折线图"，然后按照如下配置：美化图表格式，打开可视化区域中的"设置视觉对象格式"，按照如下步骤设置格式：视觉对象中打开"数据标签"，设置"值"中的单位为无视觉对象中打开"缩放滑块"常规对象中修改"标题"为"2022年每日营收金额"并居中显示...
- 制作对比分析图表一、表表主要用来记录数据信息，需求：使用表展示每个门店总营收金额对比情况。新建页面，在可视化区域点击"表"，然后按照如下配置：美化图表格式，打开可视化区域中的"设置视觉对象格式"，按照如下步骤设置格式：视觉对象中"值"的字体设置为12视觉对象中"列标题"的字体设置为12，字体加粗、背景色为蓝色、标题对齐方式设置居中在常规"效果"打开视觉对象边框二、矩阵矩阵能够快速对数据进行汇... 制作对比分析图表一、表表主要用来记录数据信息，需求：使用表展示每个门店总营收金额对比情况。新建页面，在可视化区域点击"表"，然后按照如下配置：美化图表格式，打开可视化区域中的"设置视觉对象格式"，按照如下步骤设置格式：视觉对象中"值"的字体设置为12视觉对象中"列标题"的字体设置为12，字体加粗、背景色为蓝色、标题对齐方式设置居中在常规"效果"打开视觉对象边框二、矩阵矩阵能够快速对数据进行汇...
- 如果把数据分析比作盖房子，那么数据分析方法就是设计方案，解决房子装修的各种问题。如果没有学习数据分析方法，在面对一堆数据分析问题时，只会手足无措，根本不知道从哪里开始分析，需要分析什么。 如果把数据分析比作盖房子，那么数据分析方法就是设计方案，解决房子装修的各种问题。如果没有学习数据分析方法，在面对一堆数据分析问题时，只会手足无措，根本不知道从哪里开始分析，需要分析什么。
- Apache Flink架构介绍一、Flink组件栈在Flink的整个软件架构体系中，同样遵循这分层的架构设计理念，在降低系统耦合度的同时，也为上层用户构建Flink应用提供了丰富且友好的接口。上图是Flink基本组件栈，从上图可以看出整个Flink的架构体系可以分为三层，从下往上依次是物理部署层、Runtime 核心层、API&Libraries层。物理部署层：该层主要涉及Flink的部署... Apache Flink架构介绍一、Flink组件栈在Flink的整个软件架构体系中，同样遵循这分层的架构设计理念，在降低系统耦合度的同时，也为上层用户构建Flink应用提供了丰富且友好的接口。上图是Flink基本组件栈，从上图可以看出整个Flink的架构体系可以分为三层，从下往上依次是物理部署层、Runtime 核心层、API&Libraries层。物理部署层：该层主要涉及Flink的部署...
- 使用Maxwell增量和全量同步MySQL数据一、使用Maxwell同步MySQL数据首先下载Maxwell,Maxwell下载地址：https://github.com/zendesk/maxwell/releases/tag/v1.28.2现在版本1.30.0版本之上需要jdk11以上，建议下载1.30.0版本以下版本。下载完成后按照如下步骤进行配置，同步MySQL数据到Kafka，前提... 使用Maxwell增量和全量同步MySQL数据一、使用Maxwell同步MySQL数据首先下载Maxwell,Maxwell下载地址：https://github.com/zendesk/maxwell/releases/tag/v1.28.2现在版本1.30.0版本之上需要jdk11以上，建议下载1.30.0版本以下版本。下载完成后按照如下步骤进行配置，同步MySQL数据到Kafka，前提...
- 去年来到了俄罗斯读研究生，专业是信息学，课程中也涉及到了物联网相关的知识，今天接带大家看看俄罗斯眼中物联网的定义究竟是什么样子，顺便也回顾一下我学过的知识，本人学习课程是《物联网概述》，所以基本上前面部分都是一些概述内容： 首先说一下什么是物联网，物联网 (IoT) 是一种将设备连接到计算机网络并允许它们通过软件、应用程序或技术设备收集、分析、处理和传输数据给其他对... 去年来到了俄罗斯读研究生，专业是信息学，课程中也涉及到了物联网相关的知识，今天接带大家看看俄罗斯眼中物联网的定义究竟是什么样子，顺便也回顾一下我学过的知识，本人学习课程是《物联网概述》，所以基本上前面部分都是一些概述内容： 首先说一下什么是物联网，物联网 (IoT) 是一种将设备连接到计算机网络并允许它们通过软件、应用程序或技术设备收集、分析、处理和传输数据给其他对...
上滑加载中
推荐直播
-
Skill 构建 × 智能创作：基于华为云码道的 AI 内容生产提效方案2026/03/25 周三 19:00-20:00
余伟，华为云软件研发工程师/万邵业（万少），华为云HCDE开发者专家
本次直播带来两大实战：华为云码道 Skill-Creator 手把手搭建专属知识库 Skill；如何用码道提效 OpenClaw 小说文本，打造从大纲到成稿的 AI 原创小说全链路。技术干货 + OPC创作思路，一次讲透！
回顾中 -
码道新技能，AI 新生产力——从自动视频生成到开源项目解析2026/04/08 周三 19:00-21:00
童得力-华为云开发者生态运营总监/何文强-无人机企业AI提效负责人
本次华为云码道 Skill 实战活动，聚焦两大 AI 开发场景：通过实战教学，带你打造 AI 编程自动生成视频 Skill，并实现对 GitHub 热门开源项目的智能知识抽取，手把手掌握 Skill 开发全流程，用 AI 提升研发效率与内容生产力。
回顾中 -
华为云码道：零代码股票智能决策平台全功能实战2026/04/18 周六 10:00-12:00
秦拳德-中软国际教育卓越研究院研究员、华为云金牌讲师、云原生技术专家
利用Tushare接口获取实时行情数据，采用Transformer算法进行时序预测与涨跌分析，并集成DeepSeek API提供智能解读。同时，项目深度结合华为云CodeArts（码道）的代码智能体能力，实现代码一键推送至云端代码仓库，建立起高效、可协作的团队开发新范式。开发者可快速上手，从零打造功能完整的个股筛选、智能分析与风险管控产品。
回顾中
热门标签