- 目录一、背景和挖掘目标 1、RFM模型缺点分析2、原始数据情况3、挖掘目标二、分析方法与过程1、初步分析：提出适用航空公司的LRFMC模型2、总体流程 第一步：数据抽取第二步：探索性分析第三步：数据预处理第四步：构建模型总结和思考项目地址：Datamining_project: 数据挖掘实战项目代码一、背景和挖掘目标 在企业的客户关系管理中，对客户分类，区分不同价值的客户。针对不同价值的客户... 目录一、背景和挖掘目标 1、RFM模型缺点分析2、原始数据情况3、挖掘目标二、分析方法与过程1、初步分析：提出适用航空公司的LRFMC模型2、总体流程 第一步：数据抽取第二步：探索性分析第三步：数据预处理第四步：构建模型总结和思考项目地址：Datamining_project: 数据挖掘实战项目代码一、背景和挖掘目标 在企业的客户关系管理中，对客户分类，区分不同价值的客户。针对不同价值的客户...
- 产业发展服务平台，也可以称为“产业大脑”，是基于系统集成和经济调节智能化的理念，将资源要素数据、产业链数据、创新链数据、供应链数据、贸易流通数据等汇聚起来，运用云计算、大数据、人工智能、区块链等新一代信息技术，对地方产业发展和产业数字化转型进行即时分析、引导、调度、管理，实现产业链和创新链双向融合，推动数字经济高质量发展。 产业发展服务平台，也可以称为“产业大脑”，是基于系统集成和经济调节智能化的理念，将资源要素数据、产业链数据、创新链数据、供应链数据、贸易流通数据等汇聚起来，运用云计算、大数据、人工智能、区块链等新一代信息技术，对地方产业发展和产业数字化转型进行即时分析、引导、调度、管理，实现产业链和创新链双向融合，推动数字经济高质量发展。
- Apache Flink术语Flink计算框架可以处理批数据也可以处理流式数据，Flink将批处理看成是流处理的一个特例，认为数据原本产生就是实时的数据流，这种数据叫做无界流（unbounded stream），无界流是持续不断的产生没有边界，批数据只是无界流中的一部分叫做有界流（bounded stream），针对无界流数据处理叫做实时处理,这种程序一般是7*24不间断运行的；针对有界流数... Apache Flink术语Flink计算框架可以处理批数据也可以处理流式数据，Flink将批处理看成是流处理的一个特例，认为数据原本产生就是实时的数据流，这种数据叫做无界流（unbounded stream），无界流是持续不断的产生没有边界，批数据只是无界流中的一部分叫做有界流（bounded stream），针对无界流数据处理叫做实时处理,这种程序一般是7*24不间断运行的；针对有界流数...
- Flink HA搭建配置默认情况下，每个Flink集群只有一个JobManager，这将导致单点故障（SPOF，single point of failure），如果这个JobManager挂了，则不能提交新的任务，并且运行中的程序也会失败，这是我们可以对JobManager做高可用（High Availability，简称HA），JobManager HA集群当Active JobMana... Flink HA搭建配置默认情况下，每个Flink集群只有一个JobManager，这将导致单点故障（SPOF，single point of failure），如果这个JobManager挂了，则不能提交新的任务，并且运行中的程序也会失败，这是我们可以对JobManager做高可用（High Availability，简称HA），JobManager HA集群当Active JobMana...
- Flink On Yarn任务提交一、Flink On Yarn运行原理Flink On Yarn即Flink任务运行在Yarn集群中，Flink On Yarn的内部实现原理如下图：当启动一个新的Flink YARN Client会话时，客户端首先会检查所请求的资源（容器和内存）是否可用，之后，它会上传Flink配置和JAR文件到HDFS。客户端的下一步是向ResourceManager请... Flink On Yarn任务提交一、Flink On Yarn运行原理Flink On Yarn即Flink任务运行在Yarn集群中，Flink On Yarn的内部实现原理如下图：当启动一个新的Flink YARN Client会话时，客户端首先会检查所请求的资源（容器和内存）是否可用，之后，它会上传Flink配置和JAR文件到HDFS。客户端的下一步是向ResourceManager请...
- Flink本地模式开启WebUI在工作中我们一般使用IntelliJ IDEA开发工具进行代码开发，为了能方便快速的调试Flink和了解Flink程序的运行情况，我们希望本地开发工具中运行Flink时能查看到WebUI，这就可以在编写Flink程序时开启本地WebUI。一、在Flink 项目中添加本地模式 WebUI的依赖在Flink1.15版本之前根据使用Scala版本在Java Fli... Flink本地模式开启WebUI在工作中我们一般使用IntelliJ IDEA开发工具进行代码开发，为了能方便快速的调试Flink和了解Flink程序的运行情况，我们希望本地开发工具中运行Flink时能查看到WebUI，这就可以在编写Flink程序时开启本地WebUI。一、在Flink 项目中添加本地模式 WebUI的依赖在Flink1.15版本之前根据使用Scala版本在Java Fli...
- Flink History Server配置使用基于Standalone或者Yarn模式提交Flink任务后，当任务执行失败、取消或者完成后，可以在WebUI中查看对应任务的统计信息，这些统计信息在生产环境中对我们来说非常重要，可以知道一个任务异常挂掉前发生了什么，便于定位问题。当基于Standalone session模式提交相应任务时，集群重启后我们没有办法查看集群之前运行任务的情况，... Flink History Server配置使用基于Standalone或者Yarn模式提交Flink任务后，当任务执行失败、取消或者完成后，可以在WebUI中查看对应任务的统计信息，这些统计信息在生产环境中对我们来说非常重要，可以知道一个任务异常挂掉前发生了什么，便于定位问题。当基于Standalone session模式提交相应任务时，集群重启后我们没有办法查看集群之前运行任务的情况，...
- 1. 什么是物联网具有通信能力设备组成的网络，其背后拥有一套完整的物联网架构和解决方案。但是设备连上网就是真的物联网了吗？物联网(Internet of Things) 简称IoT ，是新一代信息技术组成的重要部分，也是信息化时代的重要发展阶段。物联网通过智能感知、识别技术与普适计算机等通信感知技术，广泛应用于网络的融合中，也因此被称为继计算机、互联网之后世界信息产业发展的第三次浪潮。也对我... 1. 什么是物联网具有通信能力设备组成的网络，其背后拥有一套完整的物联网架构和解决方案。但是设备连上网就是真的物联网了吗？物联网(Internet of Things) 简称IoT ，是新一代信息技术组成的重要部分，也是信息化时代的重要发展阶段。物联网通过智能感知、识别技术与普适计算机等通信感知技术，广泛应用于网络的融合中，也因此被称为继计算机、互联网之后世界信息产业发展的第三次浪潮。也对我...
- Flink入门案例需求：读取本地数据文件，统计文件中每个单词出现的次数。一、IDEA Project创建及配置本案例编写Flink代码选择语言为Java和Scala，所以这里我们通过IntelliJ IDEA创建一个目录，其中包括Java项目模块和Scala项目模块，将Flink Java api和Flink Scala api分别在不同项目模块中实现。步骤如下：1、打开IDEA，创建空项目... Flink入门案例需求：读取本地数据文件，统计文件中每个单词出现的次数。一、IDEA Project创建及配置本案例编写Flink代码选择语言为Java和Scala，所以这里我们通过IntelliJ IDEA创建一个目录，其中包括Java项目模块和Scala项目模块，将Flink Java api和Flink Scala api分别在不同项目模块中实现。步骤如下：1、打开IDEA，创建空项目...
- 实时同步MySQL数据到Hive案例：将mysql中新增的数据实时同步到Hive中。以上案例需要用到的处理器有：“CaptureChangeMySQL”、“RouteOnAttribute”、“EvaluateJsonPath”、“ReplaceText”、“PutHiveQL”。首先通过“CaptureChangeMySQL”读取MySQL中数据的变化（需要开启MySQL binlog日... 实时同步MySQL数据到Hive案例：将mysql中新增的数据实时同步到Hive中。以上案例需要用到的处理器有：“CaptureChangeMySQL”、“RouteOnAttribute”、“EvaluateJsonPath”、“ReplaceText”、“PutHiveQL”。首先通过“CaptureChangeMySQL”读取MySQL中数据的变化（需要开启MySQL binlog日...
- 沿海国家高程数据库（CoNED）项目--地形测量数字高程模型（TBDEMs）沿海国家高程数据库（CoNED）项目--地形测量数字高程模型（TBDEMs）是地形（陆地高程）和水深（水体深度）的合并渲染，为美国部分沿海地区提供无缝高程产品（2011年至今）。这个沿海高程数据库将不同的光探测和测距（激光雷达）和测深数据源（如声纳）整合到共同的数据库中，在垂直和水平方向上与共同的参考系统对齐。这个... 沿海国家高程数据库（CoNED）项目--地形测量数字高程模型（TBDEMs）沿海国家高程数据库（CoNED）项目--地形测量数字高程模型（TBDEMs）是地形（陆地高程）和水深（水体深度）的合并渲染，为美国部分沿海地区提供无缝高程产品（2011年至今）。这个沿海高程数据库将不同的光探测和测距（激光雷达）和测深数据源（如声纳）整合到共同的数据库中，在垂直和水平方向上与共同的参考系统对齐。这个...
- 地球生态系统中不可恢复的碳这些数据集提供了2010年和2018年的全球碳密度地图（地上、地下生物质碳和土壤有机碳储量），空间分辨率约为300米，单位为Mg ha-1（坐标系：WGS 1984，浮点格式）。输入的地图从已发表的文献中收集，并在必要时进行更新，以涵盖重点时间段。这些更新被应用于可管理碳、脆弱碳和不可恢复碳地图。可管理的碳是陆地和沿海生态系统中可能经历人为土地使用转换事件的碳。脆... 地球生态系统中不可恢复的碳这些数据集提供了2010年和2018年的全球碳密度地图（地上、地下生物质碳和土壤有机碳储量），空间分辨率约为300米，单位为Mg ha-1（坐标系：WGS 1984，浮点格式）。输入的地图从已发表的文献中收集，并在必要时进行更新，以涵盖重点时间段。这些更新被应用于可管理碳、脆弱碳和不可恢复碳地图。可管理的碳是陆地和沿海生态系统中可能经历人为土地使用转换事件的碳。脆...
- 加拿大陆地生态系统中的土壤碳储量这个集合包含了加拿大土壤和植物中碳储量的空间分布和树冠高度的数据集。它被公开，作为目前正在审查的出版物《加拿大陆地生态系统中的大型土壤碳储存》的补充数据。这些地图是在2020年1月至12月期间在麦克马斯特大学的遥感实验室制作的。这个研究项目是由世界野生动物基金会（WWF）-加拿大的拨款促成的。该项目旨在利用多源卫星、气候和地形数据以及机器学习算法，首次以25... 加拿大陆地生态系统中的土壤碳储量这个集合包含了加拿大土壤和植物中碳储量的空间分布和树冠高度的数据集。它被公开，作为目前正在审查的出版物《加拿大陆地生态系统中的大型土壤碳储存》的补充数据。这些地图是在2020年1月至12月期间在麦克马斯特大学的遥感实验室制作的。这个研究项目是由世界野生动物基金会（WWF）-加拿大的拨款促成的。该项目旨在利用多源卫星、气候和地形数据以及机器学习算法，首次以25...
- 为了不断提升民生服务水平和城市治理能力，多地都在推进智慧城市建设。作为“两山理论”的诞生地——浙江安吉，在深度用云时代，以绿色智慧城市建设成果，再次令人瞩目。近年来，安吉不断探索绿色智慧城市建设，成立两山转化数字研究院，打造数字技术共享平台、数字产业孵化平台及数字生态构建平台。2022年11月，第二十四届中国“高交会”宣布安吉县获得“中国领军智慧县级城市奖”。目前，安吉已逐步构建起“政府主导... 为了不断提升民生服务水平和城市治理能力，多地都在推进智慧城市建设。作为“两山理论”的诞生地——浙江安吉，在深度用云时代，以绿色智慧城市建设成果，再次令人瞩目。近年来，安吉不断探索绿色智慧城市建设，成立两山转化数字研究院，打造数字技术共享平台、数字产业孵化平台及数字生态构建平台。2022年11月，第二十四届中国“高交会”宣布安吉县获得“中国领军智慧县级城市奖”。目前，安吉已逐步构建起“政府主导...
- 华为云政务大数据解决方案采用1+3+5架构，即1套平台、“数据资源、共享开放、应用支撑”3中心、“标准规范、安全保障、运维监控、运营支撑、集成支持”5体系，在全国已有600+项目实践，市场份额第一。 华为云政务大数据解决方案采用1+3+5架构，即1套平台、“数据资源、共享开放、应用支撑”3中心、“标准规范、安全保障、运维监控、运营支撑、集成支持”5体系，在全国已有600+项目实践，市场份额第一。
上滑加载中
推荐直播
-
华为云 x DeepSeek：AI驱动云上应用创新2025/02/26 周三 16:00-18:00
华为云 AI专家大咖团
在 AI 技术飞速发展之际，DeepSeek 备受关注。它凭借哪些技术与理念脱颖而出？华为云与 DeepSeek 合作，将如何重塑产品与应用模式，助力企业数字化转型？在华为开发者空间，怎样高效部署 DeepSeek，搭建专属服务器？基于华为云平台，又该如何挖掘 DeepSeek 潜力，实现智能化升级？本期直播围绕DeepSeek在云上的应用案例，与DTSE布道师们一起探讨如何利用AI 驱动云上应用创新。
回顾中 -
智能观测进化论系列沙龙（第一期）2025/02/28 周五 14:00-16:30
华为及外部讲师团
本期直播就智能化可观测技术的融合与创新、落地与实践、瓶颈与未来等业界关心的话题进行深入探讨。
回顾中 -
聚焦Deepseek，洞察开发者生态发展2025/02/28 周五 19:00-20:30
蒋涛 csdn创始人
深入剖析Deepseek爆发后，中国开发者生态潜藏的巨大发展潜能与未来走向，精准提炼出可供大家把握的时代机遇，干货满满，不容错过。
回顾中
热门标签