- Apache Flink作为当前最活跃的开源流处理引擎,其"流批一体"的核心设计理念一直备受业界关注。Flink 1.18版本于2023年发布,不仅在稳定性、性能方面进行了优化,更在流批一体化道路上迈出了重要一步。本文将深入浅出地解析Flink 1.18在流批一体方面的关键演进。 流批一体:从理念到实践Flink的流批一体并非简单地将批处理视为有界流,而是通过统一的运行时架构和API设计,让... Apache Flink作为当前最活跃的开源流处理引擎,其"流批一体"的核心设计理念一直备受业界关注。Flink 1.18版本于2023年发布,不仅在稳定性、性能方面进行了优化,更在流批一体化道路上迈出了重要一步。本文将深入浅出地解析Flink 1.18在流批一体方面的关键演进。 流批一体:从理念到实践Flink的流批一体并非简单地将批处理视为有界流,而是通过统一的运行时架构和API设计,让...
- 别再拍脑袋上线了:用大数据把 A/B 测试和在线实验平台这件事干“正经” 别再拍脑袋上线了:用大数据把 A/B 测试和在线实验平台这件事干“正经”
- Apache Flink作为当前最流行的流处理框架之一,其1.15版本带来了众多令人期待的改进,特别是在SQL支持和性能方面。对于数据工程师和分析师而言,这些改进极大地简化了实时数据处理的开发流程,同时提升了系统的处理能力。本文将深入浅出地介绍Flink 1.15中与SQL相关的关键特性及其性能优化。 一、SQL支持的显著增强 1. Catalog API的全面改进Flink 1.15重构了... Apache Flink作为当前最流行的流处理框架之一,其1.15版本带来了众多令人期待的改进,特别是在SQL支持和性能方面。对于数据工程师和分析师而言,这些改进极大地简化了实时数据处理的开发流程,同时提升了系统的处理能力。本文将深入浅出地介绍Flink 1.15中与SQL相关的关键特性及其性能优化。 一、SQL支持的显著增强 1. Catalog API的全面改进Flink 1.15重构了...
- 自动化指标平台为追求业务敏捷性和面向 AI 未来布局的企业提供了关键支撑。 自动化指标平台为追求业务敏捷性和面向 AI 未来布局的企业提供了关键支撑。
- National Science Foundation (NSF)-Blue Water Zone (BWZ) measurements简介2004 年至 2006 年,在南极洲和德雷克斯海峡附近的蓝水区 (BWZ) 进行了 NSF 资助的测量。摘要代码!pip install leafmap!pip install pandas!pip install folium!pip insta... National Science Foundation (NSF)-Blue Water Zone (BWZ) measurements简介2004 年至 2006 年,在南极洲和德雷克斯海峡附近的蓝水区 (BWZ) 进行了 NSF 资助的测量。摘要代码!pip install leafmap!pip install pandas!pip install folium!pip insta...
- 通过消除冗余的物理宽表开发与存储,以及智能复用计算资源,将存算成本从线性增长转变为可控的平缓增长。 通过消除冗余的物理宽表开发与存储,以及智能复用计算资源,将存算成本从线性增长转变为可控的平缓增长。
- 数据治理迫切需要从依赖人工的“黑盒考古”,升级为基于精准、实时、可读元数据的“精准导航”。 数据治理迫切需要从依赖人工的“黑盒考古”,升级为基于精准、实时、可读元数据的“精准导航”。
- 除了提升开发效率、降低资源成本,更能保障决策一致性、赋能业务敏捷分析,并构成未来 AI 应用不可或缺的 AI-Ready 数据底座 除了提升开发效率、降低资源成本,更能保障决策一致性、赋能业务敏捷分析,并构成未来 AI 应用不可或缺的 AI-Ready 数据底座
- 数据工程师可以将精力从写不完的宽表 SQL 中解放出来,转向更核心的数据模型设计、业务语义梳理、数据资产治理和性能调优等高价值工作 数据工程师可以将精力从写不完的宽表 SQL 中解放出来,转向更核心的数据模型设计、业务语义梳理、数据资产治理和性能调优等高价值工作
- 还记得五年前,传统BI工具处理TB级数据的卡顿与低效;如今AI赋能下,BI已突破“报表生成器”的局限,但PB级数据流、复杂业务需求仍让企业选型困难。本文通过精简的技术拆解、10款主流产品硬核横评及趋势展望,帮你找到适配的智能决策引擎。一、市场格局扫描与大数据BI的核心竞争力重塑IDC报告显示,到2028年中国BI市场年复合增长率超12%,核心驱动力是企业需求从“可视化”向“价值创造”转型。传... 还记得五年前,传统BI工具处理TB级数据的卡顿与低效;如今AI赋能下,BI已突破“报表生成器”的局限,但PB级数据流、复杂业务需求仍让企业选型困难。本文通过精简的技术拆解、10款主流产品硬核横评及趋势展望,帮你找到适配的智能决策引擎。一、市场格局扫描与大数据BI的核心竞争力重塑IDC报告显示,到2028年中国BI市场年复合增长率超12%,核心驱动力是企业需求从“可视化”向“价值创造”转型。传...
- 在当今数据驱动的时代,实时数据分析已成为企业决策的核心引擎。面对海量数据的实时处理需求,Apache Flink 作为一款分布式流处理框架,凭借其低延迟、高吞吐的特性,成为流计算领域的明星;而 ClickHouse 作为高性能列式存储数据库,以其极快的查询速度和高效的压缩能力,在 OLAP 场景中大放异彩。两者的结合,不仅能解决传统批处理架构的时效性瓶颈,还能为实时报表、监控告警等场景提供强... 在当今数据驱动的时代,实时数据分析已成为企业决策的核心引擎。面对海量数据的实时处理需求,Apache Flink 作为一款分布式流处理框架,凭借其低延迟、高吞吐的特性,成为流计算领域的明星;而 ClickHouse 作为高性能列式存储数据库,以其极快的查询速度和高效的压缩能力,在 OLAP 场景中大放异彩。两者的结合,不仅能解决传统批处理架构的时效性瓶颈,还能为实时报表、监控告警等场景提供强...
- openEuler 如何把大数据平台“跑顺”:吞吐能力不是算出来的,是调出来的 openEuler 如何把大数据平台“跑顺”:吞吐能力不是算出来的,是调出来的
- NSCAT Level 3 Daily Gridded Ocean Surface Wind Vector Browse Images (JPL)简介本数据集提供美国宇航局散射计(NSCAT)3 级每日网格化海洋风矢量的浏览图像,升轨和降轨的风矢量空间分辨率均为 0.5 度;相邻轨道重叠处的风矢量取平均值。这是最新版本,代表了校准、验证和科学数据处理的最终阶段,该阶段于 1998 年 11... NSCAT Level 3 Daily Gridded Ocean Surface Wind Vector Browse Images (JPL)简介本数据集提供美国宇航局散射计(NSCAT)3 级每日网格化海洋风矢量的浏览图像,升轨和降轨的风矢量空间分辨率均为 0.5 度;相邻轨道重叠处的风矢量取平均值。这是最新版本,代表了校准、验证和科学数据处理的最终阶段,该阶段于 1998 年 11...
- 本文首发于 Aloudata 官方技术博客:《列级血缘为何在 EAST 报送中“对不准”?算子级解析的降维打击》转载请注明出处。摘要:在金融监管报送(如 EAST)场景中,传统列级血缘因 SQL 解析精度低(<80%)、无法处理复杂逻辑,导致指标口径追溯不全、人工盘点耗时数月。本文深入剖析了列级血缘的技术局限,并介绍了以算子级血缘为核心的新范式。通过 AST 深度解析、行级裁剪和白盒化口径提... 本文首发于 Aloudata 官方技术博客:《列级血缘为何在 EAST 报送中“对不准”?算子级解析的降维打击》转载请注明出处。摘要:在金融监管报送(如 EAST)场景中,传统列级血缘因 SQL 解析精度低(<80%)、无法处理复杂逻辑,导致指标口径追溯不全、人工盘点耗时数月。本文深入剖析了列级血缘的技术局限,并介绍了以算子级血缘为核心的新范式。通过 AST 深度解析、行级裁剪和白盒化口径提...
- NSCAT Level 2 Ocean Wind Vector Geophysical Data Record简介美国国家航空航天局散射计(NSCAT)二级海洋风矢量数据以 50 公里风矢量网格(WVC)幅宽呈现,包含每日上升和下降轨道的数据。风矢量的精度在 2 米/秒(矢量速度)和 20 度(矢量方向)以内。受降雨污染区域的风矢量数据无效;数据中不包含降雨标记和降水信息。数据中会标记缺失、... NSCAT Level 2 Ocean Wind Vector Geophysical Data Record简介美国国家航空航天局散射计(NSCAT)二级海洋风矢量数据以 50 公里风矢量网格(WVC)幅宽呈现,包含每日上升和下降轨道的数据。风矢量的精度在 2 米/秒(矢量速度)和 20 度(矢量方向)以内。受降雨污染区域的风矢量数据无效;数据中不包含降雨标记和降水信息。数据中会标记缺失、...
上滑加载中
推荐直播
-
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战,从0到1打通消息通道;码道鸿蒙端云一体化实战,快速搭建员工签到系统。
回顾中 -
华为云开发者AI素养直播课·第五期2026/09/04 周五 16:00-18:00
林华鼎-华为云AI开发者运营负责人;蒋春阳-华为云AI开发者案例开发专家
本期直播内容: AI工具体验营 · 第5-8课连讲。Agent-Team 多智能体协作完成毕业设计实践
回顾中 -
华为云开发者AI素养ClassRoom·第六期2026/09/08 周二 19:00-20:00
樊渊-2026华为软件挑战赛冠军
高手来了:看软挑高手解析二维排样问题—从工业难题到算法突破
回顾中
热门标签