- 本节书摘来自华章计算机《大数据技术丛书 Flink原理、实战与性能优化》一书,作者是张利兵。 本节书摘来自华章计算机《大数据技术丛书 Flink原理、实战与性能优化》一书,作者是张利兵。
- 本书摘自《大数据技术丛书Flink原理、实战与性能优化》一书中的第1章,第1.1节,编著是张利兵。 本书摘自《大数据技术丛书Flink原理、实战与性能优化》一书中的第1章,第1.1节,编著是张利兵。
- 本书摘自《大数据技术丛书Flink原理、实战与性能优化》一编著是张利兵。 本书摘自《大数据技术丛书Flink原理、实战与性能优化》一编著是张利兵。
- Flink是一款开源分布式流处理框架,在数字化浪潮中崭露头角。它具备真正实时的毫秒级响应、卓越的高吞吐与低延迟性能、强大的容错机制确保数据一致性、灵活的窗口操作适配多样业务场景、丰富的API易于开发,以及批流一体的数据处理能力。Flink在金融交易、电商、物联网等领域广泛应用,助力企业实时处理海量数据,抢占先机,创造更大价值。 Flink是一款开源分布式流处理框架,在数字化浪潮中崭露头角。它具备真正实时的毫秒级响应、卓越的高吞吐与低延迟性能、强大的容错机制确保数据一致性、灵活的窗口操作适配多样业务场景、丰富的API易于开发,以及批流一体的数据处理能力。Flink在金融交易、电商、物联网等领域广泛应用,助力企业实时处理海量数据,抢占先机,创造更大价值。
- 本文将为您提供一个在Ubuntu服务器上搭建LAMP(Linux, Apache, MySQL, PHP)环境的完整指南。通过本文,您将学习如何安装和配置Apache、MySQL、PHP,并将您的PHP项目部署到服务器上。本文适用于Ubuntu 20.04及更高版本。 本文将为您提供一个在Ubuntu服务器上搭建LAMP(Linux, Apache, MySQL, PHP)环境的完整指南。通过本文,您将学习如何安装和配置Apache、MySQL、PHP,并将您的PHP项目部署到服务器上。本文适用于Ubuntu 20.04及更高版本。
- 网络安全 - Web 渗透环境搭建 - BWAPP 介绍bWAPP(Buggy Web Application)是一个开放源码的、免费的、不安全的 Web 应用程序,旨在帮助安保专业人员和开发者学习和实践 Web 安全技术。它包含了数百种漏洞类型,是进行 Web 漏洞研究、渗透测试和安全培训的理想选择。 应用使用场景渗透测试练习:安全研究人员可以使用 bWAPP 模拟真实世界中的攻击场景。... 网络安全 - Web 渗透环境搭建 - BWAPP 介绍bWAPP(Buggy Web Application)是一个开放源码的、免费的、不安全的 Web 应用程序,旨在帮助安保专业人员和开发者学习和实践 Web 安全技术。它包含了数百种漏洞类型,是进行 Web 漏洞研究、渗透测试和安全培训的理想选择。 应用使用场景渗透测试练习:安全研究人员可以使用 bWAPP 模拟真实世界中的攻击场景。...
- Apache DolphinScheduler 是一款分布式工作流任务调度平台,支持可视化 DAG 作业流程管理、任务依赖关系管理、任务状态监控、告警通知等功能,可广泛应用于数据仓库、大数据治理、机器学习等领域。介绍:DolphinScheduler 提供了方便的 Web 界面用于定义工作流和配置调度参数,并支持可视化的工作流 DAG 编辑。同时具备高性能调度、高可用 HA、高可靠容错、任务... Apache DolphinScheduler 是一款分布式工作流任务调度平台,支持可视化 DAG 作业流程管理、任务依赖关系管理、任务状态监控、告警通知等功能,可广泛应用于数据仓库、大数据治理、机器学习等领域。介绍:DolphinScheduler 提供了方便的 Web 界面用于定义工作流和配置调度参数,并支持可视化的工作流 DAG 编辑。同时具备高性能调度、高可用 HA、高可靠容错、任务...
- Apache service comb3.0 集成 Shardingsphere5.2.1以及华为gaussdb数据库, 并使用华为云CCE部署,完成鲲鹏、昇腾、欧拉、鸿蒙、高斯、云服务等与开源软件的适配开发。1.首先购买gaussDB 如下图所示,配置详情是gaussDB基础版,部署状态是1主1备1日志,其中主节点可读可写,备用节点只能读,是read-only模式,VPC网络选择之前已经购... Apache service comb3.0 集成 Shardingsphere5.2.1以及华为gaussdb数据库, 并使用华为云CCE部署,完成鲲鹏、昇腾、欧拉、鸿蒙、高斯、云服务等与开源软件的适配开发。1.首先购买gaussDB 如下图所示,配置详情是gaussDB基础版,部署状态是1主1备1日志,其中主节点可读可写,备用节点只能读,是read-only模式,VPC网络选择之前已经购...
- 本文探讨了Apache Spark MLlib与Java结合的最佳实践,涵盖基础认知、数据预处理、模型选择与构建、训练调优及部署应用。Spark以其分布式计算能力著称,MLlib提供丰富的机器学习算法,Java则拥有成熟生态。两者结合可高效处理大规模数据集,构建灵活的机器学习应用。通过RDD和DataFrame API进行数据操作,利用特征工程工具优化数据,选择合适的分类、回归或聚类模型。 本文探讨了Apache Spark MLlib与Java结合的最佳实践,涵盖基础认知、数据预处理、模型选择与构建、训练调优及部署应用。Spark以其分布式计算能力著称,MLlib提供丰富的机器学习算法,Java则拥有成熟生态。两者结合可高效处理大规模数据集,构建灵活的机器学习应用。通过RDD和DataFrame API进行数据操作,利用特征工程工具优化数据,选择合适的分类、回归或聚类模型。
- Kafka部署及应用 介绍Apache Kafka是一个开源的分布式流处理平台,主要用于实时数据管道和流应用。它具有高吞吐量、低延迟、可扩展性强等特点。 应用使用场景消息系统:提供发布-订阅功能,并且可以储存发布的记录。日志聚合:集中收集来自各个服务、不同服务器上的日志信息。流处理:实时处理数据流。事件追踪:监控用户行为或事件。指标度量:监控系统运行状态。 原理解释Kafka通过“主题”(... Kafka部署及应用 介绍Apache Kafka是一个开源的分布式流处理平台,主要用于实时数据管道和流应用。它具有高吞吐量、低延迟、可扩展性强等特点。 应用使用场景消息系统:提供发布-订阅功能,并且可以储存发布的记录。日志聚合:集中收集来自各个服务、不同服务器上的日志信息。流处理:实时处理数据流。事件追踪:监控用户行为或事件。指标度量:监控系统运行状态。 原理解释Kafka通过“主题”(...
- Apache Ingress 主要用于管理来自外部的 HTTP 和 HTTPS 流量,并将其路由到合适的 Kubernetes 服务。容器化与 Kubernetes 是现代云原生应用程序的基础。Kubernetes 的主要职责是管理容器集群,确保它们的高可用性和可扩展性,同时还提供自动化的部署和运维功能。然而,Kubernetes 本身并不能直接处理外部的流量。要解决这个问题,Ingress... Apache Ingress 主要用于管理来自外部的 HTTP 和 HTTPS 流量,并将其路由到合适的 Kubernetes 服务。容器化与 Kubernetes 是现代云原生应用程序的基础。Kubernetes 的主要职责是管理容器集群,确保它们的高可用性和可扩展性,同时还提供自动化的部署和运维功能。然而,Kubernetes 本身并不能直接处理外部的流量。要解决这个问题,Ingress...
- 在 Linux 和 CentOS 系统中,Daemon Process(守护进程) 是一个长期运行的后台进程,它通常不与任何用户交互,负责处理系统级任务或提供服务。守护进程是系统中至关重要的一部分,尤其是在服务器环境中,因为它们负责管理许多重要的任务,比如网络服务、系统日志记录、进程调度等。Daemon Process 的特点是能够在系统引导时启动,并在整个系统运行期间保持活动,直到系统关闭... 在 Linux 和 CentOS 系统中,Daemon Process(守护进程) 是一个长期运行的后台进程,它通常不与任何用户交互,负责处理系统级任务或提供服务。守护进程是系统中至关重要的一部分,尤其是在服务器环境中,因为它们负责管理许多重要的任务,比如网络服务、系统日志记录、进程调度等。Daemon Process 的特点是能够在系统引导时启动,并在整个系统运行期间保持活动,直到系统关闭...
- RocketMQ是一款开源的、分布式的消息中间件系统,由阿里巴巴开发并贡献给Apache基金会,目前是Apache项目之一。它具有高可靠性、高性能、可扩展性和灵活的特点,被广泛应用于大规模分布式系统的消息通信场景 RocketMQ是一款开源的、分布式的消息中间件系统,由阿里巴巴开发并贡献给Apache基金会,目前是Apache项目之一。它具有高可靠性、高性能、可扩展性和灵活的特点,被广泛应用于大规模分布式系统的消息通信场景
- Apache JMeter 是一个功能强大、灵活且广泛使用的性能测试工具,适用于评估各种 Web 应用程序和服务的性能特性。在选择时,需要考虑项目需求、测试场景和预算。 Apache JMeter 是一个功能强大、灵活且广泛使用的性能测试工具,适用于评估各种 Web 应用程序和服务的性能特性。在选择时,需要考虑项目需求、测试场景和预算。
- 在现代分布式系统中,消息队列已经成为处理大量数据和实现微服务架构的关键组件之一。Apache Kafka是一个开源的分布式事件流平台,它被广泛用于构建实时数据管道和流应用。Kafka以其高吞吐量、可扩展性和容错性而闻名。本文将详细介绍Apache Kafka的基本概念以及如何在Spring Boot项目中集成Kafka以实现实时数据处理。 1. Apache Kafka简介 1.1 定义Ap... 在现代分布式系统中,消息队列已经成为处理大量数据和实现微服务架构的关键组件之一。Apache Kafka是一个开源的分布式事件流平台,它被广泛用于构建实时数据管道和流应用。Kafka以其高吞吐量、可扩展性和容错性而闻名。本文将详细介绍Apache Kafka的基本概念以及如何在Spring Boot项目中集成Kafka以实现实时数据处理。 1. Apache Kafka简介 1.1 定义Ap...
上滑加载中
推荐直播
-
华为云码道Skill实战与极速交付,智能开发全链路实战2026/07/22 周三 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;姜浩-华为云HCDG核心组成员
直播深度解读华为云码道6月产品新特性,从Skill市场安装专家技能,带你零距离体验从需求,开发,审查,重构全链路闭环的开发过程。从零构建并交付一个完整项目,让您体验从代码提交到服务上线的“极速”之旅。
回顾中 -
聚开发者之力,创具身新未来2026/07/23 周四 15:00-17:00
张豪杰/程文/王军/刘新春/黄钦开 /张晓天
本次华为云具身智能开发平台CloudRobo培训面向具身智能开发者,带您全流程体验机器人本体R2C小时级接入、环境重建与轨迹生成仿真数据生产、PB级数据管理、数据评测、模型训推、强化学习和Benchmark一键评测等功能,并体验业界主流具身模型应用。
回顾中
热门标签