- openEuler 如何把大数据平台“跑顺”:吞吐能力不是算出来的,是调出来的 openEuler 如何把大数据平台“跑顺”:吞吐能力不是算出来的,是调出来的
- 一套平台养百家客户?多租户数据平台不是“分库分表”这么简单 一套平台养百家客户?多租户数据平台不是“分库分表”这么简单
- 1 背景简介本文以 SM4 分组密码为核心,系统、深入地解读你提到的 8 种主流工作模式:ECB、CBC、CFB、OFB、CTR、GCM、CCM、XTS。内容覆盖:工作原理、安全性、优缺点、典型应用场景、是否推荐,便于工程选型与合规评估。SM4:国密对称分组密码分组长度:128 bit(16 字节)密钥长度:128 bit工作模式的作用:将“只能处理固定长度分组”的 SM4,扩展为可安全加... 1 背景简介本文以 SM4 分组密码为核心,系统、深入地解读你提到的 8 种主流工作模式:ECB、CBC、CFB、OFB、CTR、GCM、CCM、XTS。内容覆盖:工作原理、安全性、优缺点、典型应用场景、是否推荐,便于工程选型与合规评估。SM4:国密对称分组密码分组长度:128 bit(16 字节)密钥长度:128 bit工作模式的作用:将“只能处理固定长度分组”的 SM4,扩展为可安全加...
- 1 背景简介在密码学Q领域,国密算法 SM4 是国内自主研发的分组对称加密 四算法,凭借 128 位分组长度、128 位密钥长度的设计,在金融、政务、物联网等领域广泛应用。但分组密码本身仅能处理固定长度(SM4 为 128 位)的明文数据,而现实中需要加密的文件、数据流、存诸块等往往是任意长度的。为解决这一问题,“工作模式”应运而生 – 它相当于分组密码的“应用框架”,定义了如何将固定长度... 1 背景简介在密码学Q领域,国密算法 SM4 是国内自主研发的分组对称加密 四算法,凭借 128 位分组长度、128 位密钥长度的设计,在金融、政务、物联网等领域广泛应用。但分组密码本身仅能处理固定长度(SM4 为 128 位)的明文数据,而现实中需要加密的文件、数据流、存诸块等往往是任意长度的。为解决这一问题,“工作模式”应运而生 – 它相当于分组密码的“应用框架”,定义了如何将固定长度...
- 1 简介什么是 AIDP 大模型数据标注AIDP 在行业里通常指 AI Data Platform(人工智能数据平台) 或 AI Data Preparation(AI 数据准备流程)。因此 AIDP 大模型数据标注可以理解为:利用平台化、流程化工具,并结合自动化、半自动化模型辅助,对用于大模型训练的数据进行清洗、筛选、标注和质量控制的体系化方法。它不仅包括传统文本/图像的标签化,还包括:... 1 简介什么是 AIDP 大模型数据标注AIDP 在行业里通常指 AI Data Platform(人工智能数据平台) 或 AI Data Preparation(AI 数据准备流程)。因此 AIDP 大模型数据标注可以理解为:利用平台化、流程化工具,并结合自动化、半自动化模型辅助,对用于大模型训练的数据进行清洗、筛选、标注和质量控制的体系化方法。它不仅包括传统文本/图像的标签化,还包括:...
- 1 简介近期掘金平台退出大模型数据标注平台,这是指掘金推出的AI协作平台(AIDP),专为开发者设计的标注系统,用于为大模型(如AIDP模型)提供高质量训练数据标注。该平台聚焦技术类场景,例如代码逻辑校验、技术问题分类和文档实用性评估,通过开发者参与来提升标注的精准度和专业性。它本质上是利用人群智能(crowdsourcing)结合AI技术,实现数据标注的过程,帮助大模型更好地理解和生成技... 1 简介近期掘金平台退出大模型数据标注平台,这是指掘金推出的AI协作平台(AIDP),专为开发者设计的标注系统,用于为大模型(如AIDP模型)提供高质量训练数据标注。该平台聚焦技术类场景,例如代码逻辑校验、技术问题分类和文档实用性评估,通过开发者参与来提升标注的精准度和专业性。它本质上是利用人群智能(crowdsourcing)结合AI技术,实现数据标注的过程,帮助大模型更好地理解和生成技...
- 别让数据平台“盲开车”:可观测性三件套(指标、日志、追踪)到底怎么落地? 别让数据平台“盲开车”:可观测性三件套(指标、日志、追踪)到底怎么落地?
- 脏数据不脏心:大数据平台的数据质量(DQ)入门实战与自动修复心法 脏数据不脏心:大数据平台的数据质量(DQ)入门实战与自动修复心法
- 数据湖 vs 数据仓库 vs 数据湖仓一体:何时选哪种架构?——写给正在做数据平台的你 数据湖 vs 数据仓库 vs 数据湖仓一体:何时选哪种架构?——写给正在做数据平台的你
- 在大数据技术蓬勃发展的今天,Hadoop生态系统已成为企业构建数据平台的核心选择。作为在金融行业深耕大数据平台建设八年的架构师,我见证了许多团队从单机处理到分布式平台的转型历程。本文将结合我主导设计的三个千万级用户规模的数据平台项目经验,分享企业级Hadoop架构设计中的关键思考与实践。 一、企业级需求与挑战的深度剖析企业级Hadoop平台绝非简单的技术堆砌,而是需要满足多维度的业务诉求。在... 在大数据技术蓬勃发展的今天,Hadoop生态系统已成为企业构建数据平台的核心选择。作为在金融行业深耕大数据平台建设八年的架构师,我见证了许多团队从单机处理到分布式平台的转型历程。本文将结合我主导设计的三个千万级用户规模的数据平台项目经验,分享企业级Hadoop架构设计中的关键思考与实践。 一、企业级需求与挑战的深度剖析企业级Hadoop平台绝非简单的技术堆砌,而是需要满足多维度的业务诉求。在...
- 过去十年,工业和物联网场景经历了快速的数字化建设:传感器接入、系统联网、数据上云……数据平台已能轻松承载每秒千万级别的写入,每天几 TB 的存储量。但今天再回头看,这些看似“完成”的系统,实际上只解决了一个问题:把数据“存起来”。而“用起来”这一层,仍旧是碎片化的、高门槛的、效率低下的。为了解决“用起来”的问题,行业开始尝试自然语言查询、自动生成 SQL 等方式,并逐渐发展出 Chat BI... 过去十年,工业和物联网场景经历了快速的数字化建设:传感器接入、系统联网、数据上云……数据平台已能轻松承载每秒千万级别的写入,每天几 TB 的存储量。但今天再回头看,这些看似“完成”的系统,实际上只解决了一个问题:把数据“存起来”。而“用起来”这一层,仍旧是碎片化的、高门槛的、效率低下的。为了解决“用起来”的问题,行业开始尝试自然语言查询、自动生成 SQL 等方式,并逐渐发展出 Chat BI...
- Flink-Doris-Connector 作为 Apache Flink 与 Doris 之间的桥梁,打通了实时数据同步、维表关联与高效写入的关键链路。本文将深入解析 Flink-Doris-Connector 三大典型场景中的设计与实现,并结合 Flink CDC 详细介绍了整库同步的解决方案,助力构建更加高效、稳定的实时数据处理体系。 一、Apache Doris 简介Apache D... Flink-Doris-Connector 作为 Apache Flink 与 Doris 之间的桥梁,打通了实时数据同步、维表关联与高效写入的关键链路。本文将深入解析 Flink-Doris-Connector 三大典型场景中的设计与实现,并结合 Flink CDC 详细介绍了整库同步的解决方案,助力构建更加高效、稳定的实时数据处理体系。 一、Apache Doris 简介Apache D...
- 2025年6月20-22日,华为开发者大会2025(HDC 2025)在东莞松山湖盛大举行。6月21日,“ROMA集成平台融合MCP,加速全链路业务协同”专题论坛成功举办,本次论坛话题聚焦“MCP(Model Context Protocol)”“智能体”等新技术和企业集成场景的深度融合,探讨如何通过智能化、一体化的集成解决方案,推动企业全链路业务协同效率提升,助力数字化转型迈向新高度。本次... 2025年6月20-22日,华为开发者大会2025(HDC 2025)在东莞松山湖盛大举行。6月21日,“ROMA集成平台融合MCP,加速全链路业务协同”专题论坛成功举办,本次论坛话题聚焦“MCP(Model Context Protocol)”“智能体”等新技术和企业集成场景的深度融合,探讨如何通过智能化、一体化的集成解决方案,推动企业全链路业务协同效率提升,助力数字化转型迈向新高度。本次...
- 在国产算力自主创新的浪潮中,华为昇腾构建了覆盖工具链、算力平台、模型开发到行业应用的完整生态,为不同技术基础的大学生提供了多元化就业路径。本文以能力为核心,打破学历壁垒,聚焦岗位所需技能、认证体系与成长路径,助你精准锚定职业方向。 在国产算力自主创新的浪潮中,华为昇腾构建了覆盖工具链、算力平台、模型开发到行业应用的完整生态,为不同技术基础的大学生提供了多元化就业路径。本文以能力为核心,打破学历壁垒,聚焦岗位所需技能、认证体系与成长路径,助你精准锚定职业方向。
- LightGBM与MySQL的深度集成,为机器学习提供从数据到模型预测的完整解决方案。通过高效的数据管道、智能缓存及压缩技术,实现海量数据低延迟访问,支持实时特征工程与增量训练。该方案突破传统ETL瓶颈,保障生产环境可靠性,未来还将拓展联邦学习与元数据驱动等方向,推动数据智能深度融合,加速AI产业落地。 LightGBM与MySQL的深度集成,为机器学习提供从数据到模型预测的完整解决方案。通过高效的数据管道、智能缓存及压缩技术,实现海量数据低延迟访问,支持实时特征工程与增量训练。该方案突破传统ETL瓶颈,保障生产环境可靠性,未来还将拓展联邦学习与元数据驱动等方向,推动数据智能深度融合,加速AI产业落地。
上滑加载中
推荐直播
-
华为云码道 × 仓颉编程:工程化AI编码探索2026/05/27 周三 19:00-21:00
刘俊杰-华为云仓颉语言专家/李炎-华为云码道技术专家/王智鹏-OpenCangjie开源社区发起人
本场直播围绕华为云仓颉语言与华为云码道的深度结合,展示华为云智能编程从零基础到高效落地的完整生态能力。以华为云码道为引擎,仓颉语言为载体,带给大家日常提效、趣味创新到极速量产的开发体验。
回顾中 -
一个AI团队帮你写代码:华为云码道Agent Space实战2026/06/25 周四 19:00-21:00
张翰文-华为云码道工程师/郭英旭-青软创新科技集团股份有限公司 软件架构师
本场直播聚焦华为云码道Agent Space两大模式:研发办公、代码开发,亲身体验从需求到代码的AI自动化能力。实操演示基于华为 CodeArts CLI,依托 OpenSpec 规格体系从零搭建业务项目。
回顾中
热门标签