• [技术干货] 数据管理层面向架构设计层面演进
    与传统数据库相比,云数据库具备即开即用、一键安装部署、高可用、高可靠、监控告警等能力,极大释放了DBA一部分重复繁琐的运维工作,但也带来了一定挑战,比如云数据库设置了细粒密度权限,DBA无法访问宿主机文件系统;云数据库基于云服务构建,需要DBA掌握一定的云计算知识。但挑战也意味着机遇,云数据库时代,DBA需要从数据库管理员角色转换为架构师。因为云数据库已经提供了基础运维的功能,DBA需要将重心转移到整个数据库架构层面,跟业务更紧密结合。云数据库时代,DBA需要提升数据库整体认知,从数据管理层面向架构设计层面演进,具体可以从以下四个方面提升能力:1. 夯实数据库基础知识。重新审视DBA在云数据库时代中需要具备的能力,衡量哪些是DBA必须要去做的的事情,不断巩固和提升基础知识。2. 融合公有云和私有云的能力。公有云和私有云的基本逻辑是相通的,结合两者的能力更有助于理解和学习数据库知识。3. 识别和强化核心能力。在掌握基础知识的基础上,不断强化数据库核心能力,比如架构设计、内核研发等,持续打造核心竞争力。4. 紧密结合业务。所有产品都是为客户业务服务的,DBA需要结合业务场景不断练就技术内功,比如SQL管理、慢日志管理、索引优化等,才能更好地为业务服务。
  • [技术干货] DBA主要负责哪些工作内容
    DBA工作内容可从两个维度回答,第一个维度是从数据库整个工作范围来看,包括运维管理、数据迁移、架构优化三个部分,这三个部分是一个技术迭代的过程,对技能要求逐次递增。运维管理通常指的是安装部署、监控报警、备份恢复、在线变更等常规操作。在云时代,这些工作可以被云数据库替代。数据迁移指的是数据流转,包括数据库的升级、不同数据库之间的迁移等,会涉及到整个数据域的范畴。架构优化属于更高维度的内容,包含架构和优化两部分,比如:高可用架构、分布式架构、SQL优化、数据模型优化等。第二个维度是从数据库分层来看,可分为四层。最上层是数据服务层,涉及到专家服务、云服务等内容。第二层是打造一个安全、稳定、高效的数据存储平台。第三层是架构支持层,包括高可用、公司架构、数据模型等内容。第四层是基础资源规划层,不同的数据库存储引擎对应不同技术栈,通过架构串联起底层资源,为上层提供稳定高效的数据存储平台。一个合格的DBA需要具备的能力可简单分为三点,第一是对数据库的基本原理有更深入的理解;第二是关注时代变化,学习和研究前沿技术;第三是在架构层面持续技术演进,因为很多工作不是短期或者是一次性能完成的过程,需要不断去迭代升级。
  • [问题求助] hudi相关依赖下载
    关于hudi的相关依赖包没法下载,找不到相关依赖
  • [技术干货] 【获奖公示】DTSE Tech Talk丨NO.73:华为云DataArts+DWS助力企业数据治理一站式解决方案及应用实践
    中奖结果公示感谢各位小伙伴参与本次活动,欢迎关注华为云DTSE Tech Talk 技术直播更多活动~本次活动获奖名单如下(部分视频号抽奖用户无账号名): 奖项名称 奖品名称  华为云账号优质提问华为云开发者定制长袖圆领卫衣wangziying007优质提问华为云开发者定制长袖圆领卫衣hid_a0211e-bd-x__sw持久观看有奖华为FreeBudsSE2无线耳机linghz666口令抽奖华为云开发者定制鼠标垫qingqingjiayuan6口令抽奖华为云开发者定制鼠标垫ccs2022108180102
  • [公告] 【获奖公示】DTSE Tech Talk丨NO.72:物联网资深专家带你轻松构建AIoT智能场景应用
    中奖结果公示感谢各位小伙伴参与本次活动,欢迎关注华为云DTSE Tech Talk 技术直播更多活动~本次活动获奖名单如下(部分视频号抽奖用户无账号名): 奖项名称 奖品名称  华为云账号优质提问华为云开发者定制长袖圆领卫衣hw_008615770616135_01优质提问华为云开发者定制长袖圆领卫衣hid_a0211e-bd-x__sw持久观看有奖华为云开发者定制双肩包nanospeed口令抽奖华为云开发者定制鼠标垫hw025295594口令抽奖华为云开发者定制鼠标垫qiuyurumeng口令抽奖华为云开发者定制鼠标垫xiaozhongy
  • [问题求助] dolphinschedler部署完成 删除修改无反应
    dolphinschedler 安装部署完成 UI界面正常登录创建项目正常dolphinschedler 点击删除、或者修改保存确定的时候没有任何反应。dolphinschedler3.1.8 - 3.2.0 版本都试过 zookeeper是3.8.4 jdk是1.8.141 mysql jar是 mysql-connector-java-8.0.33
  • [分享交流] 🎉重大消息!10 月 21 日华为开发者布道师第三场直播来袭!🎉
    活动信息【活动主题】:昇思MindSpore:AI 领域的创新力量与跨平台之路【报名链接】:https://developer.huawei.com/home/activity/60b58a1735f24db681a1641429a6932c【直播时间】:2024/10/21 19:00-20:30【直播嘉宾】:华为开发者布道师、郑州轻工业大学梅科尔工作室核心成员陈新杰【直播链接】:待定【直播简介】:深度探索昇思 MindSpore 在 AI 领域的精彩应用,剖析技术精髓,通过医疗创新案例展示实际应用与技术突破,涵盖问题识别到解决方案全过程,重点介绍算法关键步骤,还简述 PyTorch 到 MindSpore 框架转换技巧,为开发者提供跨平台开发指南。【直播福利】:福利一:互动有礼1.礼品列表:定制开发者布道师Polo杉,抽华为定制充电宝2.拟定互动口令,便于官网直播间发口令“华为开发者布道师”抽 华为精美礼品福利二:有奖提问1.礼品列表:定制开发者布道师保温杯福利三:连续打卡1.后续会上线一系列的开发者布道师线上直播活动,连续参加活动并签到的开发者,会获得连续签到激励,奖品多多,敬请期待!
  • [技术干货] 数据抓取、数据采集、数据爬取、数据分析与数据挖掘 
     1. 借助大数据技术搭建分析模型 大数据技术的发展使得数据抓取、数据采集、数据爬取变得更加容易和高效。在数据分析和挖掘过程中,我们需要借助这些技术来获取大量的原始数据。接下来,我们将介绍如何选择合适的大数据分析和机器学习算法,构建分析模型。  1.1 数据收集 数据收集是整个数据分析过程中的第一步。我们需要从不同的数据源中抓取、采集和爬取数据。这可能包括网站、数据库、API等。数据收集的质量和数量直接影响到后续分析和挖掘的效果。  1.2 数据清洗 在数据收集完成后,我们需要对数据进行清洗,以去除重复、错误和无关的数据。数据清洗是数据处理过程中非常重要的一环,它关系到最终分析结果的准确性和可靠性。  1.3 数据整合 经过数据清洗后,我们需要对数据进行整合,将不同来源的数据进行统一和整理。这一步骤的目的是为了方便后续的数据分析工作。  2. 模型搭建 在完成数据收集和整理后,我们开始选择合适的大数据分析和机器学习算法,构建分析模型。常用的算法包括决策树、神经网络、支持向量机等。  2.1 选择算法 选择合适的算法是构建分析模型的关键。我们需要根据实际问题和数据特点来选择最合适的算法。例如,对于分类问题,我们可以选择决策树、神经网络等算法;对于回归问题,我们可以选择支持向量机、线性回归等算法。  2.2 模型训练 选择好算法后,我们需要利用数据对模型进行训练。这一过程中,我们需要不断调整模型的参数,以达到最佳的性能。  2.3 模型评估 模型训练完成后,我们需要对模型进行评估,以检验模型的准确性和泛化能力。常用的评估指标包括准确率、精确率、召回率、F1值等。  3. 模型优化 在模型评估的过程中,我们可能会发现模型存在一些问题,如过拟合、欠拟合等。针对这些问题,我们可以采用一些方法对模型进行优化,如正则化、交叉验证、特征选择等。  数据抓取、数据采集、数据爬取、数据分析与数据挖掘是一个复杂的过程,需要我们借助大数据技术和机器学习算法来完成。通过对数据的收集、清洗、整合,我们可以选择合适的算法构建分析模型,并通过优化模型来解决实际问题。 
  • [问题求助] FI Kafka主题监控指标数据存储在哪里?
    问题:FI Kafka主题监控指标数据存储在哪里?需求:需要获取数据做外部系统主题流量监控
  • [技术干货] 深度数据包检测 (DPI) 技术   精准数据获取
    深度数据包检测 (DPI) 技术是一种能够深入分析和控制网络流量的技术,其检测粒度达到应用层,可以识别和控制各种应用协议,如HTTP、FTP、DNS等。DPI技术广泛应用于网络安全、网络优化、业务运营等领域,能够帮助企业提高网络性能、保障网络安全、提升用户体验。 DPI技术的工作原理是对网络流量进行深入的分析和控制。当网络流量经过DPI设备时,设备会对流量进行深度分析,识别出流量的应用协议,然后根据预设的策略对流量进行控制,如允许、限制或阻断等。  例如,在网络安全方面,通过对网络流量进行深度分析,DPI可以实时检测和防范各种网络攻击,如DDoS攻击、网络钓鱼等。在网络优化方面,DPI可以识别和控制各种应用层协议,有效优化网络资源,提高网络性能。   DPI技术的应用对于企业和个人都有着重要的意义。对于企业来说,DPI技术可以帮助他们提高网络性能、保障网络安全、提升用户体验,从而提高企业的运营效率和竞争力。对于个人来说,DPI技术可以保护他们的网络安全,避免网络攻击和网络钓鱼等安全威胁,提高他们的网络使用体验。  DPI技术还可以用于构建用户画像。在当今这个信息爆炸的时代,品牌了解自己的用户变得越来越重要。用户画像中包含了用户的年龄、性别、地域、社交关系、兴趣偏好、触媒习惯、行为特征、消费习惯等信息,可以帮助品牌深入了解目标用户群体,洞察用户真正的动机和行为。这对于品牌来说,具有重要的营销和产品设计意义。  
  • [技术干货] 深度数据包检测 (DPI) 构建用户画像 
    在当今这个信息爆炸的时代,品牌了解自己的用户变得越来越重要。用户画像中包含了用户的年龄、性别、地域、社交关系、兴趣偏好、触媒习惯、行为特征、消费习惯等信息,可以帮助品牌深入了解目标用户群体,洞察用户真正的动机和行为。 构建用户画像的原理和机制主要基于对用户行为数据的收集、分析和建模。通过数据收集工具,如网站分析工具、社交媒体监控工具等,收集用户的行为数据。然后,对这些数据进行深入分析,包括用户的人口统计学特征、兴趣爱好、行为习惯等。基于这些分析结果,建立用户画像模型,从而实现对用户的全面理解和精准刻画。例如,某电商企业通过收集用户的购物行为数据,分析用户的年龄、性别、地域、购物偏好等信息,建立了用户画像。基于这些用户画像,该企业可以进行精准的商品推荐,从而提高用户的购物体验和满意度,提高商品的销售转化率。构建用户画像在营销、产品设计、客户服务等方面都具有重要的应用价值。通过用户画像,品牌可以深入了解目标用户,制定更有效的营销策略,设计更符合用户需求的产品,提供更有针对性的客户服务。用户画像还可以帮助企业进行用户行为预测,从而提前布局,抢占市场先机。构建用户画像对于提升品牌竞争力,实现业务增长具有重要的意义。
  • 通过Java连接HetuEngine(Password Fabric模式)
    通过Java连接HetuEngine(Password Fabric模式)要通过Java连接HetuEngine并使用Password Fabric模式进行认证,您需要遵循以下步骤:添加依赖:确保您的项目中包含了HetuEngine的JDBC驱动依赖。配置连接字符串:设置JDBC连接字符串,包括服务发现模式(对于Password Fabric模式,通常是serviceDiscoveryMode=hsbroker)和其他必要的参数。设置用户名和密码:在连接属性中设置您的HetuEngine用户名和密码。加载驱动:在代码中通过Class.forName()方法加载HetuEngine的JDBC驱动类。建立连接:使用DriverManager.getConnection()方法根据配置的连接字符串和属性建立数据库连接。执行SQL语句:一旦连接建立,就可以创建Statement或PreparedStatement对象来执行SQL语句。处理结果集:执行SQL语句后,处理返回的ResultSet对象以获取查询结果。关闭资源:在操作完成后,关闭ResultSet、Statement和Connection对象释放资源。以下是一个简化的Java代码示例,展示了如何连接HetuEngine并执行SQL语句:import java.sql.Connection;import java.sql.DriverManager;import java.sql.PreparedStatement;import java.sql.ResultSet;import java.sql.SQLException;import java.util.Properties;public class HetuEngineConnection { public static void main(String[] args) { // 配置连接属性 Properties properties = new Properties(); properties.setProperty("user", "your_username"); // 替换为您的HetuEngine用户名 properties.setProperty("password", "your_password"); // 替换为您的HetuEngine密码 properties.setProperty("serviceDiscoveryMode", "hsbroker"); // 加载HetuEngine JDBC驱动 try { Class.forName("io.trino.jdbc.TrinoDriver"); } catch (ClassNotFoundException e) { e.printStackTrace(); return; } // 建立连接 String url = "jdbc:trino://host1:port1,host2:port2,.../catalog/schema"; // 替换为您的HetuEngine连接信息 try (Connection connection = DriverManager.getConnection(url, properties)) { // 创建并执行SQL语句 String sql = "SELECT * FROM your_table"; // 替换为您要执行的SQL语句 try (PreparedStatement statement = connection.prepareStatement(sql)) { try (ResultSet resultSet = statement.executeQuery()) { // 处理查询结果 while (resultSet.next()) { // 处理每一行数据 } } } } catch (SQLException e) { e.printStackTrace(); } }}请确保将上述代码中的占位符(如your_username、your_password、host1:port1等)替换为您的实际HetuEngine连接信息。在实际应用中,您可能需要根据您的具体环境和安全要求进行调整。
  • [认证交流] 【华为开发者认证E级云架构学习分享】
    这次培训E级培训的感觉:1.讲师能力:非常专业,不论是从整体感觉还是细节讲解,都受益匪浅,无可挑剔。2.课件内容:从顶层架构到底层技术细节,都图文并茂,易于理解,并且配有专门的案例,学员们理论中不理解的问题,通过案例讲解后茅塞顿开。3.推进方式:时间观念非常强,进度准确到分钟级别;讨论环节,学员们扩散的问题,讲师都能精准找到问题的根因并且解答。4.环境感知:培训的整体氛围非常轻松,后台的两位老师也非常给力,有实验上的问题都能快速应答。
  • [认证交流] 华为云首个专业级开发者认证即将发布!——HCCDE – GaussDB(DWS)亮点抢先看
    尊敬的客户:很荣幸在此通知您,数据仓库专业级开发者认证(HCCDE - GaussDB(DWS))预计将于2024年9月20日正式对外发布。为帮助您更好的了解HCCDE - GaussDB(DWS)认证相关内容,现进行预发布通知,请您关注。1 什么是HCCDE – GaussDB(DWS)认证?    数据仓库专业级开发者认证(HCCDE - GaussDB(DWS))是华为云重磅推出的首个专业级开发者认证,也是华为云首个完整、明确定义数据仓库人才所需知识及技能的专业级认证。    HCCDE – GaussDB(DWS)认证作为华为云数据仓库领域最高等级的技能认证,由华为云学堂和华为云数据仓库GaussDB(DWS)产品部多位顶级专家精心设计、开发而成,保证了认证内容的权威性和可靠性。该认证主要面向数据仓库、数据库领域的应用架构师、系统架构师、资深工程师等对数据仓库有学习认证需求的相关岗位人员。获得HCCDE – GaussDB(DWS)认证证书能够展示自己在数据仓库领域的专业知识和技能,提升职场竞争力。HCCDE – GaussDB(DWS)认证对于数据仓库领域的专业人士来说,也是一个提升自己技能和展示专业能力的绝佳机会。通过该认证,您将获得华为云官方的能力认可,证明您在数据仓库及大数据方向具备了以下能力:全面掌握数据仓库领域相关的知识,深入理解GaussDB(DWS)的核心架构原理和关键技术原理。具备根据业务场景需要,利用GaussDB(DWS)进行架构设计和业务设计的能力。具备分析GaussDB(DWS)疑难性能问题、进行深度SQL优化、深度性能调优的能力。掌握导入导出方法,可以根据业务需要灵活选择不同数据源的最佳数据访问方案。具备根据业务安全要求进行安全设计的能力。具备根据业务实际需求设计合理的高可用方案,以及根据业务需要和业务高可用要求制定合理的备份和容灾策略的能力。2 为什么选择HCCDE – GaussDB(DWS)?华为云数据仓库GaussDB(DWS),历经13年的技术磨砺,已成为国产数据仓库中的佼佼者,作为中国唯一获得数仓类CC安全认证的产品,在国有大行和股份制银行中的部署比例达到60.1%,是中国金融数仓市场本地部署第一名。GaussDB(DWS)在金融、泛政府、电信、能源、交通、医疗、物流、电商等领域,帮助1700+大客户实现规模商用。数字化时代,各行业对使用数据仓库的需求日益增长,华为云数据仓库GaussDB(DWS)前景广阔,对于相关人才的需求也极为旺盛。3 HCCDE – GaussDB(DWS)认证内容介绍HCCDE – GaussDB(DWS)认证课程将涵盖以下关键知识领域:GaussDB(DWS)核心架构理念:理解GaussDB(DWS)的整体架构和设计原则,包括分布式架构、数据模型、查询处理等方面的技术内容。GaussDB(DWS)对象设计理念:理解如何合理利用GaussDB(DWS)设计和使用对象,以及如何根据不同的业务场景进行有效的业务对象设计。GaussDB(DWS)性能管理:对GaussDB(DWS)进行性能监控和管理,包括如何定位和解决性能问题,以及如何进行性能优化。GaussDB(DWS)数据访问:基于GaussDB(DWS)进行数据的导入、加工、导出和查询,以及如何使用相关的工具和技术。GaussDB(DWS)安全管理及集群安全配置:理解 GaussDB(DWS)的安全机制和策略,包括如何进行安全管理和集群安全配置。GaussDB(DWS)资源管控:在GaussDB(DWS)中进行资源管理和控制,以及如何根据业务需求进行资源分配和调度。GaussDB(DWS)高可靠及高可用原理与方案设计:掌握GaussDB(DWS)的高可靠性和高可用性的设计原则和方法,包括如何设计和应用相关的解决方案。GaussDB(DWS)监控运维原理与方案设计:在GaussDB(DWS)中进行监控和运维,以及如何设计和实施相关的监控和运维方案。4 如何更好地准备认证?为了准备HCCDE – GaussDB(DWS)认证学习与考试,我们建议你具备以下几点条件:首先,你需要拥有多年的数据仓库/数据库领域的工作经验,或者对数据仓库/数据库有较为清晰的认识。这将帮助你更好的理解考试内容,并在实际应用中运用所学知识。其次,你需要拥有HCCDP – GaussDB(DWS)认证证书,或者具备与HCCDP – GaussDB(DWS)同等的能力。这意味着你需要熟悉数据仓库、数据库的基本原理和概念,熟练掌握基本的对象设计方法,熟练掌握SQL写法和规范,以及了解GaussDB(DWS)常用系统表、系统视图及常用的问题处理方法。在开始认证学习之前,我们建议你通过阅读产品文档和参与开发者社区来增进对GaussDB(DWS)的认知。这将帮助你更好地了解GaussDB(DWS)的功能和特性,为认证考试做好准备。产品文档链接:cid:link_1开发者学习平台链接:cid:link_05 考试和认证流程介绍6 结语随着大数据时代的来临,数据成为企业的核心资产。数据仓库技术因此变得至关重要,掌握相关技能对职业发展具有重要的意义。华为云开发者认证推出的HCCDE–GaussDB(DWS)专业级认证,提升个人能力并帮助企业优化数据利用,增强竞争力。加入HCCDE–GaussDB(DWS)专业级认证,共同迎接数据驱动的未来。
  • [认证交流] 数据仓库专业级开发者认证HCCDE-GaussDB(DWS)考试大纲
    数据仓库专业级开发者认证HCCDE-GaussDB(DWS)考试大纲 认证项目数据仓库专业级开发者认证HCCDE-GaussDB(DWS)考试名称数据仓库专业级开发者认证-理论考试数据仓库专业级开发者认证-实验考试考试语言中文试题类型判断题、单选题、多选题操作题考试时长90min480min通过分数/总分60/10070/100 认证介绍该认证面向数据仓库、数据库领域的应用架构师、系统架构师、资深工程师、高级数据库管理员、资深业务分析师,对GaussDB(DWS)架构原理进行了深度技术解读,结合实际业务场景需求对数仓业务设计、性能调优、数据访问、安全设计、高可用设计、监控运维等进行了全面详细的讲解,并结合实验为学员提供实践指导。获得该认证可有效证明您具备以下能力:全面掌握数据仓库领域相关的知识,深入理解GaussDB(DWS)的核心架构原理和关键技术原理;具备根据业务场景需要,利用GaussDB(DWS)进行架构设计和业务设计的能力;具备分析GaussDB(DWS)疑难性能问题、进行深度SQL优化、深度性能调优的能力;掌握导入导出方法,能够根据业务需要灵活选择不同数据源的最佳数据访问方案;具备根据业务安全要求进行安全设计的能力;具备根据业务实际需求设计合理的高可用方案,以及根据业务需要和业务高可用要求制定合理的备份和容灾策略的能力;具备根据业务需求制定合适的业务监控方案,进行业务运维的能力。 考试内容数据仓库专业级开发者认证(HCCDE-GaussDB(DWS))考试包含华为云数仓GaussDB(DWS)核心架构、对象设计、性能管理、数据访问、安全管理及集群安全配置、资源管控、高可靠及高可用原理与方案设计、监控运维原理与方案设计等内容。 理论考试知识点占比内容占比GaussDB(DWS)核心架构24.2%GaussDB(DWS)对象设计9.4%GaussDB(DWS)性能管理12.6%GaussDB(DWS)数据访问8.8%GaussDB(DWS)安全管理7.2%GaussDB(DWS)资源管控16.6%GaussDB(DWS)高可靠7%GaussDB(DWS)高可用6.6%GaussDB(DWS)监控运维7.6% 理论考试知识点GaussDB(DWS)核心架构了解GaussDB(DWS)关键技术指标;了解GaussDB(DWS)支持的云形态以及解决方案;了解GaussDB(DWS)优化器的逻辑优化、物理优化;了解分布式执行框架及其工作原理;了解如何查看分布式执行计划,理解查询计划的含义;掌握分布式优化器在计划生成上的处理以及相关关键技术的扩展;掌握优化器的关键特性:查询重写、Analyze、Cost估算、倾斜优化、内存/SMP自适应的原理和使用方法;掌握行数估算、算子代价、路径搜索的原理与应用;掌握执行器的组成和功能;掌握执行器的核心算子:控制算子、扫描算子、物化算子、连接算子的概念及相关原理;掌握存储引擎的基本概念;掌握行存表、列存表的基本概念和组织结构;掌握事务的实现原理;掌握事务的特性以及相应的实现方法;掌握事务的可见性判断规则;掌握分布式事务和单机事务的区别,以及分布式事务的实现方式;掌握锁机制,理解死锁和分布式死锁的机制;掌握vacuum和autovacuum回收机制;掌握分布式通信原理和基本流程;掌握pooler连接池的实现和查看pooler视图的方法;掌握stream线程池的目的和实现;掌握如何使用通信相关视图判断查询的状态。 GaussDB(DWS)对象设计了解数据库兼容模式差异,掌握兼容模式的选型方法;了解分区的优点及分区剪枝的原理;了解冷热表的原理及适用场景; 掌握创建数据库的重要参数属性及注意事项;掌握表设计原理及设计思路,能够根据实际业务场景进行选型;掌握存储模型、分布方式、分布列的优缺点及适用场景;掌握数据倾斜的检测和消除方法;掌握动态分区的原理及适用方法;掌握不同索引的基本原理与优劣,能够针对具体的应用场景选择索引;掌握视图依赖的查询方法,掌握视图解耦与自动重建方法;掌握函数下推属性相关知识,能够进行存储过程性能调优。 GaussDB(DWS)性能管理理解业务完整的执行流程;掌握性能管理的基本原则;掌握单点性能问题的处理手段;掌握系统性能问题的处理手段。 GaussDB(DWS)数据访问熟悉外表分布式并行架构;熟悉互联互通的使用流程以及使用场景;熟悉多种数据源的导入,包括gds、kafka等;熟悉GaussDB(DWS)提供的标准接口;熟悉常见的能够对接GaussDB(DWS)的第三方工具;掌握OBS、HDFS外表的创建及使用场景;掌握GDS、COPY的创建及使用场景;掌握数据对接的原理、流程和方法。 GaussDB(DWS)安全管理了解SSL基本原理,可以按需进行GaussDB(DWS)的SSL传输加密配置;了解GaussDB(DWS)各类加密函数能力,可以根据业务需要使用合适的加密函数;掌握GaussDB(DWS)的账户安全策略;掌握GaussDB(DWS)行级访问控制能力,具备根据业务场景设计访问控制策略的能力;具备使用透明加密技术设计满足客户需求的安全场景的能力;具备利用数据脱敏技术在保证用户数据安全的基础上使用敏感数据的能力;具备根据客户诉求设计相应的权限管理体系的能力。 GaussDB(DWS)资源管控理解资源管理工作原理与能力,掌握配置和应用方法;理解异常规则基本原理和能力,掌握查询过滤器的使用场景;理解并掌握query_band多维负载识别能力及使用方法;掌握资源池/用户/作业等多维度资源监控能力并熟练应用;掌握用户/Schema空间管控基本原理与能力及使用方法;掌握文件级空间统计原理与能力,掌握应用场景与方法;掌握数据库只读应用场景和使用方法;掌握逻辑集群基本实现原理和使用场景,逻辑集群能力和操作约束。根据应用场景和客户需求,设计资源管理方案。 GaussDB(DWS)高可靠掌握GaussDB(DWS)周边相关硬件的原理,针对相关的故障能够做出诊断;掌握GaussDB(DWS)相关组件的HA原理,能够在集群故障无法自愈的情况下,快速定位原因并恢复集群;掌握CN_Retry以及ELB的原理,具备为用户构建业务级的全链路HA的能力。 GaussDB(DWS)高可用掌握备份恢复的基本流程、一致性原理、关键参数,具备为用户构建备份方案的能力;掌握容灾的原理,流程,约束,RTO/RPO的计算方式,具备根据原理设计容灾方案的能力。 GaussDB(DWS)监控运维了解GaussDB(DWS)提供的基本监控系统;了解监控系统中常用的监控工具;了解告警系统的功能和具体配置方法;掌握在线升级和升级回退的实现原理、约束和注意事项;掌握弹性伸缩的种类、原理和使用场景;具备根据业务需要制定业务监控方案的能力;具备根据在线升级和弹性伸缩的规格对数据库进行运维的能力。 实验考试知识点考核目标掌握GaussDB(DWS)的对象设计原则和性能调优流程,能够识别各类性能问题并正确处理,能够对SQL语句进行改写优化;能够基于GaussDB(DWS)进行数据加工处理;能够对GaussDB(DWS)进行日常运维;具备根据业务场景进行GaussDB(DWS)相关业务方案设计的能力。 GaussDB(DWS)核心架构具备以下技能:处理锁冲突问题识别算子性能瓶颈点 GaussDB(DWS)对象设计具备以下技能:建库建表创建动态分区表进行冷热数据管理根据业务场景选择合适的表分布方式 GaussDB(DWS)性能管理具备以下技能:查看SQL执行计划识别SQL作业来源、并发、执行时长等信息创建及管理资源池定位多种性能问题进行SQL级调优进行系统级调优 GaussDB(DWS)数据访问具备以下技能:区分多种数据源的使用场景进行数据的导入导出 GaussDB(DWS)安全管理具备以下技能:对用户进行权限的赋予和回收根据业务场景设计合适的权限管理方案 GaussDB(DWS)资源管控具备以下技能:进行内存管控及CPU管控进行空间管控处理资源排队问题正确利用视图定位资源使用问题设计资源管理方案 本文提到的考试内容仅为考生提供一个通用的考试指引,本文未提到的其他相关内容在考试中也有可能出现。 推荐培训华为云数据仓库专业级认证培训