- 一、数据库语言的目标要说清这个目标，先要理解数据库是做什么的数据库这个软件，名字中有个“库”字，会让人觉得它主要是为了存储的。其实不然，数据库实现的重要功能有两条：计算、事务！也就是我们常说的OLAP和OLTP，数据库的存储都是为这两件事服务的，单纯的存储并不是数据库的目标。我们知道，SQL是目前数据库的主流语言。那么，用SQL做这两件事是不是很方便呢？事务类功能主要解决数据在写入和读出时... 一、数据库语言的目标要说清这个目标，先要理解数据库是做什么的数据库这个软件，名字中有个“库”字，会让人觉得它主要是为了存储的。其实不然，数据库实现的重要功能有两条：计算、事务！也就是我们常说的OLAP和OLTP，数据库的存储都是为这两件事服务的，单纯的存储并不是数据库的目标。我们知道，SQL是目前数据库的主流语言。那么，用SQL做这两件事是不是很方便呢？事务类功能主要解决数据在写入和读出时...
- 一、为什么要对我们的sql进行优化很多数据库的数据量都比较小，，导致开发的时候写了一些慢sql，数据量小的时候可能还好，一旦数据量上来了，查询效能极低，并且请求次数过多的话很可能会因为这一个慢sql把你整个系统拖垮，不能正常对外提供服务 二、带着疑问去优化其实优化手段从业务层面上看很单一，也就是通过给字段添加索引，相信很多人都听过sql优化加索引能提高查询效率，但是很少去思考跟索引相关的一... 一、为什么要对我们的sql进行优化很多数据库的数据量都比较小，，导致开发的时候写了一些慢sql，数据量小的时候可能还好，一旦数据量上来了，查询效能极低，并且请求次数过多的话很可能会因为这一个慢sql把你整个系统拖垮，不能正常对外提供服务 二、带着疑问去优化其实优化手段从业务层面上看很单一，也就是通过给字段添加索引，相信很多人都听过sql优化加索引能提高查询效率，但是很少去思考跟索引相关的一...
- 当插入新的记录到数据表中时，SQL Server必须决定在哪里插入记录。如果数据表没有聚集索引—也就是说，数据表还是堆表的话–新的记录总是插到表中任何有可用空间的地方。如果空间中没有可用的分页，SQL Server会尝试从已经分配给对象的现有的统一扩展中寻找未分配的分页。如果这样的分页也不存在，SQL Server就必须为数据表分配一个全新的扩展。聚集索引根据新记录的聚集索引键列的值将插入导... 当插入新的记录到数据表中时，SQL Server必须决定在哪里插入记录。如果数据表没有聚集索引—也就是说，数据表还是堆表的话–新的记录总是插到表中任何有可用空间的地方。如果空间中没有可用的分页，SQL Server会尝试从已经分配给对象的现有的统一扩展中寻找未分配的分页。如果这样的分页也不存在，SQL Server就必须为数据表分配一个全新的扩展。聚集索引根据新记录的聚集索引键列的值将插入导...
- Using mysqldump for Backups使用mysqldump工具可以以以下几种方式来生成dump文件:.作为备份在数据丢失的情况下来执行数据恢复.作为源数据用来配置复制从服务器.作为源数据用来进行实验:-为了复制数据库而不用改变源数据-为了测试潜在的升级后不兼容的问题mysqldump生成两种类型的输出，这依赖于是否使用–tab选项:.不使用–tab选项，mysqldump将... Using mysqldump for Backups使用mysqldump工具可以以以下几种方式来生成dump文件:.作为备份在数据丢失的情况下来执行数据恢复.作为源数据用来配置复制从服务器.作为源数据用来进行实验:-为了复制数据库而不用改变源数据-为了测试潜在的升级后不兼容的问题mysqldump生成两种类型的输出，这依赖于是否使用–tab选项:.不使用–tab选项，mysqldump将...
- Spark为什么快，Spark SQL 一定比 Hive 快吗Spark SQL 比 Hadoop Hive 快，是有一定条件的，而且不是 Spark SQL 的引擎比 Hive 的引擎快，相反，Hive 的 HQL 引擎还比 Spark SQL 的引擎更快。其实，关键还是在于 Spark 本身快。消除了冗余的 HDFS 读写: Hadoop 每次 shuffle 操作后，必须写到磁盘，而... Spark为什么快，Spark SQL 一定比 Hive 快吗Spark SQL 比 Hadoop Hive 快，是有一定条件的，而且不是 Spark SQL 的引擎比 Hive 的引擎快，相反，Hive 的 HQL 引擎还比 Spark SQL 的引擎更快。其实，关键还是在于 Spark 本身快。消除了冗余的 HDFS 读写: Hadoop 每次 shuffle 操作后，必须写到磁盘，而...
- 主键： 是唯一的，通过主键可以准确的找到对应的数据，主键默认非空，为空时自动增长准备sqlite语句：db=sqlite3.connect('xxxxx.db')创建表格文件： cerate table 表名(字段1名称 字段1类型，字段2名称 字段2类型)，例：sql='cerate table xxxx(id integer primary key,name text,age integ... 主键： 是唯一的，通过主键可以准确的找到对应的数据，主键默认非空，为空时自动增长准备sqlite语句：db=sqlite3.connect('xxxxx.db')创建表格文件： cerate table 表名(字段1名称 字段1类型，字段2名称 字段2类型)，例：sql='cerate table xxxx(id integer primary key,name text,age integ...
- 平时大多是执行单表查询，通常你把索引建好，让他尽可能走索引，性能都没问题。但其实也有不少的多表关联语句，因为有时查找目标数据，不得不借助多表关联的语法，才能实现你想要但使用多表关联的时候，你的SQL性能就可能会遇到一些问题。 最基础的多表关联查询的执行原理select * from t1,t2 where t1.x1=xxx and t1.x2=t2.x2 and t2.x3=xx... 平时大多是执行单表查询，通常你把索引建好，让他尽可能走索引，性能都没问题。但其实也有不少的多表关联语句，因为有时查找目标数据，不得不借助多表关联的语法，才能实现你想要但使用多表关联的时候，你的SQL性能就可能会遇到一些问题。 最基础的多表关联查询的执行原理select * from t1,t2 where t1.x1=xxx and t1.x2=t2.x2 and t2.x3=xx...
- 使用命令来创建SQL Server数据库用法use mastergocreate database sampleonprimary(name=sample1,filename=“F:\sqlserver_data\sampledata1.mdf”,size =5MB,maxsize=unlimited,filegrowth=10%),(name=sample2,filename=“F:\sq... 使用命令来创建SQL Server数据库用法use mastergocreate database sampleonprimary(name=sample1,filename=“F:\sqlserver_data\sampledata1.mdf”,size =5MB,maxsize=unlimited,filegrowth=10%),(name=sample2,filename=“F:\sq...
- Mybatis – SelectKey属性 -描述：① keyProperty ： selectKey 语句结果应该被设置的目标属性。② resultType：结果的类型。MyBatis 通常可以算出来,但是写上也没有问题。MyBatis 允许任何简单类型用作主键的类型,包括字符串。③ order： 这可以被设置为 BEFORE 或 AFTER。如果设置为 BEFORE,那么它会首先选择主键... Mybatis – SelectKey属性 -描述：① keyProperty ： selectKey 语句结果应该被设置的目标属性。② resultType：结果的类型。MyBatis 通常可以算出来,但是写上也没有问题。MyBatis 允许任何简单类型用作主键的类型,包括字符串。③ order： 这可以被设置为 BEFORE 或 AFTER。如果设置为 BEFORE,那么它会首先选择主键...
- ORM思想及Mybatis简介简介：对象关系映射（Object Relational Mapping，简称ORM） ORM是通过使用描述对象和数据库之间映射的元数据，将程序中的对象自动持久化到关系数据库中。Mybatis官网地址：http://www.mybatis.org/mybatis-3/zh/getting-started.htmlMyBatis 是支持定制化 SQL、存储过程以及高... ORM思想及Mybatis简介简介：对象关系映射（Object Relational Mapping，简称ORM） ORM是通过使用描述对象和数据库之间映射的元数据，将程序中的对象自动持久化到关系数据库中。Mybatis官网地址：http://www.mybatis.org/mybatis-3/zh/getting-started.htmlMyBatis 是支持定制化 SQL、存储过程以及高...
- 问题表象：表analyze时 提示告警 the tupleDesc analyzed in coordinator is different from tupleDesc which received from datanode。问题分析：本地测试，创建测试表create table t3(id information_schema.sql_identifier, c1 informatio... 问题表象：表analyze时 提示告警 the tupleDesc analyzed in coordinator is different from tupleDesc which received from datanode。问题分析：本地测试，创建测试表create table t3(id information_schema.sql_identifier, c1 informatio...
- 行安全策略除可以通过GRANT使用 SQL 标准的 特权系统之外，表还可以具有 行安全性策略，它针对每一个用户限制哪些行可以 被普通的查询返回或者可以被数据修改命令插入、更新或删除。这种 特性也被称为行级安全性。默认情况下，表不具有 任何策略，这样用户根据 SQL 特权系统具有对表的访问特权，对于 查询或更新来说其中所有的行都是平等的。当在一个表上启用行安全性时（使用 ALTER TABLE... 行安全策略除可以通过GRANT使用 SQL 标准的 特权系统之外，表还可以具有 行安全性策略，它针对每一个用户限制哪些行可以 被普通的查询返回或者可以被数据修改命令插入、更新或删除。这种 特性也被称为行级安全性。默认情况下，表不具有 任何策略，这样用户根据 SQL 特权系统具有对表的访问特权，对于 查询或更新来说其中所有的行都是平等的。当在一个表上启用行安全性时（使用 ALTER TABLE...
- 数据库类型数据库经过几十年的发展，出现了多种类型。根据数据的组织结构不同，主要分为网状数据库、层次数据库、关系型数据库和非关系型数据库四种。目前最常见的数据库模型主要是：关系型数据库和非关系型数据库。 关系型数据库关系型数据库模型是将复杂的数据结构，用较为简单的二元关系（二维表）来表示。PS：关系=二维表在该类型数据库中，对数据的操作基本上都建立在一个或多个表格上，我们可以采用结构化查询语言... 数据库类型数据库经过几十年的发展，出现了多种类型。根据数据的组织结构不同，主要分为网状数据库、层次数据库、关系型数据库和非关系型数据库四种。目前最常见的数据库模型主要是：关系型数据库和非关系型数据库。 关系型数据库关系型数据库模型是将复杂的数据结构，用较为简单的二元关系（二维表）来表示。PS：关系=二维表在该类型数据库中，对数据的操作基本上都建立在一个或多个表格上，我们可以采用结构化查询语言...
- 前言资源是影响 Spark 应用执行效率的一个重要因素。Spark 应用中真正执行 task 的组件是 Executor，可以通过spark.executor.instances 指定 Spark 应用的 Executor 的数量。在运行过程中，无论 Executor上是否有 task 在执行，都会被一直占有直到此 Spark 应用结束。上篇我们从动态优化的角度讲述了 Spark 3.0 版... 前言资源是影响 Spark 应用执行效率的一个重要因素。Spark 应用中真正执行 task 的组件是 Executor，可以通过spark.executor.instances 指定 Spark 应用的 Executor 的数量。在运行过程中，无论 Executor上是否有 task 在执行，都会被一直占有直到此 Spark 应用结束。上篇我们从动态优化的角度讲述了 Spark 3.0 版...
上滑加载中
推荐直播
-
华为云IoT开源专家实践分享：开源让物联网平台更开放、易用2024/05/14 周二 16:30-18:00
张俭 华为云IoT DTSE技术布道师
作为开发者的你是否也想加入开源社区？本期物联网平台资深“程序猿”，开源专家张俭，为你揭秘华为云IoT如何借助开源构建可靠、开放、易用的物联网平台，并手把手教你玩转开源社区！
去报名 -
华为云开发者日·广州站2024/05/15 周三 14:30-17:30
华为云专家团
华为云开发者日HDC.Cloud Day是面向全球开发者的旗舰活动，汇聚来自千行百业、高校及科研院所的开发人员。致力于打造开发者专属的技术盛宴，全方位服务与赋能开发者围绕华为云生态“知、学、用、创、商”的成长路径。通过前沿的技术分享、场景化的动手体验、优秀的应用创新推介，为开发者提供沉浸式学习与交流平台。开放创新，与开发者共创、共享、共赢未来。
去报名 -
企业级数仓迁移工具助您轻松上云2024/05/21 周二 16:30-18:00
Nick 华为云数仓GaussDB(DWS)研发专家
随着云时代的到来，传统数仓已无法满足企业的需求，越来越多的企业选择从传统数仓迁移到云数据仓库，云数仓为企业提供了更低的成本、更灵活极致的体验。本期直播将为您带来企业级数仓搬迁的解决方案，带您一览华为云数仓GaussDB(DWS)提供了哪些迁移方案助力用户实现数据迁移，如何保障迁移后数据的一致性。
去报名
热门标签