- 1.扫描分区过多，元数据中拼接查询报错 2.cascade级联修改表字段 3.alter table drop partition 删除大量分区 4.大分区表查询不带分区 5.sparksql嵌套过多、大量case when 6.sparksql 没有group by 情况下使用Having 1.扫描分区过多，元数据中拼接查询报错 2.cascade级联修改表字段 3.alter table drop partition 删除大量分区 4.大分区表查询不带分区 5.sparksql嵌套过多、大量case when 6.sparksql 没有group by 情况下使用Having
- 12.视图存在全表扫或者大量分区查询 13.大量使用with as 并在sql中多处调用 12.视图存在全表扫或者大量分区查询 13.大量使用with as 并在sql中多处调用
- 7.join on中加判断现象：mr任务慢原因：on条件中存在if或case when判断，在mapjoin时，会拿大表数据一条一条与小表比对同时一条一条做判断导致慢例如：Select * From tba t1Join tbb t2On t1.id=Case where t1.type=’qwr’ THEN t2.type ELSE null END;解决方法：将sql拆分8.join o... 7.join on中加判断现象：mr任务慢原因：on条件中存在if或case when判断，在mapjoin时，会拿大表数据一条一条与小表比对同时一条一条做判断导致慢例如：Select * From tba t1Join tbb t2On t1.id=Case where t1.type=’qwr’ THEN t2.type ELSE null END;解决方法：将sql拆分8.join o...
- 《第六十一篇 调优参数和垃圾回收参数讲下》 《第六十一篇 调优参数和垃圾回收参数讲下》
- 将mongodb-linux-x86_64-4.0.4.tgz复制到chinaskill-sql-1和chinaskill-sql-2解压缩[root@chinaskill-sql-1 ~]# tar -zxf mongodb-linux-x86_64-4.0.4.tgz -C /usr/local存放[root@chinaskill-sql-1 ~]# cd /usr/local[root... 将mongodb-linux-x86_64-4.0.4.tgz复制到chinaskill-sql-1和chinaskill-sql-2解压缩[root@chinaskill-sql-1 ~]# tar -zxf mongodb-linux-x86_64-4.0.4.tgz -C /usr/local存放[root@chinaskill-sql-1 ~]# cd /usr/local[root...
- 将mongodb-linux-x86_64-4.0.4.tgz复制到chinaskill-sql-1和chinaskill-sql-2解压缩[root@chinaskill-sql-1 ~]# tar -zxf mongodb-linux-x86_64-4.0.4.tgz -C /usr/local存放[root@chinaskill-sql-1 ~]# cd /usr/local[root... 将mongodb-linux-x86_64-4.0.4.tgz复制到chinaskill-sql-1和chinaskill-sql-2解压缩[root@chinaskill-sql-1 ~]# tar -zxf mongodb-linux-x86_64-4.0.4.tgz -C /usr/local存放[root@chinaskill-sql-1 ~]# cd /usr/local[root...
- 第一段代码用户传入一个文件夹，自动扫描文件夹内特定文件是否存在某些关键字，如果存在则输出该文件的路径信息。# coding=gbkimport sys,os,redef spider(script_path,script_type): final_files = [] for root, dirs, files in os.walk(script_path, topdown=Fa... 第一段代码用户传入一个文件夹，自动扫描文件夹内特定文件是否存在某些关键字，如果存在则输出该文件的路径信息。# coding=gbkimport sys,os,redef spider(script_path,script_type): final_files = [] for root, dirs, files in os.walk(script_path, topdown=Fa...
- 一、前言响应时间（response time 简称 RT）是从系统接收请求开始到返回响应之间的时间跨度，是一项极其重要的性能指标。它可以从侧面反映系统的整体吞吐量，也是业务请求（比如 sql 请求）的性能好坏的判断依据。举个例子 A 要从杭州坐飞机到北京机场，经历如下：1. 从公司到萧山机场 40min2. 机场安检，候机，登机 40min3. 飞机飞行 耗时 100min4. `机落地，... 一、前言响应时间（response time 简称 RT）是从系统接收请求开始到返回响应之间的时间跨度，是一项极其重要的性能指标。它可以从侧面反映系统的整体吞吐量，也是业务请求（比如 sql 请求）的性能好坏的判断依据。举个例子 A 要从杭州坐飞机到北京机场，经历如下：1. 从公司到萧山机场 40min2. 机场安检，候机，登机 40min3. 飞机飞行 耗时 100min4. `机落地，...
- 编辑“大家好，我是雄雄，欢迎关注微信公众号：雄雄的小课堂。” 常用的几个sql整理1.按照日期统计今天的客流信息。SELECT * FROM base_disanfang WHERE DATE_FORMAT(create_time,'%Y-%m-%d') = DATE_FORMAT(NOW(),'%Y-%m-%d')其中base_disanfang为表名，create_time日期的字段名... 编辑“大家好，我是雄雄，欢迎关注微信公众号：雄雄的小课堂。” 常用的几个sql整理1.按照日期统计今天的客流信息。SELECT * FROM base_disanfang WHERE DATE_FORMAT(create_time,'%Y-%m-%d') = DATE_FORMAT(NOW(),'%Y-%m-%d')其中base_disanfang为表名，create_time日期的字段名...
- 大家好，我是雄雄，欢迎关注微信公众号：雄雄的小课堂 前言现在是2022年4月28日13:41:29！需求：用户可以通过手机号、邮箱来注册我们的系统，用户完成之后，可以去完善自己的个人信息，比如修改手机号，邮箱以及用户名。下次上来，用户可以使用手机号、邮箱以及用户名三种中的任何一种方式登录系统。 实现方法其实这个实现起来挺简单的，就是当时绕了很大的坑，给绕进去了。。。。像这样的需求，直接可以在... 大家好，我是雄雄，欢迎关注微信公众号：雄雄的小课堂 前言现在是2022年4月28日13:41:29！需求：用户可以通过手机号、邮箱来注册我们的系统，用户完成之后，可以去完善自己的个人信息，比如修改手机号，邮箱以及用户名。下次上来，用户可以使用手机号、邮箱以及用户名三种中的任何一种方式登录系统。 实现方法其实这个实现起来挺简单的，就是当时绕了很大的坑，给绕进去了。。。。像这样的需求，直接可以在...
- sql查询缓慢的几个方向 sql查询缓慢的几个方向
- 1. (单选题)下列条件语句中，功能与其他语句不同的是（ ）。A. if(a==0) printf("%d\n",x);else printf("%d\n",y);B. if(a) printf("%d\n",x);else printf("%d\n",y);C. if(a==0) printf("%d\n",y);else ... 1. (单选题)下列条件语句中，功能与其他语句不同的是（ ）。A. if(a==0) printf("%d\n",x);else printf("%d\n",y);B. if(a) printf("%d\n",x);else printf("%d\n",y);C. if(a==0) printf("%d\n",y);else ...
- Pikachu靶场安装mirrors / zhuifengshaonianhanlu / pikachu · GitCodePikachu靶场作为为数不多的中文靶场，做得可以说是很优秀了。进入此处路径，按注释修改修改完成后浏览器访问当然后缀按你们自己的命名而定。 SQL注入的顺序：库名，表名，字段名，数据 首先明确SQL注入的前提：1、我们输入的参数是可以修改的2、参数可以被传到数据库中 ... Pikachu靶场安装mirrors / zhuifengshaonianhanlu / pikachu · GitCodePikachu靶场作为为数不多的中文靶场，做得可以说是很优秀了。进入此处路径，按注释修改修改完成后浏览器访问当然后缀按你们自己的命名而定。 SQL注入的顺序：库名，表名，字段名，数据 首先明确SQL注入的前提：1、我们输入的参数是可以修改的2、参数可以被传到数据库中 ...
- （1）基于布尔的盲注（2）基于时间的盲注（3）基于报错注入（4）联合查询注入（5）堆查询注入。（6）宽字节注入。 布尔盲注的概念基本原理是：通过控制通过and连接起来的子句的布尔值，来控制页面的显示结果来判断and后子句的真实性。首先，既然是布尔盲注，那自然和布尔有关系（废话既然如此，就得回忆一下布尔是个什么玩意。在我的印象里，布尔贼简单，不是对就是错。那么，他是怎么应用在SQL注入中的。首... （1）基于布尔的盲注（2）基于时间的盲注（3）基于报错注入（4）联合查询注入（5）堆查询注入。（6）宽字节注入。 布尔盲注的概念基本原理是：通过控制通过and连接起来的子句的布尔值，来控制页面的显示结果来判断and后子句的真实性。首先，既然是布尔盲注，那自然和布尔有关系（废话既然如此，就得回忆一下布尔是个什么玩意。在我的印象里，布尔贼简单，不是对就是错。那么，他是怎么应用在SQL注入中的。首...
- MySQL中支持的字符集和排序规则 MySQL中支持的字符集和排序规则
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源，3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源，3步轻松管理成本，帮助提升日常管理效率！
回顾中
热门标签