- 很多大数据计算都是用SQL实现的，跑得慢时就要去优化SQL，但常常碰到让人干瞪眼的情况。 比如，存储过程中有三条大概形如这样的语句执行得很慢： select a,b,sum(x) from T gr... 很多大数据计算都是用SQL实现的，跑得慢时就要去优化SQL，但常常碰到让人干瞪眼的情况。 比如，存储过程中有三条大概形如这样的语句执行得很慢： select a,b,sum(x) from T gr...
- 点击下方“Java编程鸭”关注并标星 更多精彩 第一时间直达 来源：juejin.cn/post/7030076565673213989 写在前面 新的同事来之后问我where 1=1 是什么意思，这样没意义啊，我笑了。今天来说明下。 where 1=1 先来看一段代码： <select id... 点击下方“Java编程鸭”关注并标星 更多精彩 第一时间直达 来源：juejin.cn/post/7030076565673213989 写在前面 新的同事来之后问我where 1=1 是什么意思，这样没意义啊，我笑了。今天来说明下。 where 1=1 先来看一段代码： <select id...
- 文章目录 零、本讲学习目标一、使用Spark SQL实现词频统计（一）数据源 - words.txt（二）创建Maven项目（三）添加依赖和构建插件（四）修改源目录名称（五）创建日志属性文件（六）... 文章目录 零、本讲学习目标一、使用Spark SQL实现词频统计（一）数据源 - words.txt（二）创建Maven项目（三）添加依赖和构建插件（四）修改源目录名称（五）创建日志属性文件（六）...
- 文章目录 一、先用window函数尝试二、获得对应的collection_list三、用withColumn和split进行分隔Reference 一、先用window函数尝试 pyspa... 文章目录 一、先用window函数尝试二、获得对应的collection_list三、用withColumn和split进行分隔Reference 一、先用window函数尝试 pyspa...
- 文章目录 零、本讲学习目标一、Spark SQL内置函数（一）内置函数概述1、10类内置函数2、两种使用方式 （二）内置函数演示1、通过编程方式使用内置函数upper()2、通过SQL语句的... 文章目录 零、本讲学习目标一、Spark SQL内置函数（一）内置函数概述1、10类内置函数2、两种使用方式 （二）内置函数演示1、通过编程方式使用内置函数upper()2、通过SQL语句的...
- 文章目录 零、本讲学习目标一、Spark SQL读取关系数据库二、Spark SQL JDBC连接属性三、创建数据库与表（一）创建数据库（二）创建学生表（二）创建成绩表 四、读取和写入数据库表... 文章目录 零、本讲学习目标一、Spark SQL读取关系数据库二、Spark SQL JDBC连接属性三、创建数据库与表（一）创建数据库（二）创建学生表（二）创建成绩表 四、读取和写入数据库表...
- 文章目录 零、本讲学习目标一、Spark SQL支持读写Hive二、Spark配置hive-site.xml三、准备工作（一）启动Hive的metastore（二）启动Spark Shell ... 文章目录 零、本讲学习目标一、Spark SQL支持读写Hive二、Spark配置hive-site.xml三、准备工作（一）启动Hive的metastore（二）启动Spark Shell ...
- 文章目录 零、本讲学习目标一、读取JSON文件概述二、读取JSON文件案例演示（一）创建JSON文件并上传到HDFS（二）读取JSON文件，创建临时表，进行关联查询1、读取user.json文件，... 文章目录 零、本讲学习目标一、读取JSON文件概述二、读取JSON文件案例演示（一）创建JSON文件并上传到HDFS（二）读取JSON文件，创建临时表，进行关联查询1、读取user.json文件，...
- 1、根据考纲 数据库知识 （1）数据库模型（概念模式、外模式、内模式） （2）数据模型，ER图，规范化 （3）数据操作 （4）数据库语言 （5）数据库管理系统的功能和特征 （6）数据库的控制功能 （7）... 1、根据考纲 数据库知识 （1）数据库模型（概念模式、外模式、内模式） （2）数据模型，ER图，规范化 （3）数据操作 （4）数据库语言 （5）数据库管理系统的功能和特征 （6）数据库的控制功能 （7）...
- 作者：小傅哥 博客：https://bugstack.cn - 《手写Mybatis系列》 一、前言 为什么，要读框架源码？ 因为手里的业务工程代码太拉胯了！通常作为业务研发，所开发出来的代码，大部... 作者：小傅哥 博客：https://bugstack.cn - 《手写Mybatis系列》 一、前言 为什么，要读框架源码？ 因为手里的业务工程代码太拉胯了！通常作为业务研发，所开发出来的代码，大部...
- 第一：虚拟域名，看我博客，就知道啦.美化url也是啦(必须进行url美化+虚拟域名才能使用啊啊啊) 第一步： 把backend复制一份，改名为api. 第二步： 在common/config/bootst... 第一：虚拟域名，看我博客，就知道啦.美化url也是啦(必须进行url美化+虚拟域名才能使用啊啊啊) 第一步： 把backend复制一份，改名为api. 第二步： 在common/config/bootst...
- 文章目录 零、本讲学习目标一、基本操作（一）默认数据源1、默认数据源Parquet2、案例演示读取Parquet文件（1）在Spark Shell中演示（2）通过Scala程序演示 ... 文章目录 零、本讲学习目标一、基本操作（一）默认数据源1、默认数据源Parquet2、案例演示读取Parquet文件（1）在Spark Shell中演示（2）通过Scala程序演示 ...
- 本文针对关系型数据库的一般语法。限于篇幅，本文侧重说明用法，不会展开讲解特性、原理。 一、基本概念 数据库术语 数据库（database） - 保存有组织的数据的容器（通常是一个文件或一组文件）。数据表（table） - 某种特定类型数据的结构化清单。模式（schema） - 关于数据库和表... 本文针对关系型数据库的一般语法。限于篇幅，本文侧重说明用法，不会展开讲解特性、原理。 一、基本概念 数据库术语 数据库（database） - 保存有组织的数据的容器（通常是一个文件或一组文件）。数据表（table） - 某种特定类型数据的结构化清单。模式（schema） - 关于数据库和表...
- 需要从数据库检索某些符合要求的数据，我们很容易写出 Select A B C FROM T WHERE ID = XX 这样的SQL，那么当我们向数据库发送这样一个请求时，数据库到底做了什么？ 我们今天以MYSQL为例，揭示一下MySQL数据库的查询过程，并让大家对数据库里的一些零件有所了解。 MYSQL架构 ... 需要从数据库检索某些符合要求的数据，我们很容易写出 Select A B C FROM T WHERE ID = XX 这样的SQL，那么当我们向数据库发送这样一个请求时，数据库到底做了什么？ 我们今天以MYSQL为例，揭示一下MySQL数据库的查询过程，并让大家对数据库里的一些零件有所了解。 MYSQL架构 ...
- 当有人问你如何对数据库进行优化时，很多人第一反应想到的就是SQL优化，如何创建索引，如何改写SQL。他们把数据库优化与SQL优化划上了等号。当然这不能算是完全错误的回答，只不过思考的角度稍微片面了些，太“... 当有人问你如何对数据库进行优化时，很多人第一反应想到的就是SQL优化，如何创建索引，如何改写SQL。他们把数据库优化与SQL优化划上了等号。当然这不能算是完全错误的回答，只不过思考的角度稍微片面了些，太“...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源，3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源，3步轻松管理成本，帮助提升日常管理效率！
回顾中
热门标签