- Flink操作KuduFlink主要应用场景是流式数据处理上，有些公司针对流式数据使用Flink实时分析后将结果存入Kudu,例如快手公司。这里将实时计算的结果存入Kudu需要自定义Flink Kudu Sink。场景：Flink实时读取Socket数据，将结果存入Kudu表t_flink_result,为了方便操作不再创建Kudu外表，这里在Impala中创建Kudu内表t_flink_r... Flink操作KuduFlink主要应用场景是流式数据处理上，有些公司针对流式数据使用Flink实时分析后将结果存入Kudu,例如快手公司。这里将实时计算的结果存入Kudu需要自定义Flink Kudu Sink。场景：Flink实时读取Socket数据，将结果存入Kudu表t_flink_result,为了方便操作不再创建Kudu外表，这里在Impala中创建Kudu内表t_flink_r...
- Clickhouse中update/delete的使用从使用场景来说，Clickhouse是个分析型数据库。这种场景下，数据一般是不变的，因此Clickhouse对update、delete的支持是比较弱的，实际上并不支持标准的update、delete操作。下面介绍一下Clickhouse中update、delete的使用。更新、删除语法：Clickhouse通过alter方式实现更新、... Clickhouse中update/delete的使用从使用场景来说，Clickhouse是个分析型数据库。这种场景下，数据一般是不变的，因此Clickhouse对update、delete的支持是比较弱的，实际上并不支持标准的update、delete操作。下面介绍一下Clickhouse中update、delete的使用。更新、删除语法：Clickhouse通过alter方式实现更新、...
- ClickHouse的SQL函数一、类型检测函数select toTypeName(0);select toTypeName(-0);select toTypeName(1000);select toTypeName(-1000);select toTypeName(10000000);select toTypeName(-10000000);select toTypeNam... ClickHouse的SQL函数一、类型检测函数select toTypeName(0);select toTypeName(-0);select toTypeName(1000);select toTypeName(-1000);select toTypeName(10000000);select toTypeName(-10000000);select toTypeNam...
- 一 大数据价值和当前主要应用大数据的价值当前全球数据的生产速度急剧加快，海量数据的存储以及计算问题通过传统的解决方案已经无法应对处理，为此急需有一套针对性的解决方案，Hadoop应运而生。当前大数据的行业应用大数据解决方案就是通过挖掘海量数据的价值，分析数据之间的联系，并最终为企业生产、经营决策等赋能。电信运营商行业1）基于海量生产数据/日志数据，提供历史清单类数据快速查询服务2）汇聚各应... 一 大数据价值和当前主要应用大数据的价值当前全球数据的生产速度急剧加快，海量数据的存储以及计算问题通过传统的解决方案已经无法应对处理，为此急需有一套针对性的解决方案，Hadoop应运而生。当前大数据的行业应用大数据解决方案就是通过挖掘海量数据的价值，分析数据之间的联系，并最终为企业生产、经营决策等赋能。电信运营商行业1）基于海量生产数据/日志数据，提供历史清单类数据快速查询服务2）汇聚各应...
- 利用sentinel 1和2进行指定区域逐月NDVI的监测，此过程中所用的技术要点是利用起止时间来确定每一个月的个数，从而分别计算出每一个月指定区域的NDVI。期间用到了KMEANS聚类，从而将样本点进行训练分类。函数：ee.Clusterer.wekaKMeans(nClusters, init, canopies, maxCandidates, periodicPruning, min... 利用sentinel 1和2进行指定区域逐月NDVI的监测，此过程中所用的技术要点是利用起止时间来确定每一个月的个数，从而分别计算出每一个月指定区域的NDVI。期间用到了KMEANS聚类，从而将样本点进行训练分类。函数：ee.Clusterer.wekaKMeans(nClusters, init, canopies, maxCandidates, periodicPruning, min...
- 三个案例开发一、记录请求日志需求：记录每次请求中如下的信息并存储进入日志文件请求的来源浏览器所在电脑IP请求的资源 URL请求发生的时间监听器代码package com.lanson.listener;import javax.servlet.ServletRequest;import javax.servlet.ServletRequestEvent;import javax.servle... 三个案例开发一、记录请求日志需求：记录每次请求中如下的信息并存储进入日志文件请求的来源浏览器所在电脑IP请求的资源 URL请求发生的时间监听器代码package com.lanson.listener;import javax.servlet.ServletRequest;import javax.servlet.ServletRequestEvent;import javax.servle...
- 开发案例之登录验证需求：通过过滤器控制,只有登录过之后可以反复进入welcome.jsp欢迎页,如果没有登录,提示用户进入登录页进行登录操作。一、准备实体类User类：package com.lanson.pojo;import java.io.Serializable;/** * @Author: Lansonli * @Description: MircoMessage:Mark_70... 开发案例之登录验证需求：通过过滤器控制,只有登录过之后可以反复进入welcome.jsp欢迎页,如果没有登录,提示用户进入登录页进行登录操作。一、准备实体类User类：package com.lanson.pojo;import java.io.Serializable;/** * @Author: Lansonli * @Description: MircoMessage:Mark_70...
- 过滤器注解应用和开发案例一、过滤器注解应用@WebFilter属性package com.lanson.filter;import javax.servlet.*;import javax.servlet.annotation.WebFilter;import javax.servlet.annotation.WebInitParam;import java.io.IOException;... 过滤器注解应用和开发案例一、过滤器注解应用@WebFilter属性package com.lanson.filter;import javax.servlet.*;import javax.servlet.annotation.WebFilter;import javax.servlet.annotation.WebInitParam;import java.io.IOException;...
- 过滤器的使用在一个web应用中，可以开发编写多个Filter，这些Filter组合起来称之为一个Filter链。web服务器根据Filter在web.xml文件中的注册顺序，决定先调用哪个Filter，当第一个Filter的doFilter方法被调用时，web服务器会创建一个代表Filter链的FilterChain对象传递给该方法。在doFilter方法中，开发人员如果调用了FilterC... 过滤器的使用在一个web应用中，可以开发编写多个Filter，这些Filter组合起来称之为一个Filter链。web服务器根据Filter在web.xml文件中的注册顺序，决定先调用哪个Filter，当第一个Filter的doFilter方法被调用时，web服务器会创建一个代表Filter链的FilterChain对象传递给该方法。在doFilter方法中，开发人员如果调用了FilterC...
- 用户标签开发一、用户首单时间SELECT t1.cid, t1.cdt, t2.nameFROM (SELECT tcsi.ciid AS cid, MIN(tcsi.cdt) AS cdt FROM tbl_consumer_sender_info tcsi GROUP BY tcsi.ciid ORDER BY cdt ASC... 用户标签开发一、用户首单时间SELECT t1.cid, t1.cdt, t2.nameFROM (SELECT tcsi.ciid AS cid, MIN(tcsi.cdt) AS cdt FROM tbl_consumer_sender_info tcsi GROUP BY tcsi.ciid ORDER BY cdt ASC...
- Hue简介一、Hue介绍HUE是一个开源的Apache Hadoop UI系统，早期由Cloudera开发，后来贡献给开源社区。该web应用的后台采用python编程语言编写的。通过使用Hue我们可以通过浏览器方式操纵Hadoop集群进行交互来分析处理数据。简单来讲，就是用图形化的界面来操作HDFS上的数据，运行MapReduce Job，执行Hive的SQL语句，浏览Hbase数据库，oo... Hue简介一、Hue介绍HUE是一个开源的Apache Hadoop UI系统，早期由Cloudera开发，后来贡献给开源社区。该web应用的后台采用python编程语言编写的。通过使用Hue我们可以通过浏览器方式操纵Hadoop集群进行交互来分析处理数据。简单来讲，就是用图形化的界面来操作HDFS上的数据，运行MapReduce Job，执行Hive的SQL语句，浏览Hbase数据库，oo...
- 使用Impala对kudu进行DML操作一、将数据插入Kudu表impala允许使用标准 SQL 语句将数据插入Kudu1、插入单个值创建表CREATE TABLE `my_first_table`( id BIGINT, name STRING, PRIMARY KEY(id))PARTITION BY HASH PARTITIONS 16STORED A... 使用Impala对kudu进行DML操作一、将数据插入Kudu表impala允许使用标准 SQL 语句将数据插入Kudu1、插入单个值创建表CREATE TABLE `my_first_table`( id BIGINT, name STRING, PRIMARY KEY(id))PARTITION BY HASH PARTITIONS 16STORED A...
- Impala的java开发在实际工作当中，因为impala的查询比较快，所以可能有会使用到impala来做数据库查询的情况，可以通过java代码来进行操作impala的查询。一、下载impala jdbc依赖下载路径：Download Impala JDBC Connector 2.5.28因为cloudera属于商业公司性质，其提供的jar并不会出现在开源的maven仓库中，如果在企业中... Impala的java开发在实际工作当中，因为impala的查询比较快，所以可能有会使用到impala来做数据库查询的情况，可以通过java代码来进行操作impala的查询。一、下载impala jdbc依赖下载路径：Download Impala JDBC Connector 2.5.28因为cloudera属于商业公司性质，其提供的jar并不会出现在开源的maven仓库中，如果在企业中...
- Impala数据导入方式一、load data首先创建一个表：create table user(id int ,name string,age int ) row format delimited fields terminated by "\t";准备数据user.txt并上传到hdfs的 /user/impala路径下去数据内容: user.txt1 allen 182 kobe 1... Impala数据导入方式一、load data首先创建一个表：create table user(id int ,name string,age int ) row format delimited fields terminated by "\t";准备数据user.txt并上传到hdfs的 /user/impala路径下去数据内容: user.txt1 allen 182 kobe 1...
- 即席查询的背景介绍和业务处理流程一、背景介绍在快递业务运营过程中，经常会收到用户的投诉或者咨询，用户向咨询服务人员提供账号信息，客服人员可以根据用户的账号查询出来该用户的画像，以便对该用户的情况作为了解，因此数据开发人员需要编写sql语句实现用户画像开发，sql语句的开发牵扯到多表的关联会比较复杂，所以需要开发者平台实现sql的编写，Hue即实现了sql的开发即席查询的作用：... 即席查询的背景介绍和业务处理流程一、背景介绍在快递业务运营过程中，经常会收到用户的投诉或者咨询，用户向咨询服务人员提供账号信息，客服人员可以根据用户的账号查询出来该用户的画像，以便对该用户的情况作为了解，因此数据开发人员需要编写sql语句实现用户画像开发，sql语句的开发牵扯到多表的关联会比较复杂，所以需要开发者平台实现sql的编写，Hue即实现了sql的开发即席查询的作用：...
上滑加载中
推荐直播
-
华为云码道-玩转OpenClaw，在线养虾2026/03/11 周三 19:00-21:00
刘昱，华为云高级工程师/谈心，华为云技术专家/李海仑，上海圭卓智能科技有限公司CEO
OpenClaw 火爆开发者圈，华为云码道最新推出 Skill ——开发者只需输入一句口令，即可部署一个功能完整的「小龙虾」智能体。直播带你玩转华为云码道，玩转OpenClaw
回顾中 -
华为云码道-AI时代应用开发利器2026/03/18 周三 19:00-20:00
童得力，华为云开发者生态运营总监/姚圣伟，华为云HCDE开发者专家
本次直播由华为专家带你实战应用开发，看华为云码道(CodeArts)代码智能体如何在AI时代让你的创意应用快速落地。更有华为云HCDE开发者专家带你用码道玩转JiuwenClaw，让小艺成为你的AI助理。
回顾中 -
Skill 构建 × 智能创作：基于华为云码道的 AI 内容生产提效方案2026/03/25 周三 19:00-20:00
余伟，华为云软件研发工程师/万邵业（万少），华为云HCDE开发者专家
本次直播带来两大实战：华为云码道 Skill-Creator 手把手搭建专属知识库 Skill；如何用码道提效 OpenClaw 小说文本，打造从大纲到成稿的 AI 原创小说全链路。技术干货 + OPC创作思路，一次讲透！
回顾中
热门标签