- Impala入门介绍一、impala基本介绍impala是cloudera提供的一款高效率的sql查询工具，提供实时的查询效果，官方测试性能比hive快10到100倍，其sql查询比sparkSQL还要更加快速，号称是当前大数据领域最快的查询sql工具，impala是参照谷歌的新三篇论文（Caffeine--网络搜索引擎、Pregel--分布式图计算、Dremel--交互式分析工具）当中的... Impala入门介绍一、impala基本介绍impala是cloudera提供的一款高效率的sql查询工具，提供实时的查询效果，官方测试性能比hive快10到100倍，其sql查询比sparkSQL还要更加快速，号称是当前大数据领域最快的查询sql工具，impala是参照谷歌的新三篇论文（Caffeine--网络搜索引擎、Pregel--分布式图计算、Dremel--交互式分析工具）当中的...
- 1.Paddle模型性能分析工具Profiler：定位瓶颈点、优化程序、提升性能 1.Paddle模型性能分析工具Profiler：定位瓶颈点、优化程序、提升性能
- 在数据增强、蒸馏剪枝下ERNIE3.0分类模型性能提升 在数据增强、蒸馏剪枝下ERNIE3.0分类模型性能提升
- 近年来随着深度学习的发展，模型参数的数量飞速增长。为了训练这些参数，需要更大的数据集来避免过拟合。然而，对于大部分NLP任务来说，构建大规模的标注数据集非常困难（成本过高），特别是对于句法和语义相关的任务。相比之下，大规模的未标注语料库的构建则相对容易。为了利用这些数据，我们可以先从其中学习到一个好的表示，再将这些表示应用到其他任务中。最近的研究表明，基于大规模未标注语料库的预训练模型（Pretr 近年来随着深度学习的发展，模型参数的数量飞速增长。为了训练这些参数，需要更大的数据集来避免过拟合。然而，对于大部分NLP任务来说，构建大规模的标注数据集非常困难（成本过高），特别是对于句法和语义相关的任务。相比之下，大规模的未标注语料库的构建则相对容易。为了利用这些数据，我们可以先从其中学习到一个好的表示，再将这些表示应用到其他任务中。最近的研究表明，基于大规模未标注语料库的预训练模型（Pretr
- 对于标注样本充足的场景可以直接使用预训练模型微调实现文本多分类，对于尚无标注或者标注样本较少的任务场景我们推荐使用小样本学习，以取得比微调方法更好的效果。 下边通过新闻分类的例子展示如何使用小样本学习来进行文本分类。 对于标注样本充足的场景可以直接使用预训练模型微调实现文本多分类，对于尚无标注或者标注样本较少的任务场景我们推荐使用小样本学习，以取得比微调方法更好的效果。 下边通过新闻分类的例子展示如何使用小样本学习来进行文本分类。
- 快递单信息抽取【二】基于ERNIE1.0至ErnieGram + CRF预训练模型 快递单信息抽取【二】基于ERNIE1.0至ErnieGram + CRF预训练模型
- Paddlenlp之UIE模型实战实体抽取任务【打车数据、快递单】 Paddlenlp之UIE模型实战实体抽取任务【打车数据、快递单】
- theme: smartblue持续创作，加速成长！这是我参与「掘金日新计划 · 6 月更文挑战」的第17天，点击查看活动详情 Spark Day14：Structured Streaming 01-[了解]-上次课程内容回顾继续讲解：StructuredStreaming，以结构化方式处理流式数据，底层分析引擎SparkSQL引擎。0、数据源（Source） 支持4种数据源：TCP So... theme: smartblue持续创作，加速成长！这是我参与「掘金日新计划 · 6 月更文挑战」的第17天，点击查看活动详情 Spark Day14：Structured Streaming 01-[了解]-上次课程内容回顾继续讲解：StructuredStreaming，以结构化方式处理流式数据，底层分析引擎SparkSQL引擎。0、数据源（Source） 支持4种数据源：TCP So...
- theme: smartblue持续创作，加速成长！这是我参与「掘金日新计划 · 6 月更文挑战」的第17天，点击查看活动详情 Spark Day13：Structured Streaming 01-[了解]-上次课程内容回顾主要讲解2个方面内容：SparkStreaming中偏移量管理和StructuredStreaming快速入门1、SparkStreaming中偏移量管理 - 统计类... theme: smartblue持续创作，加速成长！这是我参与「掘金日新计划 · 6 月更文挑战」的第17天，点击查看活动详情 Spark Day13：Structured Streaming 01-[了解]-上次课程内容回顾主要讲解2个方面内容：SparkStreaming中偏移量管理和StructuredStreaming快速入门1、SparkStreaming中偏移量管理 - 统计类...
- theme: smartblue持续创作，加速成长！这是我参与「掘金日新计划 · 6 月更文挑战」的第13天，点击查看活动详情 Logistics_Day09：实时增量ETL存储Kudu 01-[复习]-上次课程内容回顾 物流项目数据实时ETL转换开发（存储Kudu数据库）部分功能：消费Kafka数据及ETL转换（JSON->Bean对象），项目开发环境搭建（初始化）。主要讲解如何对实... theme: smartblue持续创作，加速成长！这是我参与「掘金日新计划 · 6 月更文挑战」的第13天，点击查看活动详情 Logistics_Day09：实时增量ETL存储Kudu 01-[复习]-上次课程内容回顾 物流项目数据实时ETL转换开发（存储Kudu数据库）部分功能：消费Kafka数据及ETL转换（JSON->Bean对象），项目开发环境搭建（初始化）。主要讲解如何对实...
- 08-[掌握]-实时ETL开发之数据转换Bean及测试任务：==编写代码，解析JSON字符串为MessageBean对象，属于实时ETL转换第一步。==1）、如何解析JSON字符串为JavaBean对象呢？？？使用阿里巴巴JSON库：fastJson，既能解析JSON为Bean对象，又能转换Bean对象为JSON字符串为什么使用fastJson解析？？ fastJson解析Json字符串时... 08-[掌握]-实时ETL开发之数据转换Bean及测试任务：==编写代码，解析JSON字符串为MessageBean对象，属于实时ETL转换第一步。==1）、如何解析JSON字符串为JavaBean对象呢？？？使用阿里巴巴JSON库：fastJson，既能解析JSON为Bean对象，又能转换Bean对象为JSON字符串为什么使用fastJson解析？？ fastJson解析Json字符串时...
- Logistics_Day08：实时增量ETL存储Kudu 01-[复习]-上次课程内容回顾主要讲解2个方面内容：搭建物流项目环境（Maven Project）和结构化流程序（测试）1、搭建物流项目环境 - Windows系统开发环境初始化 设置HADOOP_HOME：指向在windows下编译HADOOP，bin目录winutils.exe和hadoop.dll 设置hadoop.d... Logistics_Day08：实时增量ETL存储Kudu 01-[复习]-上次课程内容回顾主要讲解2个方面内容：搭建物流项目环境（Maven Project）和结构化流程序（测试）1、搭建物流项目环境 - Windows系统开发环境初始化 设置HADOOP_HOME：指向在windows下编译HADOOP，bin目录winutils.exe和hadoop.dll 设置hadoop.d...
- 06-[掌握]-项目初始化之导入数据生成器模块任务：将项目模拟生成数据 模块导入至MavenProject工程中，具体步骤如下所述：1）、解压【logistics-generate.zip】模块到Maven Project目录【D:\Logistics_New\itcast-logistics-parent】下2）、显示导入模块到Maven Project工程中选择，前面解压的模块，点击一... 06-[掌握]-项目初始化之导入数据生成器模块任务：将项目模拟生成数据 模块导入至MavenProject工程中，具体步骤如下所述：1）、解压【logistics-generate.zip】模块到Maven Project目录【D:\Logistics_New\itcast-logistics-parent】下2）、显示导入模块到Maven Project工程中选择，前面解压的模块，点击一...
- Logistics_Day07：实时增量ETL存储Kudu 01-[复习]-上次课程内容回顾 主要讲解：Kudu 存储引擎，类似HBase数据库，存储数据，诞生目的：取代HDFS和HBase，既能够实现随机读写数据，又能够批量加载分析。1）、针对海量数据随机读写，实现HBase数据库功能2）、针对海量数据批量加载，尤其列式存储Parquet Kudu框架诞生之初，考虑与... Logistics_Day07：实时增量ETL存储Kudu 01-[复习]-上次课程内容回顾 主要讲解：Kudu 存储引擎，类似HBase数据库，存储数据，诞生目的：取代HDFS和HBase，既能够实现随机读写数据，又能够批量加载分析。1）、针对海量数据随机读写，实现HBase数据库功能2）、针对海量数据批量加载，尤其列式存储Parquet Kudu框架诞生之初，考虑与...
- Logistics_Day06：Kudu 的操作命令 03-[掌握]-Java 操作 Kudu之创建Maven Project 首先使用Java Client API操作Kudu数据库，DDL操作（创建表、删除表及修改表）和DML操作（CRUD）。创建Maven Project设置GAV如下图所示：创建Maven Module模块，用于编写Java API 操作Kudu，模块GAV设置... Logistics_Day06：Kudu 的操作命令 03-[掌握]-Java 操作 Kudu之创建Maven Project 首先使用Java Client API操作Kudu数据库，DDL操作（创建表、删除表及修改表）和DML操作（CRUD）。创建Maven Project设置GAV如下图所示：创建Maven Module模块，用于编写Java API 操作Kudu，模块GAV设置...
上滑加载中
推荐直播
-
GaussDB数据库介绍2025/01/07 周二 16:00-18:00
Steven 华为云学堂技术讲师
本期直播将介绍GaussDB数据库的发展历程、优势、架构、关键特性和部署模式等，旨在帮助开发者了解GaussDB数据库，并通过手把手实验教大家如何在华为云部署GaussDB数据库和使用gsql连接GaussDB数据库。
去报名 -
DTT年度收官盛典：华为开发者空间大咖汇，共探云端开发创新2025/01/08 周三 16:30-18:00
Yawei 华为云开发工具和效率首席专家 Edwin 华为开发者空间产品总监
数字化转型进程持续加速，驱动着技术革新发展，华为开发者空间如何巧妙整合鸿蒙、昇腾、鲲鹏等核心资源，打破平台间的壁垒，实现跨平台协同？在科技迅猛发展的今天，开发者们如何迅速把握机遇，实现高效、创新的技术突破？DTT 年度收官盛典，将与大家共同探索华为开发者空间的创新奥秘。
去报名 -
GaussDB应用实战：手把手带你写SQL2025/01/09 周四 16:00-18:00
Steven 华为云学堂技术讲师
本期直播将围绕数据库中常用的数据类型、数据库对象、系统函数及操作符等内容展开介绍，帮助初学者掌握SQL入门级的基础语法。同时在线手把手教你写好SQL。
去报名
热门标签