- 随着Spark SQL计算引擎的发展，Spark批处理的能力和性能也越来越成熟。很多大数据平台开始将自己的业务从Hive迁移到Spark，Facebook就是其中之一。在迁移过程中难免出现不兼容、性能下降等问题，本文将针对Facebook Hive UDF迁移到Spark过程中遇到的各种问题进行介绍。 随着Spark SQL计算引擎的发展，Spark批处理的能力和性能也越来越成熟。很多大数据平台开始将自己的业务从Hive迁移到Spark，Facebook就是其中之一。在迁移过程中难免出现不兼容、性能下降等问题，本文将针对Facebook Hive UDF迁移到Spark过程中遇到的各种问题进行介绍。
- 基于Spark Catalyst的物化视图改写引擎的实现 基于Spark Catalyst的物化视图改写引擎的实现
- 敏捷智库月刊，每月更新一刊，欢迎大家品读。本期推荐敏捷和效能专家Ali、重磅解读第14次敏捷报告、DevOps转型避坑指南、TiD2020大会预告，精彩内容值得分享。 敏捷智库月刊，每月更新一刊，欢迎大家品读。本期推荐敏捷和效能专家Ali、重磅解读第14次敏捷报告、DevOps转型避坑指南、TiD2020大会预告，精彩内容值得分享。
- 前言JDK是一个强大的开发工具集，里面提供了大量的通用类和API，在Java代码开发过程中也被大量使用，但事实上，你对JDK真有你想象当中的那么“熟悉”吗？在代码检视过程中，经常发现的一些JDK中的类或API未被合理地、正确地使用，本篇将列举几种最常用的案例，并进行分析说明。案例分析1. 被误用的SimpleDateFormatSimpleDateFormat在平常的开发过程中比... 前言JDK是一个强大的开发工具集，里面提供了大量的通用类和API，在Java代码开发过程中也被大量使用，但事实上，你对JDK真有你想象当中的那么“熟悉”吗？在代码检视过程中，经常发现的一些JDK中的类或API未被合理地、正确地使用，本篇将列举几种最常用的案例，并进行分析说明。案例分析1. 被误用的SimpleDateFormatSimpleDateFormat在平常的开发过程中比...
- Spark任务失败 Container be Killed怎么解决？ Spark任务失败 Container be Killed怎么解决？
- 一文让你开发效率蹭蹭蹭的上涨（idea快捷键指南） 一文让你开发效率蹭蹭蹭的上涨（idea快捷键指南）
- BaseParser | |_TXTParser --List<string> | |_WordParser --- List<Aspose.Words.Node> | |_PDFParser ---PDF =>Doc,List<Aspose.Words.Node> --Paragraph | |_PPTParser ---List... BaseParser | |_TXTParser --List<string> | |_WordParser --- List<Aspose.Words.Node> | |_PDFParser ---PDF =>Doc,List<Aspose.Words.Node> --Paragraph | |_PPTParser ---List...
- python mysqls数据库连表查询相关知识。 python mysqls数据库连表查询相关知识。
- idea 启动命令行的时候提示不能创建PTY idea 启动命令行的时候提示不能创建PTY
- JAVA实现一个简单的异步请求 JAVA实现一个简单的异步请求
- 前端时间写了个自动化的脚本，每天从编译环境上取软件包到自己的开发环境，然后安装软件包。但是遇到了一个问题，就是执行scp或ssh命令是需要输入密码的，网上搜了下，用了两种方法搭建了两个自动化环境。 前端时间写了个自动化的脚本，每天从编译环境上取软件包到自己的开发环境，然后安装软件包。但是遇到了一个问题，就是执行scp或ssh命令是需要输入密码的，网上搜了下，用了两种方法搭建了两个自动化环境。
- 客户端:参考: 基于Websocket的简易webshell实现 ---- https://stackoverflow.com/questions/38277740/html-css-javascript-command-line-like-interface有几点小改动:addLine添加br并且设置滚动位置 ;点击背景,设置焦点到textarea;ws.onmessage是调用... 客户端:参考: 基于Websocket的简易webshell实现 ---- https://stackoverflow.com/questions/38277740/html-css-javascript-command-line-like-interface有几点小改动:addLine添加br并且设置滚动位置 ;点击背景,设置焦点到textarea;ws.onmessage是调用...
- mysql 数据库单表查询操作相关知识。 mysql 数据库单表查询操作相关知识。
- mysql 数据库的增、删、改的操作语法学习。 mysql 数据库的增、删、改的操作语法学习。
- 不错的qt线程启动暂停停止的实现方法:具体实现参考:https://codereview.stackexchange.com/questions/26724/thread-pausing-resuming-canceling-with-qtQItemDelegate绘制图片m_image = new QImage(":/xxxx.png");...painter->drawImage(opt... 不错的qt线程启动暂停停止的实现方法:具体实现参考:https://codereview.stackexchange.com/questions/26724/thread-pausing-resuming-canceling-with-qtQItemDelegate绘制图片m_image = new QImage(":/xxxx.png");...painter->drawImage(opt...
上滑加载中
推荐直播
-
华为云开发者日·2024年度创享峰会2024/12/23 周一 14:00-16:00
华为云讲师团
华为云开发者日HDC.Cloud Day是面向全球开发者的旗舰活动，汇聚来自千行百业、高校及科研院所的开发人员。致力于打造开发者专属的技术盛宴，全方位服务与赋能开发者围绕华为云生态“知、学、用、创、商”的成长路径。通过前沿的技术分享、场景化的动手体验、优秀的应用创新推介，为开发者提供沉浸式学习与交流平台。开放创新，与开发者共创、共享、共赢未来。
正在直播 -
GaussDB管理平台TPOPS，DBA高效运维的一站式解决方案2024/12/24 周二 16:30-18:00
Leo 华为云数据库DTSE技术布道师
数据库的复杂运维，是否让你感到头疼不已？今天，华为云GaussDB管理平台将彻底来改观！本期直播，我们将深入探索GaussDB管理平台的TPOPS功能，带你感受一键式部署安装的便捷，和智能化运维管理的高效，让复杂的运维、管理变得简单，让简单变得可靠。
去报名 -
华为云软件开发生产线（CodeArts）11月新特性解读2024/12/24 周二 19:00-20:00
苏柏亚培 华为云高级产品经理
不知道产品的最新特性？没法和产品团队建立直接的沟通？本期直播产品经理将为您解读华为云软件开发生产线10月发布的新特性，并在直播过程中为您答疑解惑。
即将直播
热门标签