- 随着Spark SQL计算引擎的发展，Spark批处理的能力和性能也越来越成熟。很多大数据平台开始将自己的业务从Hive迁移到Spark，Facebook就是其中之一。在迁移过程中难免出现不兼容、性能下降等问题，本文将针对Facebook Hive UDF迁移到Spark过程中遇到的各种问题进行介绍。 随着Spark SQL计算引擎的发展，Spark批处理的能力和性能也越来越成熟。很多大数据平台开始将自己的业务从Hive迁移到Spark，Facebook就是其中之一。在迁移过程中难免出现不兼容、性能下降等问题，本文将针对Facebook Hive UDF迁移到Spark过程中遇到的各种问题进行介绍。
- 基于Spark Catalyst的物化视图改写引擎的实现 基于Spark Catalyst的物化视图改写引擎的实现
- 敏捷智库月刊，每月更新一刊，欢迎大家品读。本期推荐敏捷和效能专家Ali、重磅解读第14次敏捷报告、DevOps转型避坑指南、TiD2020大会预告，精彩内容值得分享。 敏捷智库月刊，每月更新一刊，欢迎大家品读。本期推荐敏捷和效能专家Ali、重磅解读第14次敏捷报告、DevOps转型避坑指南、TiD2020大会预告，精彩内容值得分享。
- 前言JDK是一个强大的开发工具集，里面提供了大量的通用类和API，在Java代码开发过程中也被大量使用，但事实上，你对JDK真有你想象当中的那么“熟悉”吗？在代码检视过程中，经常发现的一些JDK中的类或API未被合理地、正确地使用，本篇将列举几种最常用的案例，并进行分析说明。案例分析1. 被误用的SimpleDateFormatSimpleDateFormat在平常的开发过程中比... 前言JDK是一个强大的开发工具集，里面提供了大量的通用类和API，在Java代码开发过程中也被大量使用，但事实上，你对JDK真有你想象当中的那么“熟悉”吗？在代码检视过程中，经常发现的一些JDK中的类或API未被合理地、正确地使用，本篇将列举几种最常用的案例，并进行分析说明。案例分析1. 被误用的SimpleDateFormatSimpleDateFormat在平常的开发过程中比...
- Spark任务失败 Container be Killed怎么解决？ Spark任务失败 Container be Killed怎么解决？
- 一文让你开发效率蹭蹭蹭的上涨（idea快捷键指南） 一文让你开发效率蹭蹭蹭的上涨（idea快捷键指南）
- BaseParser | |_TXTParser --List<string> | |_WordParser --- List<Aspose.Words.Node> | |_PDFParser ---PDF =>Doc,List<Aspose.Words.Node> --Paragraph | |_PPTParser ---List... BaseParser | |_TXTParser --List<string> | |_WordParser --- List<Aspose.Words.Node> | |_PDFParser ---PDF =>Doc,List<Aspose.Words.Node> --Paragraph | |_PPTParser ---List...
- python mysqls数据库连表查询相关知识。 python mysqls数据库连表查询相关知识。
- idea 启动命令行的时候提示不能创建PTY idea 启动命令行的时候提示不能创建PTY
- JAVA实现一个简单的异步请求 JAVA实现一个简单的异步请求
- 前端时间写了个自动化的脚本，每天从编译环境上取软件包到自己的开发环境，然后安装软件包。但是遇到了一个问题，就是执行scp或ssh命令是需要输入密码的，网上搜了下，用了两种方法搭建了两个自动化环境。 前端时间写了个自动化的脚本，每天从编译环境上取软件包到自己的开发环境，然后安装软件包。但是遇到了一个问题，就是执行scp或ssh命令是需要输入密码的，网上搜了下，用了两种方法搭建了两个自动化环境。
- 客户端:参考: 基于Websocket的简易webshell实现 ---- https://stackoverflow.com/questions/38277740/html-css-javascript-command-line-like-interface有几点小改动:addLine添加br并且设置滚动位置 ;点击背景,设置焦点到textarea;ws.onmessage是调用... 客户端:参考: 基于Websocket的简易webshell实现 ---- https://stackoverflow.com/questions/38277740/html-css-javascript-command-line-like-interface有几点小改动:addLine添加br并且设置滚动位置 ;点击背景,设置焦点到textarea;ws.onmessage是调用...
- mysql 数据库单表查询操作相关知识。 mysql 数据库单表查询操作相关知识。
- mysql 数据库的增、删、改的操作语法学习。 mysql 数据库的增、删、改的操作语法学习。
- 不错的qt线程启动暂停停止的实现方法:具体实现参考:https://codereview.stackexchange.com/questions/26724/thread-pausing-resuming-canceling-with-qtQItemDelegate绘制图片m_image = new QImage(":/xxxx.png");...painter->drawImage(opt... 不错的qt线程启动暂停停止的实现方法:具体实现参考:https://codereview.stackexchange.com/questions/26724/thread-pausing-resuming-canceling-with-qtQItemDelegate绘制图片m_image = new QImage(":/xxxx.png");...painter->drawImage(opt...
上滑加载中
推荐直播
-
华为云码道Skill实战与极速交付，智能开发全链路实战2026/07/22 周三 19:00-21:00
王一男-华为云码道产品规划专家；李炎-华为云码道产品专家；姜浩-华为云HCDG核心组成员
直播深度解读华为云码道6月产品新特性，从Skill市场安装专家技能，带你零距离体验从需求，开发，审查，重构全链路闭环的开发过程。从零构建并交付一个完整项目，让您体验从代码提交到服务上线的“极速”之旅。
即将直播 -
聚开发者之力，创具身新未来2026/07/23 周四 15:00-17:00
张豪杰/程文/王军/刘新春/黄钦开 /张晓天
本次华为云具身智能开发平台CloudRobo培训面向具身智能开发者，带您全流程体验机器人本体R2C小时级接入、环境重建与轨迹生成仿真数据生产、PB级数据管理、数据评测、模型训推、强化学习和Benchmark一键评测等功能，并体验业界主流具身模型应用。
即将直播
热门标签