- • 配置快速删除在Spark客户端的core-site.xml 配置文件中/opt/Bigdata/client/Spark2x/spark/conf/core-site.xml添加下列属性：fs.obs.trash.enable为true；fs.obs.trash.dir 为”.obs-Posix-FastDelete/”。注：此目录可根据客户需求，命名。例如：<property> ... • 配置快速删除在Spark客户端的core-site.xml 配置文件中/opt/Bigdata/client/Spark2x/spark/conf/core-site.xml添加下列属性：fs.obs.trash.enable为true；fs.obs.trash.dir 为”.obs-Posix-FastDelete/”。注：此目录可根据客户需求，命名。例如：<property> ...
- Hadoop 概述 Hadoop 概述
- HDFS Java 客户端 API HDFS Java 客户端 API
- linux系列第六课 linux系列第六课
- HDFS Shell 命令实操 HDFS Shell 命令实操
- HDFS Shell 命令简介及查询 HDFS Shell 命令简介及查询
- 本文主要解析介绍Hive虚拟列相关源码 本文主要解析介绍Hive虚拟列相关源码
- 当用户需要将保存在HDFS中的数据从当前集群备份到另外一个集群时，需要使用DistCp工具。DistCp工具依赖于集群间拷贝功能，该功能默认未启用。拷贝数据的集群双方都需要配置。管理员可以根据以下指导，在FusionInsight Manager修改参数以启用集群间拷贝功能 当用户需要将保存在HDFS中的数据从当前集群备份到另外一个集群时，需要使用DistCp工具。DistCp工具依赖于集群间拷贝功能，该功能默认未启用。拷贝数据的集群双方都需要配置。管理员可以根据以下指导，在FusionInsight Manager修改参数以启用集群间拷贝功能
- 需要一种可以从关系数据库导入和导出数据的工具。这就是 Apache Sqoop 诞生的原因。Sqoop 可以轻松地与 Hadoop 集成并从 HDFS 上的关系数据库转储结构化数据，从而补充 Hadoop 的强大功能。 需要一种可以从关系数据库导入和导出数据的工具。这就是 Apache Sqoop 诞生的原因。Sqoop 可以轻松地与 Hadoop 集成并从 HDFS 上的关系数据库转储结构化数据，从而补充 Hadoop 的强大功能。
- 在服务客户端的读请求时，HDFS 选择离客户端最近的副本。这减少了读取延迟和带宽消耗。因此，如果可能，选择与读取器节点位于同一机架上的副本。 在服务客户端的读请求时，HDFS 选择离客户端最近的副本。这减少了读取延迟和带宽消耗。因此，如果可能，选择与读取器节点位于同一机架上的副本。
- 题目：MapReduce 黑名单过滤问题 问题描述：在HDFS中有两个名单：人员名单，人员黑名单。要求：对该人员名单进行过滤，除去黑名单中的人员，并且统计人员名单中人员出现的频次。将结果生成文件，保存在HDFS中。 题目：MapReduce 黑名单过滤问题 问题描述：在HDFS中有两个名单：人员名单，人员黑名单。要求：对该人员名单进行过滤，除去黑名单中的人员，并且统计人员名单中人员出现的频次。将结果生成文件，保存在HDFS中。
- 概述FusionInsight Manager提供对集群内的用户数据及系统数据的备份恢复能力，备份功能按组件提供。系统支持备份Manager的数据、组件元数据（DBService、Elasticsearch、HDFS NameNode、HBase、Kafka、Yarn）及业务数据（HBase、HDFS、Elasticsearch、Hive、Redis）。备份功能支持将数据备份至本地磁盘（Lo... 概述FusionInsight Manager提供对集群内的用户数据及系统数据的备份恢复能力，备份功能按组件提供。系统支持备份Manager的数据、组件元数据（DBService、Elasticsearch、HDFS NameNode、HBase、Kafka、Yarn）及业务数据（HBase、HDFS、Elasticsearch、Hive、Redis）。备份功能支持将数据备份至本地磁盘（Lo...
- 在华为云新的试用活动，零元购买鲲鹏版MRS一个月试用。去年也优惠购买过X86版的MRS，不过那时候不知道如何使用，误删除了某些软件，导致MRS无法使用。现在可以直接在MRS界面右上角找到使用指南。 通过使用source /opt/client/bigdata_env进入大数据shell客户端环境。hdfs shell客户端建立目录，上传文件，查看文件内容等操作熟悉hdfs命令。... 在华为云新的试用活动，零元购买鲲鹏版MRS一个月试用。去年也优惠购买过X86版的MRS，不过那时候不知道如何使用，误删除了某些软件，导致MRS无法使用。现在可以直接在MRS界面右上角找到使用指南。 通过使用source /opt/client/bigdata_env进入大数据shell客户端环境。hdfs shell客户端建立目录，上传文件，查看文件内容等操作熟悉hdfs命令。...
- Hadoop如何调整某一个类的日志级别 Hadoop如何调整某一个类的日志级别
- 介绍了 SecondaryNameNode 的工作流程( fsimage 与 edits 文件的合并)，以及 检查点 的相关知识，方便了解 NameNode 与 SecondaryNameNode 之间的关系。 介绍了 SecondaryNameNode 的工作流程( fsimage 与 edits 文件的合并)，以及 检查点 的相关知识，方便了解 NameNode 与 SecondaryNameNode 之间的关系。
上滑加载中
推荐直播
-
昇腾AI算法挑战赛-核心算子如何优化？专家带你深度解析2025/11/17 周一 16:00-17:00
王老师 华为算子专家
昇腾AI算法挑战赛进阶赛战鼓催征！本期直播间，我们特邀华为算子专家王老师，为你深度剖析Matmul、wholereducesum等核心算子的底层原理与优化技巧，直击赛题核心。想提升代码效率、冲击更高排名？锁定直播，带你破局！
回顾中 -
AI编码实干派，“码”力全开2026/02/26 周四 15:00-16:30
谈宗玮/于邦旭/丁俊卿/陈云亮/王一男
【中国，深圳，2026年2月26日】，以“AI编码实干派，码力全开”为主题的华为云码道（CodeArts）代码智能体新春发布会在线上成功召开。华为云码道公测版正式发布，为开发者和企业提供具备工程化能力的智能编码解决方案。
回顾中 -
华为云码道-玩转OpenClaw，开启在线养虾模式2026/03/11 周三 19:00-20:00
刘昱，华为云高级工程师/谈心，华为云技术专家/李海仑，上海圭卓智能科技有限公司CEO
OpenClaw 火爆开发者圈，华为云码道最新推出 Skill ——开发者只需输入一句口令，即可部署一个功能完整的「小龙虾」智能体。直播带你玩转华为云码道，玩转OpenClaw
回顾中
热门标签