- 介绍了 机架感知(通过HDFS网络拓扑图介绍)、副本冗余存储策略及其优点, HDFS文件读取、写入的详细过程(HDFS数据上传 、 下载 过程的分析),FSDataInputStream 类、FSDataOutputStream 类的常用方法,以及 数据容错 的有关知识。 介绍了 机架感知(通过HDFS网络拓扑图介绍)、副本冗余存储策略及其优点, HDFS文件读取、写入的详细过程(HDFS数据上传 、 下载 过程的分析),FSDataInputStream 类、FSDataOutputStream 类的常用方法,以及 数据容错 的有关知识。
- 大数据容器化,大势所趋。头部玩家在进行大数据容器化后,尝到了甜头? 大数据容器化,大势所趋。头部玩家在进行大数据容器化后,尝到了甜头?
- 前言现在的社会是一个高速发展的社会,科技发达,信息流通,人们之间的交流越来越密切,生活也越来越方便,大数据就是这个高科技时代的产物。随着中国经济的快速发展,汽车行业空前繁荣,私人小汽车拥有量迅速增加,居民出行总量稳步增长,出行距离快速增加。然而,交通拥堵已成为许多大中城市的一种通病,并逐渐成为阻碍、制约城市社会经济发展的负面因素,成为城市管理的热点和难点。为切实提升公安交通管理水平,构建安全... 前言现在的社会是一个高速发展的社会,科技发达,信息流通,人们之间的交流越来越密切,生活也越来越方便,大数据就是这个高科技时代的产物。随着中国经济的快速发展,汽车行业空前繁荣,私人小汽车拥有量迅速增加,居民出行总量稳步增长,出行距离快速增加。然而,交通拥堵已成为许多大中城市的一种通病,并逐渐成为阻碍、制约城市社会经济发展的负面因素,成为城市管理的热点和难点。为切实提升公安交通管理水平,构建安全...
- 前言目前博客Hadoop文章大都停留在Hadoop2.x阶段,本系列对2.x没有的新特性进行补充更新,一键三连加关注,下次不迷路! 历史文章[hadoop3.x系列]HDFS REST HTTP API的使用(一)WebHDFS[hadoop3.x系列]HDFS REST HTTP API的使用(二)HttpFS 🍑Hadoop常用文件存储格式 传统系统常见文件存储格式在Windows有... 前言目前博客Hadoop文章大都停留在Hadoop2.x阶段,本系列对2.x没有的新特性进行补充更新,一键三连加关注,下次不迷路! 历史文章[hadoop3.x系列]HDFS REST HTTP API的使用(一)WebHDFS[hadoop3.x系列]HDFS REST HTTP API的使用(二)HttpFS 🍑Hadoop常用文件存储格式 传统系统常见文件存储格式在Windows有...
- linux系列第八课 linux系列第八课
- 在上节云计算行业应用—大数据@音视频(一)中,我们探讨了随着企业业务发展和产生消费数据量级的增加,大数据技术不断打破原有极限,相关技术不断演进,新的大数据架构层出不穷。本节我们将深入大数据行业应用,从上节讨论到的数据湖出发,结合音视频行业相关业务场景和相关大数据架构,更进一步的理解大数据技术和华为云相关服务的应用。1. 数据湖基本架构 数据湖是伴随企业业余和数据... 在上节云计算行业应用—大数据@音视频(一)中,我们探讨了随着企业业务发展和产生消费数据量级的增加,大数据技术不断打破原有极限,相关技术不断演进,新的大数据架构层出不穷。本节我们将深入大数据行业应用,从上节讨论到的数据湖出发,结合音视频行业相关业务场景和相关大数据架构,更进一步的理解大数据技术和华为云相关服务的应用。1. 数据湖基本架构 数据湖是伴随企业业余和数据...
- 随着通信、互联网及物联网等技术的不断发展,企业所提供的互联网服务能够被越来越多的接入方式诸如:网页、手机终端、电视终端、家庭智能终端设备等进行访问。越来越细致多样的数据统计、收集方式的应用,使得越来越大规模的数据被生产出来。据IDC发布《数据时代2025》的报告显示,全球每年产生的数据将从2018年的33ZB增长到175ZB,相当于每天产生491EB的数据。 大规模... 随着通信、互联网及物联网等技术的不断发展,企业所提供的互联网服务能够被越来越多的接入方式诸如:网页、手机终端、电视终端、家庭智能终端设备等进行访问。越来越细致多样的数据统计、收集方式的应用,使得越来越大规模的数据被生产出来。据IDC发布《数据时代2025》的报告显示,全球每年产生的数据将从2018年的33ZB增长到175ZB,相当于每天产生491EB的数据。 大规模...
- MySQL流程控制语句概述 MySQL流程控制语句概述
- 大数据之路顺应人类科技的进步而诞生,一直顺风顺水,不到20年时间,已渗透到社会生产和人们生活的方方面面。然而,伴随着信息量的指数级增长,大数据也开始面临存储资源告急、算力吃紧、数据处理效率无法满足业务增长诉求等一系列问题,导致唱衰之声此起彼伏。而近年来兴起的容器技术,以其轻量化、易迁移、扩容快等优势,结合计算存储分离的分布式架构,可以更好地发挥大数据平台在海量数据集、高并发、实时分析等应用场... 大数据之路顺应人类科技的进步而诞生,一直顺风顺水,不到20年时间,已渗透到社会生产和人们生活的方方面面。然而,伴随着信息量的指数级增长,大数据也开始面临存储资源告急、算力吃紧、数据处理效率无法满足业务增长诉求等一系列问题,导致唱衰之声此起彼伏。而近年来兴起的容器技术,以其轻量化、易迁移、扩容快等优势,结合计算存储分离的分布式架构,可以更好地发挥大数据平台在海量数据集、高并发、实时分析等应用场...
- 今天为大家推荐的故事是新当选的 ASF Member,来自华为 今天为大家推荐的故事是新当选的 ASF Member,来自华为
- 最近在 Win10 系统上配置了ubuntu-18.04.3,在配置集群的 ssh 无秘钥登录时,经常能碰到 ssh: connect to host master port 22: Connection timed out 的问题。 最近在 Win10 系统上配置了ubuntu-18.04.3,在配置集群的 ssh 无秘钥登录时,经常能碰到 ssh: connect to host master port 22: Connection timed out 的问题。
- 费时费力的花钱举办了一场打折优惠促销活动,可是零售商家如何知道活动办得好不好? 费时费力的花钱举办了一场打折优惠促销活动,可是零售商家如何知道活动办得好不好?
- 个人练习前端技术使用Bootstrap、JQuery、thymeleaf 个人练习前端技术使用Bootstrap、JQuery、thymeleaf
- 目录 1、什么是SSH? 2、SSH由“客户端”和“服务端”的软件组成 3、SSH认证机制(详细图解) 4、演示“远程拷贝” 5、配置免密登录:和免密登陆相关的文件夹/root/.ssh 6、检验是否配置成功 1、什么是SSH? SSH为Secure Shell(安全外壳协议)的缩写,简单说,SSH只是一种网络协议,用于计算机之间的加密... 目录 1、什么是SSH? 2、SSH由“客户端”和“服务端”的软件组成 3、SSH认证机制(详细图解) 4、演示“远程拷贝” 5、配置免密登录:和免密登陆相关的文件夹/root/.ssh 6、检验是否配置成功 1、什么是SSH? SSH为Secure Shell(安全外壳协议)的缩写,简单说,SSH只是一种网络协议,用于计算机之间的加密...
- BigData之Storm:Apache Storm的简介、深入理解、下载、案例应用之详细攻略 目录 Apache Storm的简介 Apache Storm的深入理解 1、Storm与hadoop 2、Apache Storm的API Apache Storm的下载 Current 2.2.x Release Apache Storm的案例... BigData之Storm:Apache Storm的简介、深入理解、下载、案例应用之详细攻略 目录 Apache Storm的简介 Apache Storm的深入理解 1、Storm与hadoop 2、Apache Storm的API Apache Storm的下载 Current 2.2.x Release Apache Storm的案例...
上滑加载中
推荐直播
-
物联网资深专家带你轻松构建AIoT智能场景应用
2024/11/21 周四 16:30-18:00
管老师 华为云IoT DTSE技术布道师
如何轻松构建AIoT智能场景应用?本期直播将聚焦华为云设备接入平台,结合AI、鸿蒙(OpenHarmony)、大数据等技术,实现物联网端云协同创新场景,教您如何打造更有实用性及创新性的AIoT行业标杆应用。
回顾中 -
Ascend C算子编程之旅:基础入门篇
2024/11/22 周五 16:00-17:30
莫老师 昇腾CANN专家
介绍Ascend C算子基本概念、异构计算架构CANN和Ascend C基本概述,以及Ascend C快速入门,夯实Ascend C算子编程基础
即将直播 -
深入解析:华为全栈AI解决方案与云智能开放能力
2024/11/22 周五 18:20-20:20
Alex 华为云学堂技术讲师
本期直播我们将重点为大家介绍华为全栈全场景AI解决方案以和华为云企业智能AI开放能力。旨在帮助开发者深入理解华为AI解决方案,并能够更加熟练地运用这些技术。通过洞悉华为解决方案,了解人工智能完整生态链条的构造。
去报名
热门标签