- OBS图片处理特性公测发布已有一段时间,在这段较为充分的公测期内,通过众多友好客户真实、大流量业务的检验和特性团队的持续优化,图片处理特性在各个维度日臻完善,已于本月11号正式商用,进入商用收费阶段,不过大家也不用太过担心费用问题,OBS会给每个用户提供一定额度的免费处理量,欢迎大家使用。详情见下文。转商公告:https://www.huaweicloud.com/notice/2018/2... OBS图片处理特性公测发布已有一段时间,在这段较为充分的公测期内,通过众多友好客户真实、大流量业务的检验和特性团队的持续优化,图片处理特性在各个维度日臻完善,已于本月11号正式商用,进入商用收费阶段,不过大家也不用太过担心费用问题,OBS会给每个用户提供一定额度的免费处理量,欢迎大家使用。详情见下文。转商公告:https://www.huaweicloud.com/notice/2018/2...
- 1 背景介绍华为FusionInsight HD是一个分布式数据处理系统,对外提供大容量的数据存储、查询和分析能力。华为云对象存储服务OBS可以提供稳定、安全、高效、易用的云存储服务,并可以与FI对接,提供计算存储分离的大数据解决方案。2 部署视图3 FI对接OBS操作步骤3.1 Hadoop对接3.1.1 更新OBSFileSystem... 1 背景介绍华为FusionInsight HD是一个分布式数据处理系统,对外提供大容量的数据存储、查询和分析能力。华为云对象存储服务OBS可以提供稳定、安全、高效、易用的云存储服务,并可以与FI对接,提供计算存储分离的大数据解决方案。2 部署视图3 FI对接OBS操作步骤3.1 Hadoop对接3.1.1 更新OBSFileSystem...
- 故事的起因曾经把电脑里的很多照片、视频都上传到OBS中进行了备份。今天翻出来,发现有一个视频当时拍的很好,很有意义:是当年的老友们一起在夜里放孔明灯的视频。。。第一想法,就是发给大家看一看,重温一下。。。那很简单:下载到手机上微信给大家不就OK了!Or 把视频文件的路径发给大家,大家下载下来就可以播放了!没错!!!然鹅,我偏不!哈哈!IT人的特质:学以致用(正巧今天看了静态网站托管的介绍,感... 故事的起因曾经把电脑里的很多照片、视频都上传到OBS中进行了备份。今天翻出来,发现有一个视频当时拍的很好,很有意义:是当年的老友们一起在夜里放孔明灯的视频。。。第一想法,就是发给大家看一看,重温一下。。。那很简单:下载到手机上微信给大家不就OK了!Or 把视频文件的路径发给大家,大家下载下来就可以播放了!没错!!!然鹅,我偏不!哈哈!IT人的特质:学以致用(正巧今天看了静态网站托管的介绍,感...
- 对象存储的归档存储类型,由于其超低的存储价格和较短的数据检索和获取时间(分钟级别),得以在海量数据归档场景中占据重要的一席。虽然对比磁带库读取数据时需要的长时间操作流程:抓取磁带、介质加载、机械定位等机械操作,对象存储的归档存储分钟级别的数据读取时间已经足够短了,但在某些时刻我们还是需要更快读取数据,需要更加便利的下载操作,比如归档存储可以直接零等待下载,不需要等待,不需要执行恢复操作。华为... 对象存储的归档存储类型,由于其超低的存储价格和较短的数据检索和获取时间(分钟级别),得以在海量数据归档场景中占据重要的一席。虽然对比磁带库读取数据时需要的长时间操作流程:抓取磁带、介质加载、机械定位等机械操作,对象存储的归档存储分钟级别的数据读取时间已经足够短了,但在某些时刻我们还是需要更快读取数据,需要更加便利的下载操作,比如归档存储可以直接零等待下载,不需要等待,不需要执行恢复操作。华为...
- 此方案主要针对其他云厂商对象存储实时备份到华为云OBS,提供一种多云数据容灾方案。内容以阿里云OSS实时备份到华为云OBS为例。 此方案主要针对其他云厂商对象存储实时备份到华为云OBS,提供一种多云数据容灾方案。内容以阿里云OSS实时备份到华为云OBS为例。
- Apache Pulsar是一种新型的消息队列软件。由雅虎2013年创建,并于2016年并入Apache基金会。目前雅虎和Twitter都是每天通过Pulsar发送超过1000亿条消息。Pulsar原理类似于Kafka, 而不同与Kafka使用本地Broker保存消息, Pulsar使用了Apache BookKeeper提供的数据访问层。故Pulsar是一种计算存储分离的架构,Broke... Apache Pulsar是一种新型的消息队列软件。由雅虎2013年创建,并于2016年并入Apache基金会。目前雅虎和Twitter都是每天通过Pulsar发送超过1000亿条消息。Pulsar原理类似于Kafka, 而不同与Kafka使用本地Broker保存消息, Pulsar使用了Apache BookKeeper提供的数据访问层。故Pulsar是一种计算存储分离的架构,Broke...
- 背景 当前在华为云中,允许别的服务访问对象存储或者别的租户访问自己的桶内数据都可以通过委托的形式进行,那么在委托创建好之后,在程序中进行使用时候这部分操作还是有点麻烦,在这儿就系统性整理下,方便使用时候参考。创建委托参考可以参考 https://bbs.huaweicloud.com/blogs/0a7a412ae32e11e8bd5a7ca23e93a891 中所描述代码实... 背景 当前在华为云中,允许别的服务访问对象存储或者别的租户访问自己的桶内数据都可以通过委托的形式进行,那么在委托创建好之后,在程序中进行使用时候这部分操作还是有点麻烦,在这儿就系统性整理下,方便使用时候参考。创建委托参考可以参考 https://bbs.huaweicloud.com/blogs/0a7a412ae32e11e8bd5a7ca23e93a891 中所描述代码实...
- 从OBS的定价详情可以看出,所有请求都是要收费的,这里面也包含了Delete请求虽然价格不贵, 但删对象请求对于每个对象都会产生一次, 这样当删除的对象数达到亿级时, 也会产生100元费用。而OBS自身提供了一种免费的机制,即生命周期管理通过设定某一批对象的生命周期,实现自动过期删除,并且支持指定对象前缀。界面上配置如下生命周期删除的场景是自动周期性删除某个目录下过期对象,所以天数至少需要设... 从OBS的定价详情可以看出,所有请求都是要收费的,这里面也包含了Delete请求虽然价格不贵, 但删对象请求对于每个对象都会产生一次, 这样当删除的对象数达到亿级时, 也会产生100元费用。而OBS自身提供了一种免费的机制,即生命周期管理通过设定某一批对象的生命周期,实现自动过期删除,并且支持指定对象前缀。界面上配置如下生命周期删除的场景是自动周期性删除某个目录下过期对象,所以天数至少需要设...
- 1 背景介绍OBS桶策略可以给特定用户设置特定的权限。下面代码展示通过JAVA SDK给用户桶设置高级桶策略。2 代码展示需要先下载OBS最新的JAVA SDK,参考官网链接:https://developer.huaweicloud.com/sdk?OBS,并在自己的项目中导入SDK中的JAR包。前提条件:已创建OBS桶,例如my-bucket123设置的桶策略为:给用... 1 背景介绍OBS桶策略可以给特定用户设置特定的权限。下面代码展示通过JAVA SDK给用户桶设置高级桶策略。2 代码展示需要先下载OBS最新的JAVA SDK,参考官网链接:https://developer.huaweicloud.com/sdk?OBS,并在自己的项目中导入SDK中的JAR包。前提条件:已创建OBS桶,例如my-bucket123设置的桶策略为:给用...
- 不同带宽下数据传输量参考表在向OBS上传数据和从OBS下载数据时候,特别是在大量数据搬迁的时候,需要对传输的时间和数据量进行评估。对此做了一个小表格,方便业务评估时候参考。很多在调用SDK或则API进行对象上传时候,需要携带Content-MD5头域进行 上传数据的一致性校验。此头域的值内容解释在API中比较模糊,这儿做进一步解释说明。如何计算Content-MD5?首先根据文件内容计算得出... 不同带宽下数据传输量参考表在向OBS上传数据和从OBS下载数据时候,特别是在大量数据搬迁的时候,需要对传输的时间和数据量进行评估。对此做了一个小表格,方便业务评估时候参考。很多在调用SDK或则API进行对象上传时候,需要携带Content-MD5头域进行 上传数据的一致性校验。此头域的值内容解释在API中比较模糊,这儿做进一步解释说明。如何计算Content-MD5?首先根据文件内容计算得出...
- 全栈专属云解决方案中,如何将数据进行迁移是其中一个重要部分。就OBS数据而言,整理了一下迁移方案,仅供参考。 全栈专属云解决方案中,如何将数据进行迁移是其中一个重要部分。就OBS数据而言,整理了一下迁移方案,仅供参考。
- CDM(Cloud Data Migration)提供同构/异构数据源之间批量数据迁移服务,帮助客户实现数据自由流动。支持客户自建和公有云上的文件系统,关系数据库,数据仓库,NoSQL,大数据云服务,对象存储等数据源。本文将以CDM迁移HDFS数据到华为云OBS为例,介绍CDM配置过程。 CDM(Cloud Data Migration)提供同构/异构数据源之间批量数据迁移服务,帮助客户实现数据自由流动。支持客户自建和公有云上的文件系统,关系数据库,数据仓库,NoSQL,大数据云服务,对象存储等数据源。本文将以CDM迁移HDFS数据到华为云OBS为例,介绍CDM配置过程。
- 拉通专线以后,专线是到VPC,由于OBS的网段比较特殊,无法直接访问,需要使用VPC终端节点进行配置首先配置专线虚拟网关,VPC网段需包含OBS的网段100.125.0.0/16在VPC 终端节点分别购买OBS终端节点、DNS终端节点(用于解析出OBS内网地址)DNS终端节点买好效果如下:专线非华为云端需要配置DNS转发,将OBS相关域名转发到华为云的DNS终端节点以常见的DNS软件Bind... 拉通专线以后,专线是到VPC,由于OBS的网段比较特殊,无法直接访问,需要使用VPC终端节点进行配置首先配置专线虚拟网关,VPC网段需包含OBS的网段100.125.0.0/16在VPC 终端节点分别购买OBS终端节点、DNS终端节点(用于解析出OBS内网地址)DNS终端节点买好效果如下:专线非华为云端需要配置DNS转发,将OBS相关域名转发到华为云的DNS终端节点以常见的DNS软件Bind...
- 如何通过专线访问华为云OBS,本文通过实例,详细解析相关配置及业务流程。 如何通过专线访问华为云OBS,本文通过实例,详细解析相关配置及业务流程。
- 1 背景介绍华为云对象存储服务可以提供稳定、安全、高效、易用的云存储服务。当前,华为云OBS可以与Hadoop和Spark大数据生态进行对接,为用户提供计算存储分离的大数据解决方案。该方案具有高性能、低成本的优势,且无扩容问题,使用维护更加方便简洁。本操作指导书旨在帮助华为云用户在开源大数据平台Hadoop和Spark上快速对接OBSFileSystem组件,更好的使用华为云对象存... 1 背景介绍华为云对象存储服务可以提供稳定、安全、高效、易用的云存储服务。当前,华为云OBS可以与Hadoop和Spark大数据生态进行对接,为用户提供计算存储分离的大数据解决方案。该方案具有高性能、低成本的优势,且无扩容问题,使用维护更加方便简洁。本操作指导书旨在帮助华为云用户在开源大数据平台Hadoop和Spark上快速对接OBSFileSystem组件,更好的使用华为云对象存...
上滑加载中
推荐直播
-
华为云 x DeepSeek:AI驱动云上应用创新
2025/02/26 周三 16:00-18:00
华为云 AI专家大咖团
在 AI 技术飞速发展之际,DeepSeek 备受关注。它凭借哪些技术与理念脱颖而出?华为云与 DeepSeek 合作,将如何重塑产品与应用模式,助力企业数字化转型?在华为开发者空间,怎样高效部署 DeepSeek,搭建专属服务器?基于华为云平台,又该如何挖掘 DeepSeek 潜力,实现智能化升级?本期直播围绕DeepSeek在云上的应用案例,与DTSE布道师们一起探讨如何利用AI 驱动云上应用创新。
回顾中 -
智能观测进化论系列沙龙(第一期)
2025/02/28 周五 14:00-16:30
华为及外部讲师团
本期直播就智能化可观测技术的融合与创新、落地与实践、瓶颈与未来等业界关心的话题进行深入探讨。
回顾中 -
聚焦Deepseek,洞察开发者生态发展
2025/02/28 周五 19:00-20:30
蒋涛 csdn创始人
深入剖析Deepseek爆发后,中国开发者生态潜藏的巨大发展潜能与未来走向,精准提炼出可供大家把握的时代机遇,干货满满,不容错过。
回顾中
热门标签