- 问题描述:最近由于业务需要,将两个不同区域的桶数据进行迁移。从北京四区,迁移到上海一区。本想把数据下载到本地,然后再上传到另外的桶中。但是发现数据达到了T级别,非常大。下载和上传,不仅浪费流量,速度也极慢。解决办法:后来发现,华为云上还有一个服务,叫做对象存储迁移服务OMS,真是帮了大忙。如下图:使用过程中,也遇到了一些小坑,特别记录一下。根据文档的说明,我选择了迁移任务组。这里正常填写即可... 问题描述:最近由于业务需要,将两个不同区域的桶数据进行迁移。从北京四区,迁移到上海一区。本想把数据下载到本地,然后再上传到另外的桶中。但是发现数据达到了T级别,非常大。下载和上传,不仅浪费流量,速度也极慢。解决办法:后来发现,华为云上还有一个服务,叫做对象存储迁移服务OMS,真是帮了大忙。如下图:使用过程中,也遇到了一些小坑,特别记录一下。根据文档的说明,我选择了迁移任务组。这里正常填写即可...
- 华为云自动学习之垃圾分类 实践分享使用的平台/技术华为云ModelArts华为云自动学习平台图像分类实验准备1. 实验数据训练集:40张垃圾图片,包括可回收垃圾、其他垃圾、厨余垃圾、有害垃圾,每类各10张。2. 创建obs桶在服务列表中找到“对象存储服务”,进入OBS控制台。点击创建桶,自拟一个桶名字,其他保持默认即可。进入刚创建的桶,依次点击“对象”-“新建文件夹”,分别创建data和ou... 华为云自动学习之垃圾分类 实践分享使用的平台/技术华为云ModelArts华为云自动学习平台图像分类实验准备1. 实验数据训练集:40张垃圾图片,包括可回收垃圾、其他垃圾、厨余垃圾、有害垃圾,每类各10张。2. 创建obs桶在服务列表中找到“对象存储服务”,进入OBS控制台。点击创建桶,自拟一个桶名字,其他保持默认即可。进入刚创建的桶,依次点击“对象”-“新建文件夹”,分别创建data和ou...
- 创建Notebook实例后无法打开页面,如何处理?如何打开ModelArts开发环境的Terminal功能?如何在Notebook中安装外部库?是否支持Keras引擎?如何在Notebook中导入Python库,解决ModuleNotFoundError错误?在Notebook中调测好训练代码后,如何将代码用于训练作业?如何在Notebook中读写OBS文件?创建Notebook时,选择存储... 创建Notebook实例后无法打开页面,如何处理?如何打开ModelArts开发环境的Terminal功能?如何在Notebook中安装外部库?是否支持Keras引擎?如何在Notebook中导入Python库,解决ModuleNotFoundError错误?在Notebook中调测好训练代码后,如何将代码用于训练作业?如何在Notebook中读写OBS文件?创建Notebook时,选择存储...
- 一、图片压缩和水印添加概述1.图片为什么要压缩与水印? 1)信息化时代,大量的多媒体信息保存在互联网上 2)移动互联网+浪潮推动下,每个个体都成为大量的数据制造者 3)如何更好的传输、存储和辨识这些数据?2.图片压缩的使用场景 1)个人、家庭和企业图片归档时压缩,减少磁盘占用 2)在线上传图片大小受限、邮件附件大小受限等限制图片大小场景 3)互联网产品中大量涉及图片,使用压缩提升... 一、图片压缩和水印添加概述1.图片为什么要压缩与水印? 1)信息化时代,大量的多媒体信息保存在互联网上 2)移动互联网+浪潮推动下,每个个体都成为大量的数据制造者 3)如何更好的传输、存储和辨识这些数据?2.图片压缩的使用场景 1)个人、家庭和企业图片归档时压缩,减少磁盘占用 2)在线上传图片大小受限、邮件附件大小受限等限制图片大小场景 3)互联网产品中大量涉及图片,使用压缩提升...
- OBS Java SDK升级之后,支持了Credential Provider机制, 即可以采用简化的方式连接服务端。原理如之前的文章:ECS自动获取AKSK访问OBS其中注意点是 必须在创建ECS的时候, 指定委托,才可以自动获取到AKSKSDK包装之后, 适配了自动获取的AKSK有效期,在应用执行的期间,无需关注临时AKSK的生命周期。通过github上的源码可以看到OBS SDK在初... OBS Java SDK升级之后,支持了Credential Provider机制, 即可以采用简化的方式连接服务端。原理如之前的文章:ECS自动获取AKSK访问OBS其中注意点是 必须在创建ECS的时候, 指定委托,才可以自动获取到AKSKSDK包装之后, 适配了自动获取的AKSK有效期,在应用执行的期间,无需关注临时AKSK的生命周期。通过github上的源码可以看到OBS SDK在初...
- 1. 如何在 OBS Browser 使用“分享链接+提取码”功能分享文件夹?在 OBS Browser 中进入指定桶中,在待分享的文件夹上点击分享按钮,在弹出的窗口中输入分享的有效期和提取码,点击创建分享,生成分享链接和提取码信息,可以将分享信息分享给他人,对方可以在 OBS Browser 打开链接,并输入提取码,下载分享的文件夹中的内容。 2. 如何在 OBS ... 1. 如何在 OBS Browser 使用“分享链接+提取码”功能分享文件夹?在 OBS Browser 中进入指定桶中,在待分享的文件夹上点击分享按钮,在弹出的窗口中输入分享的有效期和提取码,点击创建分享,生成分享链接和提取码信息,可以将分享信息分享给他人,对方可以在 OBS Browser 打开链接,并输入提取码,下载分享的文件夹中的内容。 2. 如何在 OBS ...
- 对象存储桶清单实践桶清单是什么?桶清单功能是定期生成桶内对象的相关信息(对象版本、大小、上次修改时间、存储类别、标签、加密状态),保存在CSV格式的文件中,并上传到您指定的桶中。桶清单可以做什么?1. 可以对指定前缀的对象周期性生成桶清单,以用于对象信息汇总、统计等2. 周期性生成桶清单,可用于对象信息对比等案例对桶website-haha内所有对象设置桶清单... 对象存储桶清单实践桶清单是什么?桶清单功能是定期生成桶内对象的相关信息(对象版本、大小、上次修改时间、存储类别、标签、加密状态),保存在CSV格式的文件中,并上传到您指定的桶中。桶清单可以做什么?1. 可以对指定前缀的对象周期性生成桶清单,以用于对象信息汇总、统计等2. 周期性生成桶清单,可用于对象信息对比等案例对桶website-haha内所有对象设置桶清单...
- 如果您已使用对OBS存储了大量的音视频文件,但同时又想使用视频点播服务对这些音视频文件进行管理处理,为了减少重复上传媒体文件至点播系统耗费的存储空间以及时间,华为云视频点播服务提供了音视频托管的功能,包括存量音视频托管以及增量音视频托管。 如果您想使用OBS API接口、SDK、及其他相关功能,且享受更低成本的存储价格,又想使用华为云点播服务,可以上传数据到OBS,同时开启托管功能。 如果您已使用对OBS存储了大量的音视频文件,但同时又想使用视频点播服务对这些音视频文件进行管理处理,为了减少重复上传媒体文件至点播系统耗费的存储空间以及时间,华为云视频点播服务提供了音视频托管的功能,包括存量音视频托管以及增量音视频托管。 如果您想使用OBS API接口、SDK、及其他相关功能,且享受更低成本的存储价格,又想使用华为云点播服务,可以上传数据到OBS,同时开启托管功能。
- OBS图片处理特性公测发布已有一段时间,在这段较为充分的公测期内,通过众多友好客户真实、大流量业务的检验和特性团队的持续优化,图片处理特性在各个维度日臻完善,已于本月11号正式商用,进入商用收费阶段,不过大家也不用太过担心费用问题,OBS会给每个用户提供一定额度的免费处理量,欢迎大家使用。详情见下文。转商公告:https://www.huaweicloud.com/notice/2018/2... OBS图片处理特性公测发布已有一段时间,在这段较为充分的公测期内,通过众多友好客户真实、大流量业务的检验和特性团队的持续优化,图片处理特性在各个维度日臻完善,已于本月11号正式商用,进入商用收费阶段,不过大家也不用太过担心费用问题,OBS会给每个用户提供一定额度的免费处理量,欢迎大家使用。详情见下文。转商公告:https://www.huaweicloud.com/notice/2018/2...
- 1 背景介绍华为FusionInsight HD是一个分布式数据处理系统,对外提供大容量的数据存储、查询和分析能力。华为云对象存储服务OBS可以提供稳定、安全、高效、易用的云存储服务,并可以与FI对接,提供计算存储分离的大数据解决方案。2 部署视图3 FI对接OBS操作步骤3.1 Hadoop对接3.1.1 更新OBSFileSystem... 1 背景介绍华为FusionInsight HD是一个分布式数据处理系统,对外提供大容量的数据存储、查询和分析能力。华为云对象存储服务OBS可以提供稳定、安全、高效、易用的云存储服务,并可以与FI对接,提供计算存储分离的大数据解决方案。2 部署视图3 FI对接OBS操作步骤3.1 Hadoop对接3.1.1 更新OBSFileSystem...
- 故事的起因曾经把电脑里的很多照片、视频都上传到OBS中进行了备份。今天翻出来,发现有一个视频当时拍的很好,很有意义:是当年的老友们一起在夜里放孔明灯的视频。。。第一想法,就是发给大家看一看,重温一下。。。那很简单:下载到手机上微信给大家不就OK了!Or 把视频文件的路径发给大家,大家下载下来就可以播放了!没错!!!然鹅,我偏不!哈哈!IT人的特质:学以致用(正巧今天看了静态网站托管的介绍,感... 故事的起因曾经把电脑里的很多照片、视频都上传到OBS中进行了备份。今天翻出来,发现有一个视频当时拍的很好,很有意义:是当年的老友们一起在夜里放孔明灯的视频。。。第一想法,就是发给大家看一看,重温一下。。。那很简单:下载到手机上微信给大家不就OK了!Or 把视频文件的路径发给大家,大家下载下来就可以播放了!没错!!!然鹅,我偏不!哈哈!IT人的特质:学以致用(正巧今天看了静态网站托管的介绍,感...
- 对象存储的归档存储类型,由于其超低的存储价格和较短的数据检索和获取时间(分钟级别),得以在海量数据归档场景中占据重要的一席。虽然对比磁带库读取数据时需要的长时间操作流程:抓取磁带、介质加载、机械定位等机械操作,对象存储的归档存储分钟级别的数据读取时间已经足够短了,但在某些时刻我们还是需要更快读取数据,需要更加便利的下载操作,比如归档存储可以直接零等待下载,不需要等待,不需要执行恢复操作。华为... 对象存储的归档存储类型,由于其超低的存储价格和较短的数据检索和获取时间(分钟级别),得以在海量数据归档场景中占据重要的一席。虽然对比磁带库读取数据时需要的长时间操作流程:抓取磁带、介质加载、机械定位等机械操作,对象存储的归档存储分钟级别的数据读取时间已经足够短了,但在某些时刻我们还是需要更快读取数据,需要更加便利的下载操作,比如归档存储可以直接零等待下载,不需要等待,不需要执行恢复操作。华为...
- 此方案主要针对其他云厂商对象存储实时备份到华为云OBS,提供一种多云数据容灾方案。内容以阿里云OSS实时备份到华为云OBS为例。 此方案主要针对其他云厂商对象存储实时备份到华为云OBS,提供一种多云数据容灾方案。内容以阿里云OSS实时备份到华为云OBS为例。
- Apache Pulsar是一种新型的消息队列软件。由雅虎2013年创建,并于2016年并入Apache基金会。目前雅虎和Twitter都是每天通过Pulsar发送超过1000亿条消息。Pulsar原理类似于Kafka, 而不同与Kafka使用本地Broker保存消息, Pulsar使用了Apache BookKeeper提供的数据访问层。故Pulsar是一种计算存储分离的架构,Broke... Apache Pulsar是一种新型的消息队列软件。由雅虎2013年创建,并于2016年并入Apache基金会。目前雅虎和Twitter都是每天通过Pulsar发送超过1000亿条消息。Pulsar原理类似于Kafka, 而不同与Kafka使用本地Broker保存消息, Pulsar使用了Apache BookKeeper提供的数据访问层。故Pulsar是一种计算存储分离的架构,Broke...
- 从OBS的定价详情可以看出,所有请求都是要收费的,这里面也包含了Delete请求虽然价格不贵, 但删对象请求对于每个对象都会产生一次, 这样当删除的对象数达到亿级时, 也会产生100元费用。而OBS自身提供了一种免费的机制,即生命周期管理通过设定某一批对象的生命周期,实现自动过期删除,并且支持指定对象前缀。界面上配置如下生命周期删除的场景是自动周期性删除某个目录下过期对象,所以天数至少需要设... 从OBS的定价详情可以看出,所有请求都是要收费的,这里面也包含了Delete请求虽然价格不贵, 但删对象请求对于每个对象都会产生一次, 这样当删除的对象数达到亿级时, 也会产生100元费用。而OBS自身提供了一种免费的机制,即生命周期管理通过设定某一批对象的生命周期,实现自动过期删除,并且支持指定对象前缀。界面上配置如下生命周期删除的场景是自动周期性删除某个目录下过期对象,所以天数至少需要设...
上滑加载中
推荐直播
-
华为云码道Skill实战与极速交付,智能开发全链路实战2026/07/22 周三 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;姜浩-华为云HCDG核心组成员
直播深度解读华为云码道6月产品新特性,从Skill市场安装专家技能,带你零距离体验从需求,开发,审查,重构全链路闭环的开发过程。从零构建并交付一个完整项目,让您体验从代码提交到服务上线的“极速”之旅。
回顾中 -
聚开发者之力,创具身新未来2026/07/23 周四 15:00-17:00
张豪杰/程文/王军/刘新春/黄钦开 /张晓天
本次华为云具身智能开发平台CloudRobo培训面向具身智能开发者,带您全流程体验机器人本体R2C小时级接入、环境重建与轨迹生成仿真数据生产、PB级数据管理、数据评测、模型训推、强化学习和Benchmark一键评测等功能,并体验业界主流具身模型应用。
回顾中 -
用码道,让你的AI作品三步上朋友圈2026/08/04 周二 19:00-20:00
林华鼎-华为云AI开发者运营负责人
从入门 · 到做AI应用 · 到企业级开发。不教编程,只教用AI · 零代码、有产出、能带走、可炫耀 · 每课人人动手实操
回顾中
热门标签