- 目录前言正文MinIO 简单介绍API 介绍 操作存储桶 存储桶策略 操作文件对象 操作对象结尾 前言MinIO 是一款非常热门的开源对象存储服务器,能够完美兼容亚马逊的 S3 协议, 对 K8s 也能够进行非常友好的支持,专为 AI 等云原生工作负载而设计。包括构建高性能的云原生数据机器学习、大数据分析、海量存储的基础架构等方面,MinIO 都可以提供数据工作负载。有数据统计,在中国大陆,... 目录前言正文MinIO 简单介绍API 介绍 操作存储桶 存储桶策略 操作文件对象 操作对象结尾 前言MinIO 是一款非常热门的开源对象存储服务器,能够完美兼容亚马逊的 S3 协议, 对 K8s 也能够进行非常友好的支持,专为 AI 等云原生工作负载而设计。包括构建高性能的云原生数据机器学习、大数据分析、海量存储的基础架构等方面,MinIO 都可以提供数据工作负载。有数据统计,在中国大陆,...
- 之前完成了”图像分类"数据集,为了更好熟悉ModelArts,这次尝试“图像分割”数据集的创建。数据准备开始前,需要下载数据集,而本次使用的数据集可以从AI gallery中查找,名为dataset-segmentation-88。创建数据集进入ModelArts数据管理->数据集,点击创建一个数据集,类型选择图像分割,输入路径选择Gallery下载数据的位置,创建标签"person",“c... 之前完成了”图像分类"数据集,为了更好熟悉ModelArts,这次尝试“图像分割”数据集的创建。数据准备开始前,需要下载数据集,而本次使用的数据集可以从AI gallery中查找,名为dataset-segmentation-88。创建数据集进入ModelArts数据管理->数据集,点击创建一个数据集,类型选择图像分割,输入路径选择Gallery下载数据的位置,创建标签"person",“c...
- 使用ModelArts通常需要上传较大的数据集到OBS,我们可以选择OBS客户端上传,在没有OBS客户端的情况下,则可以选择使用NoteBook上传数据,来提高数据上传的效率。下面介绍一下如何借助NoteBook上传数据集到OBS。1、创建一个notebook,此处建议选择挂载在EVS硬盘下,方便NoteBook多次启动数据不会丢失。2、打开notebook,点击右上角new按钮,点击Ter... 使用ModelArts通常需要上传较大的数据集到OBS,我们可以选择OBS客户端上传,在没有OBS客户端的情况下,则可以选择使用NoteBook上传数据,来提高数据上传的效率。下面介绍一下如何借助NoteBook上传数据集到OBS。1、创建一个notebook,此处建议选择挂载在EVS硬盘下,方便NoteBook多次启动数据不会丢失。2、打开notebook,点击右上角new按钮,点击Ter...
- 使用pdfjs在线预览PDF文件。可以控制相关按钮的展示和隐藏 使用pdfjs在线预览PDF文件。可以控制相关按钮的展示和隐藏
- DAOS (Distributed Asynchronous Object Storage) 是一个开源的对象存储系统,专为大规模分布式非易失性内存设计,利用了 SCM 和 NVMe 等的下一代 NVM 技术。 DAOS 同时在硬件之上提供了键值存储接口,提供了诸如事务性非阻塞 I/O、具有自我修复的高级数据保护、端到端数据完整性、细粒度数据控制和弹性存储的高级数据保护,从而优化性能并降低成本。 DAOS (Distributed Asynchronous Object Storage) 是一个开源的对象存储系统,专为大规模分布式非易失性内存设计,利用了 SCM 和 NVMe 等的下一代 NVM 技术。 DAOS 同时在硬件之上提供了键值存储接口,提供了诸如事务性非阻塞 I/O、具有自我修复的高级数据保护、端到端数据完整性、细粒度数据控制和弹性存储的高级数据保护,从而优化性能并降低成本。
- DAOS (Distributed Asynchronous Object Storage) 是一个开源的对象存储系统,专为大规模分布式非易失性内存设计,利用了 SCM 和 NVMe 等的下一代 NVM 技术。 DAOS 同时在硬件之上提供了键值存储接口,提供了诸如事务性非阻塞 I/O、具有自我修复的高级数据保护、端到端数据完整性、细粒度数据控制和弹性存储的高级数据保护,从而优化性能并降低成本。 DAOS (Distributed Asynchronous Object Storage) 是一个开源的对象存储系统,专为大规模分布式非易失性内存设计,利用了 SCM 和 NVMe 等的下一代 NVM 技术。 DAOS 同时在硬件之上提供了键值存储接口,提供了诸如事务性非阻塞 I/O、具有自我修复的高级数据保护、端到端数据完整性、细粒度数据控制和弹性存储的高级数据保护,从而优化性能并降低成本。
- DAOS (Distributed Asynchronous Object Storage) 是一个开源的对象存储系统,专为大规模分布式非易失性内存设计,利用了 SCM 和 NVMe 等的下一代 NVM 技术。 DAOS 同时在硬件之上提供了键值存储接口,提供了诸如事务性非阻塞 I/O、具有自我修复的高级数据保护、端到端数据完整性、细粒度数据控制和弹性存储的高级数据保护,从而优化性能并降低成本。 DAOS (Distributed Asynchronous Object Storage) 是一个开源的对象存储系统,专为大规模分布式非易失性内存设计,利用了 SCM 和 NVMe 等的下一代 NVM 技术。 DAOS 同时在硬件之上提供了键值存储接口,提供了诸如事务性非阻塞 I/O、具有自我修复的高级数据保护、端到端数据完整性、细粒度数据控制和弹性存储的高级数据保护,从而优化性能并降低成本。
- DWS中数据导出到OBS;读取OBS中数据;OBS中数据导入到DWS。 DWS中数据导出到OBS;读取OBS中数据;OBS中数据导入到DWS。
- 使用Python爬虫抓取图片和文字实验微认证知识点回顾 使用Python爬虫抓取图片和文字实验微认证知识点回顾
- 金蝶K3产品华为云上部署一指禅,手把手式指导操作,零基础可完成部署。 金蝶K3产品华为云上部署一指禅,手把手式指导操作,零基础可完成部署。
- MRS集群pyspark使用obsclient报错缺少obs模块,报错如下图1:解决方案一:前期准备1. MRS2.1.0、Spark2.3.22. 样例代码在提交任务的节点(比如master1),代码路径为/tmp/yy/fly.py代码如下:import addfrom obs import * from pyspark import SparkContext from pyspark ... MRS集群pyspark使用obsclient报错缺少obs模块,报错如下图1:解决方案一:前期准备1. MRS2.1.0、Spark2.3.22. 样例代码在提交任务的节点(比如master1),代码路径为/tmp/yy/fly.py代码如下:import addfrom obs import * from pyspark import SparkContext from pyspark ...
- 前期做了Linux SFS文件备份到OBS测试,现补上Windows SFS文件备份到OBS测试过程。特总结如下:1、ECS创建本次测试选择win20122、SFS创建3、OBS创建4、将SFS共享文件存储挂载到ECS安装NFS客户端 安装完成后按提示重启ECS。 配置NFS协议选择控制面板-管理工具-NFS 协议改为TCP协议, 同时选使用硬装载 命令行执行挂载:mount -o nolo... 前期做了Linux SFS文件备份到OBS测试,现补上Windows SFS文件备份到OBS测试过程。特总结如下:1、ECS创建本次测试选择win20122、SFS创建3、OBS创建4、将SFS共享文件存储挂载到ECS安装NFS客户端 安装完成后按提示重启ECS。 配置NFS协议选择控制面板-管理工具-NFS 协议改为TCP协议, 同时选使用硬装载 命令行执行挂载:mount -o nolo...
- 近期有需求做sfs文件到OBS的冗余备份。特测试总结了一下。1、ECS创建2、SFS创建3、OBS创建4、将SFS共享文件存储挂载到ECSECS检查是否安装NFS软件包#rpm -qa|grep nfs安装NFS软件包#yum -y install nfs-utils#mkdir /sfsdata#mount -t nfs -o vers=3,timeo=600,noresvport,nol... 近期有需求做sfs文件到OBS的冗余备份。特测试总结了一下。1、ECS创建2、SFS创建3、OBS创建4、将SFS共享文件存储挂载到ECSECS检查是否安装NFS软件包#rpm -qa|grep nfs安装NFS软件包#yum -y install nfs-utils#mkdir /sfsdata#mount -t nfs -o vers=3,timeo=600,noresvport,nol...
- 数据准备数据准备是非常重要的一个环节数据准备在现实准备中,面临着各种问题(数据采集难,数据质量差,数据冗余性大,标签少,数据分析难,人工采集成本大等)数据准备不仅重要,且花费工作量非常大,往往在项目开发中,数据相关的工作量占据80%,算法模型准备占据20%ModelArts在数据管理方面提供了一系列智能化数据服务,大大降低开发成本,提高开发效率1,数据采集(数据采集是开发人工智能应用时面临的... 数据准备数据准备是非常重要的一个环节数据准备在现实准备中,面临着各种问题(数据采集难,数据质量差,数据冗余性大,标签少,数据分析难,人工采集成本大等)数据准备不仅重要,且花费工作量非常大,往往在项目开发中,数据相关的工作量占据80%,算法模型准备占据20%ModelArts在数据管理方面提供了一系列智能化数据服务,大大降低开发成本,提高开发效率1,数据采集(数据采集是开发人工智能应用时面临的...
- OBS权限控制方式应该如何选择 OBS权限控制方式应该如何选择
上滑加载中
推荐直播
-
昇腾AI算法挑战赛-核心算子如何优化?专家带你深度解析2025/11/17 周一 16:00-17:00
王老师 华为算子专家
昇腾AI算法挑战赛进阶赛战鼓催征!本期直播间,我们特邀华为算子专家王老师,为你深度剖析Matmul、wholereducesum等核心算子的底层原理与优化技巧,直击赛题核心。想提升代码效率、冲击更高排名?锁定直播,带你破局!
回顾中 -
AI编码实干派,“码”力全开2026/02/26 周四 15:00-16:30
谈宗玮/于邦旭/丁俊卿/陈云亮/王一男
【中国,深圳,2026年2月26日】,以“AI编码实干派,码力全开”为主题的华为云码道(CodeArts)代码智能体新春发布会在线上成功召开。华为云码道公测版正式发布,为开发者和企业提供具备工程化能力的智能编码解决方案。
回顾中 -
华为云码道-玩转OpenClaw,在线养虾2026/03/11 周三 19:00-21:00
刘昱,华为云高级工程师/谈心,华为云技术专家/李海仑,上海圭卓智能科技有限公司CEO
OpenClaw 火爆开发者圈,华为云码道最新推出 Skill ——开发者只需输入一句口令,即可部署一个功能完整的「小龙虾」智能体。直播带你玩转华为云码道,玩转OpenClaw
回顾中
热门标签