- 0、体验活动产品简介：ModelArts 是面向开发者的一站式 AI 平台，为机器学习与深度学习提供海量数据预处理及交互式智能标注、大规模分布式训练、自动化模型生成，及端-边-云模型按需部署能力，帮助用户快速创建和部署模型，管理全周期 AI 工作流。活动链接：https://bbs.huaweicloud.com/forum/thread-182338-1-1.html 1、数据准备参考资... 0、体验活动产品简介：ModelArts 是面向开发者的一站式 AI 平台，为机器学习与深度学习提供海量数据预处理及交互式智能标注、大规模分布式训练、自动化模型生成，及端-边-云模型按需部署能力，帮助用户快速创建和部署模型，管理全周期 AI 工作流。活动链接：https://bbs.huaweicloud.com/forum/thread-182338-1-1.html 1、数据准备参考资...
- 在之前的文章我使用小熊派 STM32 开发板移植了 LiteOS 和 PahoMQTT 连接华为云上云，实现了数据的上传和命令的下放，在实际场景中，一个云平台可能会有若干的设备连接和海量的数据上报，华为云也提供了数据的转发保存以及数据分析功能，本篇文章即分享相关功能的使用 在之前的文章我使用小熊派 STM32 开发板移植了 LiteOS 和 PahoMQTT 连接华为云上云，实现了数据的上传和命令的下放，在实际场景中，一个云平台可能会有若干的设备连接和海量的数据上报，华为云也提供了数据的转发保存以及数据分析功能，本篇文章即分享相关功能的使用
- 本实践是一个前后端分离的项目，通过集成华为云OBS Java SDK 和华为云RDS数据库，实现用户中心个人图片上传、更新功能。获取源代码：gitee上获取（https://gitee.com/HuaweiCloudDeveloper/dtse-practice） 本实践是一个前后端分离的项目，通过集成华为云OBS Java SDK 和华为云RDS数据库，实现用户中心个人图片上传、更新功能。获取源代码：gitee上获取（https://gitee.com/HuaweiCloudDeveloper/dtse-practice）
- 目录项目背景问题 解决综上所述项目背景公司自研了私有化的对象存储服务，目前需要对上传接口进行功能测试。问题 使用第三方测试工具 ApiPost 测试上传接口时，发现 dzuuid 参数始终无法正确解析出来，于是开始了排查工作。ApiPost 测试界面如下图所示：除了单文件上传模式，上传接口还支持分片上传模式，上图中的 dzuuid 参数就是用来表示分片属于哪个文件的，在服务器端对应参数 ... 目录项目背景问题 解决综上所述项目背景公司自研了私有化的对象存储服务，目前需要对上传接口进行功能测试。问题 使用第三方测试工具 ApiPost 测试上传接口时，发现 dzuuid 参数始终无法正确解析出来，于是开始了排查工作。ApiPost 测试界面如下图所示：除了单文件上传模式，上传接口还支持分片上传模式，上图中的 dzuuid 参数就是用来表示分片属于哪个文件的，在服务器端对应参数 ...
- 对于其他厂商的云存储服务也可参考 对于其他厂商的云存储服务也可参考
- 一、背景对象存储我相信并不是什么新鲜的概念，最早的时候我们采用自建NFS的方式来实现文件共享，随着云计算的发展，逐渐就衍生除了对象存储服务，华为云有OBS，阿里云有OSS，腾讯云有COS，各大云计算服务商都纷纷退出了各自的云产品。从2017年就开始使用各大平台的对象存储产品，但是最后因为各种原因，都逐步转到了华为云的OBS产品上，个人在使用过程中也觉得OBS有它自己的特色之处，虽然华为云产品... 一、背景对象存储我相信并不是什么新鲜的概念，最早的时候我们采用自建NFS的方式来实现文件共享，随着云计算的发展，逐渐就衍生除了对象存储服务，华为云有OBS，阿里云有OSS，腾讯云有COS，各大云计算服务商都纷纷退出了各自的云产品。从2017年就开始使用各大平台的对象存储产品，但是最后因为各种原因，都逐步转到了华为云的OBS产品上，个人在使用过程中也觉得OBS有它自己的特色之处，虽然华为云产品...
- 通过体验沙箱实验室的基于Spark实现车主驾驶行为分析实验后，我们可以从中学习MRS服务的创建过程，学习把文件数据上传到OBS，通过MRS里面创建作业类型为SparkSubmit，实现车主急加速、急刹车、空挡滑行、超速、疲劳驾驶等违法行为的次数的统计分析。 通过体验沙箱实验室的基于Spark实现车主驾驶行为分析实验后，我们可以从中学习MRS服务的创建过程，学习把文件数据上传到OBS，通过MRS里面创建作业类型为SparkSubmit，实现车主急加速、急刹车、空挡滑行、超速、疲劳驾驶等违法行为的次数的统计分析。
- - 线程安全的 `map[string]interface{}` - 无需网络传输 - 可以存储任何对象 - 不仅可以设置过期时间,也可以设置为永不过期 - 线程安全的 `map[string]interface{}` - 无需网络传输 - 可以存储任何对象 - 不仅可以设置过期时间,也可以设置为永不过期
- 开源社区，例如Github或者码云，有很多优质notebook内容供大家做AI学习和探索，可是这些内容很多直接运行到ModelArt平台上都会报错，一般gap在哪？都需要哪些适配步骤？ 开源社区，例如Github或者码云，有很多优质notebook内容供大家做AI学习和探索，可是这些内容很多直接运行到ModelArt平台上都会报错，一般gap在哪？都需要哪些适配步骤？
- 附链接：模型营第一课回放地址:https://www.bilibili.com/video/BV18v411H7fK/作业帖：https://bbs.huaweicloud.com/forum/thread-135955-1-1.html时间作业要求：使用华为云Ascend910在MNIST上面训练LeNet网络，上传loss截图和推理精度截图完成步骤如下：1.创建OBS登录华为云控制台搜索... 附链接：模型营第一课回放地址:https://www.bilibili.com/video/BV18v411H7fK/作业帖：https://bbs.huaweicloud.com/forum/thread-135955-1-1.html时间作业要求：使用华为云Ascend910在MNIST上面训练LeNet网络，上传loss截图和推理精度截图完成步骤如下：1.创建OBS登录华为云控制台搜索...
- 准备工作在使用 ModelArts进行开发前，需先完成如下准备工作。如果已完成，跳过此步骤。[注册华为云帐号]。完成[实名认证]。登录ModelArts管理控制台，左上角选择使用区域（例如，华北-北京四），[使用委托完成访问授权]。在左上角服务列表中，选择对象存储服务，进入OBS管理控制台。[创建1个OBS桶]。创建桶时，“区域”选择需与上一步骤相同，“数据冗余存储策略”选择“单AZ存储”... 准备工作在使用 ModelArts进行开发前，需先完成如下准备工作。如果已完成，跳过此步骤。[注册华为云帐号]。完成[实名认证]。登录ModelArts管理控制台，左上角选择使用区域（例如，华北-北京四），[使用委托完成访问授权]。在左上角服务列表中，选择对象存储服务，进入OBS管理控制台。[创建1个OBS桶]。创建桶时，“区域”选择需与上一步骤相同，“数据冗余存储策略”选择“单AZ存储”...
- 本篇文章带你走进不写一行代码，通过ModelArts快速完成图像分类。 本篇文章带你走进不写一行代码，通过ModelArts快速完成图像分类。
- 问题场景客户作业场景如下图所示，从DMS kafka通过DLI Flink将业务数据实时清洗存储到DWS。其中，DMS Kafka 目标Topic 6个分区，DLI Flink作业配置taskmanager数量为12，并发数为1。问题现象客户在DLI服务共有三个相同规格的队列，该作业在其中003号队列上运行正常，在001和002号队列上都存在严重的反压导致数据处理缓慢。作业列表显示如下图，可... 问题场景客户作业场景如下图所示，从DMS kafka通过DLI Flink将业务数据实时清洗存储到DWS。其中，DMS Kafka 目标Topic 6个分区，DLI Flink作业配置taskmanager数量为12，并发数为1。问题现象客户在DLI服务共有三个相同规格的队列，该作业在其中003号队列上运行正常，在001和002号队列上都存在严重的反压导致数据处理缓慢。作业列表显示如下图，可...
- DAOS (Distributed Asynchronous Object Storage) 是一个开源的对象存储系统，专为大规模分布式非易失性内存设计，利用了 SCM 和 NVMe 等的下一代 NVM 技术。 DAOS 同时在硬件之上提供了键值存储接口，提供了诸如事务性非阻塞 I/O、具有自我修复的高级数据保护、端到端数据完整性、细粒度数据控制和弹性存储的高级数据保护，从而优化性能并降低成本。 DAOS (Distributed Asynchronous Object Storage) 是一个开源的对象存储系统，专为大规模分布式非易失性内存设计，利用了 SCM 和 NVMe 等的下一代 NVM 技术。 DAOS 同时在硬件之上提供了键值存储接口，提供了诸如事务性非阻塞 I/O、具有自我修复的高级数据保护、端到端数据完整性、细粒度数据控制和弹性存储的高级数据保护，从而优化性能并降低成本。
- OBS导入数据，指将样例数据通过OBS导入到DWS集群。数据导入流程:1、准备数据文件,CSV格式的数据文件。2、创建OBS存储桶，并将数据文件上传至桶。3、创建外表，用于引流OBS存储桶中的数据到GaussDB(DWS)集群。4、启动GaussDB(DWS)并创建数据库表后，将OBS上的数据导入到表中。 OBS导入数据，指将样例数据通过OBS导入到DWS集群。数据导入流程:1、准备数据文件,CSV格式的数据文件。2、创建OBS存储桶，并将数据文件上传至桶。3、创建外表，用于引流OBS存储桶中的数据到GaussDB(DWS)集群。4、启动GaussDB(DWS)并创建数据库表后，将OBS上的数据导入到表中。
上滑加载中
推荐直播
-
2024创原会年度技术峰会2024/12/20 周五 09:00-12:00
华为云讲师团
2024创原会年度技术峰会将于12月20日在海南万宁石梅湾威斯汀酒店举办，本次大会将以“智能・进化”为主题探讨从Cloud Native到AI Native的新阶段企业如何通过AI技术重塑企业应用，围绕AI如何在千行万业落地进行深入交流，探索可以先行先试先成功的创新场景和实现路径。
回顾中 -
华为云开发者日·2024年度创享峰会2024/12/23 周一 14:00-16:00
华为云讲师团
华为云开发者日HDC.Cloud Day是面向全球开发者的旗舰活动，汇聚来自千行百业、高校及科研院所的开发人员。致力于打造开发者专属的技术盛宴，全方位服务与赋能开发者围绕华为云生态“知、学、用、创、商”的成长路径。通过前沿的技术分享、场景化的动手体验、优秀的应用创新推介，为开发者提供沉浸式学习与交流平台。开放创新，与开发者共创、共享、共赢未来。
去报名 -
GaussDB管理平台TPOPS，DBA高效运维的一站式解决方案2024/12/24 周二 16:30-18:00
Leo 华为云数据库DTSE技术布道师
数据库的复杂运维，是否让你感到头疼不已？今天，华为云GaussDB管理平台将彻底来改观！本期直播，我们将深入探索GaussDB管理平台的TPOPS功能，带你感受一键式部署安装的便捷，和智能化运维管理的高效，让复杂的运维、管理变得简单，让简单变得可靠。
去报名
热门标签