-
背景:Java 后端服务往 OBS 上传用户上传的文件,用的是华为云 OBS Java SDK(3.23.x),永久 AK/SK,走公网 endpoint。业务逻辑是:文件小于 5MB 走普通 PUT,大于 5MB 走分片上传(uploadPart)。服务器时间已经用 NTP 同步过,跟标准时间差在 1 秒内。 现象:1. 小文件(普通 PUT)跑了两个月,一次都没失败过。2. 大文件的分片上传,大概每几百次里会有一次 uploadPart 返回 403 SignatureDoesNotMatch。3. 失败的分片重试一次通常就成功了,偶尔要重试两次。4. 失败时间点没有规律,跟文件大小、并发量都没有明显相关性。5. 错误响应体里带了 `<StringToSign>`,但内容跟我预期的对不上,看不太懂差在哪。 已经排查过的:1. 确认 AK/SK 没有多余的空格,是从配置中心读的,打印出来比对过长度。2. 确认服务器时间正确,也试过把时钟偏差控制在 300ms 内,还是会偶发。3. 确认桶的权限策略允许当前账号 PutObject,小文件能传说明权限没问题。4. 试过把 SDK 的重试次数从默认 3 次调大,失败率下降了,但还是会报错(只是被重试吞掉了)。 具体想问:1. 为什么只有分片上传会出这个问题,普通 PUT 不会?分片上传在签名计算上跟普通 PUT 有什么本质区别?2. `<StringToSign>` 里到底包含哪些要素?我看文档说有 HTTP-Verb、Content-MD5、Content-Type、Date、CanonicalizedHeaders、CanonicalizedResource。分片上传的 CanonicalizedResource 是不是要把 uploadId、partNumber 这些 query 参数也拼进去?拼接的规则是什么(排序、URL 编码)?3. 偶发而不是必现,这种特征一般指向什么原因?我能想到的是并发下某些请求头被中间件改写,或者是连接复用导致的 header 串了。有没有可能是 SDK 在多线程共享 client 实例时的线程安全问题?4. 如果请求经过了 Nginx 或者 API 网关,它们改了 Content-Type 或者加了 header,会不会导致签名对不上?怎么确认是客户端算错了还是服务端收到的跟客户端发的不一致?5. 除了 AK/SK 永久密钥,用临时 AK/SK(STS)是不是能规避这类问题?临时凭证在签名上有什么额外要注意的点(比如 security-token 要放进 header)?6. 有没有比较标准的排查手法,比如把实际发出的原始请求 dump 出来自己算一遍签名做比对?
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
背景:一个图片业务,桶里存了大量用户上传的图片,总量大概 8TB。为了省钱,配了一条生命周期规则:对象创建 30 天后转为低频访问存储,90 天后转为归档,365 天后删除。规则是 9 月底配的,现在 10 月底了,最早那批对象已经超过 30 天,但看存储类别还是标准存储。 现象:1. 控制台「对象存储」页面按前缀查,10 月之前上传的对象,存储类别列显示的还是「标准存储」。2. 桶的用量统计里,标准存储的量没有下降,低频访问的量一直是 0。3. 生命周期规则在控制台上状态是「已启用」,规则详情里的前缀、天数看着都对。4. 没有任何报错或者失败记录(至少我在控制台上没找到)。 自己排查过的:1. 确认对象确实超过 30 天了,用 obsutil ls 看了 LastModified,最早的是 2026-09-20。2. 确认规则的前缀匹配是对的,我配的是 images/ 前缀,对象 key 都是 images/2026/09/xxx.jpg。3. 怀疑规则没生效,重新编辑保存了一次,等了两天还是没变化。 具体想问:1. 生命周期规则的「30 天」是从对象 LastModified 算的,还是从规则创建时间算的?如果是前者,那 9 月 20 日的对象到 10 月 20 日就该转了,为什么现在还没转?2. 规则的执行是不是有延迟?如果最长要等多久?有没有办法看到「这条规则上次执行是什么时候、处理了多少对象」这样的执行记录?3. 有没有可能是规则配置里的某个细节我漏了?比如「转低频」这个动作对对象大小有没有限制(我记得标准存储转低频好像有最小计费单位的要求),或者对小对象是不是不处理?4. 如果规则确实已经生效但只是慢,有没有办法手工触发一次,或者用批量任务先把存量对象转过去,让规则只管新增的对象?
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
QoS 流控管理是 OBS 面向多桶共资源场景推出的限流保护能力,支持为单个桶设定 QPS、带宽、并发请求数上限,并按总请求/公网/内网分别配置策略,约束非核心桶的资源占用,降低对关键业务的干扰。在云上,核心交易业务与日志备份、离线分析任务运行在同一账号下,带宽和请求数缺乏约束机制,非核心桶的流量洪峰可能导致关键业务响应时延上升,严重时触发丢包;突发异常流量还可能推高带宽成本。OBS 推出的 QoS 流控管理,正是为约束这类干扰源而设计。功能定位:约束单个桶的资源占用,降低业务间干扰QoS 流控管理是一套限流保护机制,核心价值在于按业务与流量特征为桶设置资源占用上限,无需修改业务代码即可约束非核心桶的流量,降低其对关键业务的干扰。流控设置上限:被限制的桶释放出的资源回到公共池,并非锁定给某个核心业务桶。它保证的是“非核心桶不会占用过多资源”,核心业务的保障则依赖于集群整体资源水位与自身配置。典型适用场景包括:约束非核心业务的资源占用:为日志备份、离线计算等桶设置明确的 QPS、带宽、并发上限,防止其流量洪峰挤占关键业务可用的资源。公网与内网流量分别管控:桶级规则支持按总请求、公网请求、内网请求分别配置策略,内网大数据传输与公网访问可以各自独立设限。异常流量防护:当某个桶遭遇异常高频请求时,流控可限制其 QPS 和并发数,降低对同账号下其他业务的影响面。带宽成本约束:通过带宽上限约束大流量任务,使成本可预期。需要明确的是,流控触发后的行为因指标而异:QPS 或带宽超限时,请求不会立即失败,而是被延迟处理,响应头 x-obs-qos-delay-time 携带被流控的时长(上传类请求返回精确值,下载类返回估算值);并发请求数超限时,请求立即失败并返回 429。因此,流控是保护性手段,而非精确的流量整形工具,阈值设定需结合业务实际请求模型。配置流程:两步完成第一步:确认账号级 QoS 的资源上限配置桶级规则前,需先了解账号在集群层面的可用资源。在 OBS 控制台左侧导航栏选择 “用量分析 > 流控管理”,页面列出账号下所有桶的流控配置;单击桶所在的集群名称,右侧弹框显示账号在该集群的 QPS、带宽、并发请求数上限。账号级 QoS 规则仅支持查看、不支持自定义,如需扩容请提交工单申请。如果桶未配置桶级规则,则该桶最大可使用到账号下集群资源的最大值——因此,对需要约束的非核心桶应显式配置上限,而非依赖默认行为。第二步:为单个桶配置桶级规则在“流控管理”页面找到目标桶,单击操作列的 “编辑”,在弹窗中完成:选择请求类型:勾选需要限流的请求范围——总请求(公网+内网)、公网请求、内网请求,三者可分别配置独立策略。配置指标:可分别设置QPS、 BPS、并发请求数。每个指标最大可配置到桶所属集群对应指标的最大值。配置完成后可在流控管理列表中查看各桶的指标配置情况。桶级流控目前支持通过管理控制台和 API 配置。设计逻辑与运维要点1. 两级规则:账号级是天花板,桶级是约束器桶级规则的自定义值不能超过桶所在集群的账号级 QoS 限制。配置前的第一步永远是确认账号级配额,而非直接为桶设值。2. 指标联动:QPS/带宽流控会推高并发数QPS 或带宽超限导致请求时延上升,正在处理的请求滞留时间变长,并发请求数随之增加,可能进一步触发并发流控。调优时不宜孤立地看待单一指标。3. 监控告警:用 CES 把水位管起来配置规则后需持续观测。通过云监控 CES 可查看桶级和账号级指标:进入“云服务监控 > 对象存储服务 OBS”,资源维度选择“桶名称”或“用户”,查看运行值。告警阈值建议:使用率 ≥80% 设为重要告警,评估业务影响并考虑下调非核心桶的资源配置;使用率 ≥90% 设为紧急告警,已接近拥塞,需立即调整资源配置或提工单申请扩容。实践建议:优先为日志备份、离线计算等非核心桶显式配置上限;公网与内网按实际访问模式分开设限;为桶级 QoS 配置 80%/90% 两级告警;保留客户端日志中的 x-obs-qos-delay-time,据此反向校准阈值。结语OBS QoS 流控管理通过约束非核心桶的资源占用,降低其对关键业务的干扰,为多业务共用 OBS 的场景提供了一种高效的稳定性治理手段,尤其适合核心与非核心业务混跑、对时延敏感、需要防范异常流量冲击的架构。 相关链接:[1] QoS 流控管理概述:cid:link_0[2] 查看账号级 QoS:cid:link_1[3] 桶级 QoS 管理:cid:link_2
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
上滑加载中
推荐直播
-
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战,从0到1打通消息通道;码道鸿蒙端云一体化实战,快速搭建员工签到系统。
回顾中 -
华为云开发者AI素养直播课·第五期2026/09/04 周五 16:00-18:00
林华鼎-华为云AI开发者运营负责人;蒋春阳-华为云AI开发者案例开发专家
本期直播内容: AI工具体验营 · 第5-8课连讲。Agent-Team 多智能体协作完成毕业设计实践
回顾中 -
华为云开发者AI素养ClassRoom·第六期2026/09/08 周二 19:00-20:00
樊渊-2026华为软件挑战赛冠军
高手来了:看软挑高手解析二维排样问题—从工业难题到算法突破
回顾中
热门标签