-
用 OBS 的 Python SDK 传大文件(单文件 8~12 GB),走的是分片上传。现在遇到的问题是:传了 40 多分钟断网,重新跑又从头开始,白白浪费时间。 想做到「断点续传」,需要先知道上次已经成功上传了哪些分片。查文档看到有「列举已上传段」的接口,但有几个细节没搞清楚: 1. 列举已上传段需要 uploadId,这个 uploadId 在进程崩溃后怎么持久化?是不是发起分片上传时就要把 uploadId 存到本地数据库里?2. 分片上传有没有有效期?如果隔一天再续传,uploadId 会不会已经失效?失效了之前传的分片是不是全部作废?3. 每个分片的 ETag 需要自己保存吗?还是续传时重新列举一次就能拿到?4. 分片大小设多少比较合适?现在用的 5 MB,12 GB 的文件要传两千多个分片,会不会反而更慢? 项目里用的是 obs-python-sdk,如果有现成的续传实现思路,麻烦指点一下。
-
用 OBS 的 Python SDK 传大文件(单文件 8~12 GB),走的是分片上传。现在遇到的问题是:传了 40 多分钟断网,重新跑又从头开始,白白浪费时间。 想做到「断点续传」,需要先知道上次已经成功上传了哪些分片。查文档看到有「列举已上传段」的接口,但有几个细节没搞清楚: 1. 列举已上传段需要 uploadId,这个 uploadId 在进程崩溃后怎么持久化?是不是发起分片上传时就要把 uploadId 存到本地数据库里?2. 分片上传有没有有效期?如果隔一天再续传,uploadId 会不会已经失效?失效了之前传的分片是不是全部作废?3. 每个分片的 ETag 需要自己保存吗?还是续传时重新列举一次就能拿到?4. 分片大小设多少比较合适?现在用的 5 MB,12 GB 的文件要传两千多个分片,会不会反而更慢? 项目里用的是 obs-python-sdk,如果有现成的续传实现思路,麻烦指点一下。
-
我们在华为云CCE集群中运行了一组微服务,近期发现部分Pod偶发访问其他服务失败,报错类似“Temporary failure in name resolution”或连接超时。通过Service IP访问基本正常,但使用服务名(如 order-api.default.svc.cluster.local)访问时会间歇性失败,重试后通常恢复。集群节点近期有扩容,业务高峰时现象更明显。CoreDNS Pod 显示为 Running,但不确定是否存在资源不足、上游 DNS 异常或节点网络问题。请问应如何分层定位?有哪些关键指标、命令和配置参数需要检查?
-
我们在华为云CCE集群中部署了多个微服务,最近应用偶发访问其他服务失败,日志里出现 lookup xxx.default.svc.cluster.local on 10.247.3.10:53: read udp ... i/o timeout。失败持续几秒后又自行恢复,重试可以成功。集群节点和业务Pod的CPU、内存看起来没有明显异常,CoreDNS也处于Running状态。请问如何判断是CoreDNS负载、节点网络还是上游DNS的问题?希望提供一套可以在线上逐步执行的排查方法,以及适合的CoreDNS副本数和缓存配置建议。
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
背景:我们在业务里用 OBS 分段上传大文件,最近发现存储用量比预期高不少,排查后发现是上传中断(客户端超时、网络抖动、用户主动取消)之后留下的未完成分段。 疑惑有三个:一是这些未完成分段会不会一直占存储、一直计费?平台有没有自动过期的机制?二是除了手动调 AbortMultipartUpload,能不能用生命周期规则自动清理未完成的分段上传?规则生效周期一般设多久比较合适?三是如果业务侧没法保证每次都成功调 abort,有没有更稳妥的工程做法,比如后端定时扫一遍? 目前的处理是写了个定时任务,每天扫一次未完成上传然后逐个 abort。但总觉得这种方式不够优雅,而且扫全量桶本身也有成本。想听听有没有平台侧的更优解,或者其他团队是怎么做这件事的。
-
线上 Redis 偶发卡顿,监控显示一次 HGETALL 拉出几万字段。SRE 怀疑有 big key。场景:运营活动配置存在 50MB 大 Hash,后台任务遍历导致主线程阻塞。
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
各位社区小伙伴好,最近在学习华为云相关产品,有一些基础疑问想请教一下,希望能得到大家的指点。如果有相关的实践经验和文档链接,也欢迎分享,先行谢过!
-
桶里存了一些内部资料,需要临时分享给合作方下载,但桶是私有的,不想改成公共读:听说有预签名 URL,有效期和权限能控制到什么粒度?直接把 AK/SK 给对方生成链接显然不行,正确流程是什么?链接泄露了怎么止损?求做过类似场景的同学指点,谢谢!
yd_249230560
发表于2026-10-26 01:19:29
2026-10-26 01:19:29
最后回复
yd_230743559
2026-10-27 12:24:24
117 22 -
桶里存了一些内部资料,需要临时分享给合作方下载,但桶是私有的,不想改成公共读:听说有预签名 URL,有效期和权限能控制到什么粒度?直接把 AK/SK 给对方生成链接显然不行,正确流程是什么?链接泄露了怎么止损?求做过类似场景的同学指点,谢谢!
上滑加载中
推荐直播
-
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战,从0到1打通消息通道;码道鸿蒙端云一体化实战,快速搭建员工签到系统。
回顾中 -
华为云开发者AI素养直播课·第五期2026/09/04 周五 16:00-18:00
林华鼎-华为云AI开发者运营负责人;蒋春阳-华为云AI开发者案例开发专家
本期直播内容: AI工具体验营 · 第5-8课连讲。Agent-Team 多智能体协作完成毕业设计实践
回顾中 -
华为云开发者AI素养ClassRoom·第六期2026/09/08 周二 19:00-20:00
樊渊-2026华为软件挑战赛冠军
高手来了:看软挑高手解析二维排样问题—从工业难题到算法突破
回顾中
热门标签