- 背景这段时间在做 Playwright、浏览器自动化、企业控制台 相关的自动化,过程中踩了不少坑,记录一下问题和最终的处理方式,希望对遇到同类场景的同学有帮助。遇到的问题1. 登录态反复失效早期每次都用账号密码重新登录,撞上验证码就停摆。后来改成复用 storageState,登录成功一次后持久化 cookie 与 localStorage,后续任务直接加载。2. 多账号互相覆盖两个账号共用... 背景这段时间在做 Playwright、浏览器自动化、企业控制台 相关的自动化,过程中踩了不少坑,记录一下问题和最终的处理方式,希望对遇到同类场景的同学有帮助。遇到的问题1. 登录态反复失效早期每次都用账号密码重新登录,撞上验证码就停摆。后来改成复用 storageState,登录成功一次后持久化 cookie 与 localStorage,后续任务直接加载。2. 多账号互相覆盖两个账号共用...
- 自动化框架守护进程挂掉之后,退回 Chrome DevTools Protocol 协议层:用 Node 22 内置 WebSocket 直连 9333 端口,覆盖导航、取文本、截图、导出 Cookie,并记录无头模式秒退、沙箱拦回环、UA 覆盖触发 WAF、httpOnly Cookie 四个真实坑。 自动化框架守护进程挂掉之后,退回 Chrome DevTools Protocol 协议层:用 Node 22 内置 WebSocket 直连 9333 端口,覆盖导航、取文本、截图、导出 Cookie,并记录无头模式秒退、沙箱拦回环、UA 覆盖触发 WAF、httpOnly Cookie 四个真实坑。
- 用 Node.js 做了一个实时交易量排行榜 Dashboard12 个品种实时排序,每 3 秒刷新,带成本盈利磨损分析。纯原生前端,无框架依赖。为什么做这个做交易相关的东西时,最常见的需求就是"看排行"——谁交易量最大、谁涨了、谁亏了。市面上的终端要么太重,要么不直观,所以自己写了一个轻量版的 Web Dashboard,一个浏览器打开就能看。长什么样深色主题,类似专业交易终端:顶部统计栏... 用 Node.js 做了一个实时交易量排行榜 Dashboard12 个品种实时排序,每 3 秒刷新,带成本盈利磨损分析。纯原生前端,无框架依赖。为什么做这个做交易相关的东西时,最常见的需求就是"看排行"——谁交易量最大、谁涨了、谁亏了。市面上的终端要么太重,要么不直观,所以自己写了一个轻量版的 Web Dashboard,一个浏览器打开就能看。长什么样深色主题,类似专业交易终端:顶部统计栏...
- 分页是列表接口的基本能力。涵盖 offset 分页(page、size 参数)与 cursor 分页(游标、效率对比)的实现,分析深分页(大数据量 offset)性能问题与优化(延迟关联、游标),以及 Sequelize、TypeORM、Mongoose 中分页插件的使用,和分页接口的响应格式设计(总数、页码、数据)。 文章从技术背景和发展历程入手,帮助读者理解该技术的产生原因和演进脉络。通... 分页是列表接口的基本能力。涵盖 offset 分页(page、size 参数)与 cursor 分页(游标、效率对比)的实现,分析深分页(大数据量 offset)性能问题与优化(延迟关联、游标),以及 Sequelize、TypeORM、Mongoose 中分页插件的使用,和分页接口的响应格式设计(总数、页码、数据)。 文章从技术背景和发展历程入手,帮助读者理解该技术的产生原因和演进脉络。通...
- 分布式锁协调多实例并发。涵盖 Redis SET NX EX 命令的原子加锁,锁误删问题(唯一标识校验)与 Lua 脚本原子释放,分析锁超时与业务执行时间不符的续期(redlock 算法),以及 RedLock 库的使用与分布式锁的选型建议(Redis vs ZooKeeper)。 文章从技术背景和发展历程入手,帮助读者理解该技术的产生原因和演进脉络。通过对比不同版本的特性变化,分析技术选型... 分布式锁协调多实例并发。涵盖 Redis SET NX EX 命令的原子加锁,锁误删问题(唯一标识校验)与 Lua 脚本原子释放,分析锁超时与业务执行时间不符的续期(redlock 算法),以及 RedLock 库的使用与分布式锁的选型建议(Redis vs ZooKeeper)。 文章从技术背景和发展历程入手,帮助读者理解该技术的产生原因和演进脉络。通过对比不同版本的特性变化,分析技术选型...
- 全文搜索提升用户体验。涵盖 Elasticsearch 的索引创建(mapping 定义)、文档 CRUD 操作,分析 match、term、bool 查询的 DSL 语法,Node.js @elastic/elasticsearch 客户端的连接与查询封装,以及中文分词(ik 插件)、高亮显示、聚合统计的实现,和 MongoDB 数据同步到 ES 的方案。 文章从技术背景和发展历程入手,帮... 全文搜索提升用户体验。涵盖 Elasticsearch 的索引创建(mapping 定义)、文档 CRUD 操作,分析 match、term、bool 查询的 DSL 语法,Node.js @elastic/elasticsearch 客户端的连接与查询封装,以及中文分词(ik 插件)、高亮显示、聚合统计的实现,和 MongoDB 数据同步到 ES 的方案。 文章从技术背景和发展历程入手,帮...
- 内存管理是 Node.js 稳定运行的保障。涵盖 V8 的堆内存结构(新生代 Scavenge 与老生代 Mark-Sweep-Compact),process.memoryUsage 的 rss、heapTotal、heapUsed、external 指标含义,分析内存泄漏的常见场景(闭包缓存、全局数组、事件监听器未移除、定时器引用),以及 heapdump 与 chrome devtoo... 内存管理是 Node.js 稳定运行的保障。涵盖 V8 的堆内存结构(新生代 Scavenge 与老生代 Mark-Sweep-Compact),process.memoryUsage 的 rss、heapTotal、heapUsed、external 指标含义,分析内存泄漏的常见场景(闭包缓存、全局数组、事件监听器未移除、定时器引用),以及 heapdump 与 chrome devtoo...
- Stream 是 Node.js 处理大数据的核心抽象。涵盖 Readable、Writable、Duplex、Transform 四种流类型,pipe 方法的背压(backpressure)机制与自动流量控制,分析 fs.createReadStream 大文件分片读取、gzip 压缩链式管道的实现,以及对象模式流与自定义 Transform 流的编写。 文章从技术背景和发展历程入手,帮助... Stream 是 Node.js 处理大数据的核心抽象。涵盖 Readable、Writable、Duplex、Transform 四种流类型,pipe 方法的背压(backpressure)机制与自动流量控制,分析 fs.createReadStream 大文件分片读取、gzip 压缩链式管道的实现,以及对象模式流与自定义 Transform 流的编写。 文章从技术背景和发展历程入手,帮助...
- 工具打包发布是生态贡献的最后一步。涵盖 pkg、nexe 将 Node.js 应用打包为可执行文件,ncc 将依赖编译为单文件,分析 package.json exports 字段的多入口导出、typesVersions 类型版本管理,以及 npm publish 发布流程、版本号管理与 scoped 包的发布注意事项。 文章从技术背景和发展历程入手,帮助读者理解该技术的产生原因和演进脉络。... 工具打包发布是生态贡献的最后一步。涵盖 pkg、nexe 将 Node.js 应用打包为可执行文件,ncc 将依赖编译为单文件,分析 package.json exports 字段的多入口导出、typesVersions 类型版本管理,以及 npm publish 发布流程、版本号管理与 scoped 包的发布注意事项。 文章从技术背景和发展历程入手,帮助读者理解该技术的产生原因和演进脉络。...
- Redis 是 Node.js 应用最常用的缓存。涵盖 ioredis 客户端的连接配置(单机、集群、哨兵),string、hash、set、zset 数据类型的 Node.js 操作,分析缓存穿透(布隆过滤器)、击穿(互斥锁)、雪崩(过期时间分散)的应对方案,以及缓存与数据库一致性(延迟双删)的实现。 Redis 是 Node.js 应用最常用的缓存。涵盖 ioredis 客户端的连接配置(单机、集群、哨兵),string、hash、set、zset 数据类型的 Node.js 操作,分析缓存穿透(布隆过滤器)、击穿(互斥锁)、雪崩(过期时间分散)的应对方案,以及缓存与数据库一致性(延迟双删)的实现。
- 压缩减少网络传输与存储开销。涵盖 zlib 的 gzip、deflate 压缩算法,createGzip 流的压缩与解压管道实现,HTTP 响应的 Content-Encoding 压缩配置,分析压缩级别的选择(速度与压缩率权衡),以及 tar 打包(node-tar)与解压的实现。 压缩减少网络传输与存储开销。涵盖 zlib 的 gzip、deflate 压缩算法,createGzip 流的压缩与解压管道实现,HTTP 响应的 Content-Encoding 压缩配置,分析压缩级别的选择(速度与压缩率权衡),以及 tar 打包(node-tar)与解压的实现。
- 数据库连接管理直接影响服务性能。涵盖连接池的作用(复用连接、限制并发、防止数据库过载),mysql2、pg 等驱动连接池的配置(min、max、acquireTimeout),分析连接泄漏的排查(未释放、异常未回滚),以及 Knex、Prisma、TypeORM 等 ORM 的连接管理与事务封装实践。 数据库连接管理直接影响服务性能。涵盖连接池的作用(复用连接、限制并发、防止数据库过载),mysql2、pg 等驱动连接池的配置(min、max、acquireTimeout),分析连接泄漏的排查(未释放、异常未回滚),以及 Knex、Prisma、TypeORM 等 ORM 的连接管理与事务封装实践。
- 代理是网络架构中的重要组件。涵盖 HTTP 代理(http-proxy 中间件的路径重写、请求转发)的实现,反向代理与正向代理的区别,分析 WebSocket 代理的协议升级处理(upgrade 事件),演示基于 Node.js 实现接口聚合(BFF 层)、请求转发、负载均衡(多目标轮询)的完整代码。 代理是网络架构中的重要组件。涵盖 HTTP 代理(http-proxy 中间件的路径重写、请求转发)的实现,反向代理与正向代理的区别,分析 WebSocket 代理的协议升级处理(upgrade 事件),演示基于 Node.js 实现接口聚合(BFF 层)、请求转发、负载均衡(多目标轮询)的完整代码。
- 消息队列的幂等消费是分布式系统难题。涵盖生产者确认机制(事务消息、本地消息表),消费者幂等设计(消息 ID 去重表、业务唯一键、状态机校验),分析消息积压的监控(队列长度告警)与扩容处理,以及消息顺序性(分区有序)的实现方案。 消息队列的幂等消费是分布式系统难题。涵盖生产者确认机制(事务消息、本地消息表),消费者幂等设计(消息 ID 去重表、业务唯一键、状态机校验),分析消息积压的监控(队列长度告警)与扩容处理,以及消息顺序性(分区有序)的实现方案。
- 查询字符串是前后端数据交互的载体。涵盖 querystring 模块的 parse 与 stringify 方法,qs 库处理嵌套对象与数组的高级特性,分析 GET 请求参数的类型转换(string 转 number、boolean)与默认值处理,以及 Express 的 req.query 解析原理与自定义解析配置。 查询字符串是前后端数据交互的载体。涵盖 querystring 模块的 parse 与 stringify 方法,qs 库处理嵌套对象与数组的高级特性,分析 GET 请求参数的类型转换(string 转 number、boolean)与默认值处理,以及 Express 的 req.query 解析原理与自定义解析配置。
上滑加载中
推荐直播
-
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战,从0到1打通消息通道;码道鸿蒙端云一体化实战,快速搭建员工签到系统。
回顾中 -
华为云开发者AI素养直播课·第五期2026/09/04 周五 16:00-18:00
林华鼎-华为云AI开发者运营负责人;蒋春阳-华为云AI开发者案例开发专家
本期直播内容: AI工具体验营 · 第5-8课连讲。Agent-Team 多智能体协作完成毕业设计实践
回顾中 -
华为云开发者AI素养ClassRoom·第六期2026/09/08 周二 19:00-20:00
樊渊-2026华为软件挑战赛冠军
高手来了:看软挑高手解析二维排样问题—从工业难题到算法突破
回顾中
热门标签