- 让Puppeteer接管已经启动的Chrome浏览器并控制它 让Puppeteer接管已经启动的Chrome浏览器并控制它
- ArtiPub简介ArtiPub (Article Publisher的简称，意为"文章发布者")是一款开源的一文多发平台，可以帮助文章作者将编写好的文章自动发布到掘金、SegmentFault、CSDN、知乎、开源中国等技术媒体平台，传播优质知识，获取最大的曝光度。ArtiPub安装简单，提供了多种安装方式，可以一键安装使用，安装一般只要5分钟。自9月20日上线第一版v0.1.2以来，Ar... ArtiPub简介ArtiPub (Article Publisher的简称，意为"文章发布者")是一款开源的一文多发平台，可以帮助文章作者将编写好的文章自动发布到掘金、SegmentFault、CSDN、知乎、开源中国等技术媒体平台，传播优质知识，获取最大的曝光度。ArtiPub安装简单，提供了多种安装方式，可以一键安装使用，安装一般只要5分钟。自9月20日上线第一版v0.1.2以来，Ar...
- 背景写技术文章是一件让人痛苦并快乐着的事情。持续输出技术知识能传播自己的优质知识给大量的开发者，互相交流各个领域的技术，让每个人都受益，写完很有成就感。但是写文章也很痛苦，因为会花大量的时间和脑力去构思文章，测试Demo代码，更麻烦的是还需要将文章复制粘贴分享到各个媒体平台，耗时费力。ArtiPub恰好解决了最后那个问题，也就是方便文章作者分享文章到各大技术媒体平台，更有效的传播共享优质知识... 背景写技术文章是一件让人痛苦并快乐着的事情。持续输出技术知识能传播自己的优质知识给大量的开发者，互相交流各个领域的技术，让每个人都受益，写完很有成就感。但是写文章也很痛苦，因为会花大量的时间和脑力去构思文章，测试Demo代码，更麻烦的是还需要将文章复制粘贴分享到各个媒体平台，耗时费力。ArtiPub恰好解决了最后那个问题，也就是方便文章作者分享文章到各大技术媒体平台，更有效的传播共享优质知识...
- 背景很多优秀的程序员和技术人员喜欢写技术文章和技术博客，通过这样的方式分享传播知识和经验，扩大自己的知名度和影响力，吸引粉丝关注，甚至有些技术博主还通过写文章来获取广告收入，很多优秀的博主还通过这种方法获得了出版书的机会以及工作机会。因此，写技术文章是一件非常值得投入的事情，帮助了自己，也让大众受益。但是，写技术文章通常也很耗时，特别是一些优质文章，不仅需要旁征博引、构思文章结构、照顾读者受... 背景很多优秀的程序员和技术人员喜欢写技术文章和技术博客，通过这样的方式分享传播知识和经验，扩大自己的知名度和影响力，吸引粉丝关注，甚至有些技术博主还通过写文章来获取广告收入，很多优秀的博主还通过这种方法获得了出版书的机会以及工作机会。因此，写技术文章是一件非常值得投入的事情，帮助了自己，也让大众受益。但是，写技术文章通常也很耗时，特别是一些优质文章，不仅需要旁征博引、构思文章结构、照顾读者受...
- 前言自动化测试对于软件开发来说是一个很重要也很方便的东西，但是自动化测试工具除了能用来做测试以外，还能被用来做一些模拟人类操作的事情，所以一些 E2E 自动化测试工具（例如：Selenium、Puppeteer、Appium）因为其强大的模拟功能，经常还被爬虫工程师们用来抓取数据。网上有很多将自动化测试工具作为爬虫的抓取教程，不过仅仅都限于如何获取数据，而我们知道这些基于浏览器的解决方案都有... 前言自动化测试对于软件开发来说是一个很重要也很方便的东西，但是自动化测试工具除了能用来做测试以外，还能被用来做一些模拟人类操作的事情，所以一些 E2E 自动化测试工具（例如：Selenium、Puppeteer、Appium）因为其强大的模拟功能，经常还被爬虫工程师们用来抓取数据。网上有很多将自动化测试工具作为爬虫的抓取教程，不过仅仅都限于如何获取数据，而我们知道这些基于浏览器的解决方案都有...
- puppeteer是Google主导的无头浏览器项目，本身华为云官网在内容检查，页面比对等多个地方都有使用到，另外针对网络原因导致puppeteer部署困难的问题，我们还自己制作了一个puppeteer的docker镜像。 puppeteer是Google主导的无头浏览器项目，本身华为云官网在内容检查，页面比对等多个地方都有使用到，另外针对网络原因导致puppeteer部署困难的问题，我们还自己制作了一个puppeteer的docker镜像。
- 记录一下使用puppeteer遇到反爬情况时的设置处理 启动设置 webdriver window.chrome userAgent plugins languages permissions WebGL # 启动设置 const browser = await puppeteer.launch({ headle 记录一下使用puppeteer遇到反爬情况时的设置处理 启动设置 webdriver window.chrome userAgent plugins languages permissions WebGL # 启动设置 const browser = await puppeteer.launch({ headle
- 记一下使用puppeteer抓取开源中国上的推荐软件数据 1.安装 npm install puppeteer 2.引入 const puppeteer = require('puppeteer'); 3.抓取代码 const sleep = time => new Promise(resolve => { setTimeo... 记一下使用puppeteer抓取开源中国上的推荐软件数据 1.安装 npm install puppeteer 2.引入 const puppeteer = require('puppeteer'); 3.抓取代码 const sleep = time => new Promise(resolve => { setTimeo...
- 让Puppeteer支持不重启按需更换代理ip 让Puppeteer支持不重启按需更换代理ip
- 安装和运行puppeteer的步骤：1. 避免从google自动下载chromiumexport PUPPETEER_SKIP_CHROMIUM_DOWNLOAD=12. 确定与puppeteer配套的chromium版本打开 https://github.com/GoogleChrome/puppeteer/blob/master/package.json"puppeteer": {"ch... 安装和运行puppeteer的步骤：1. 避免从google自动下载chromiumexport PUPPETEER_SKIP_CHROMIUM_DOWNLOAD=12. 确定与puppeteer配套的chromium版本打开 https://github.com/GoogleChrome/puppeteer/blob/master/package.json"puppeteer": {"ch...
- 学习Three.js的时候,看到官方提供了很多很多的example,实在太多了,但并不是每个我都感兴趣,想去了解,但我又记不住每个链接对对应的效果是什么样的,于是我想,能不能把所有的案例用图片保存下来,用图片来对异性每一个example不是更直接明了吗? 于是我准备写一个工具,这个工具可以批量将网页保存成图片或PDF并且生成对应的图片案... 学习Three.js的时候,看到官方提供了很多很多的example,实在太多了,但并不是每个我都感兴趣,想去了解,但我又记不住每个链接对对应的效果是什么样的,于是我想,能不能把所有的案例用图片保存下来,用图片来对异性每一个example不是更直接明了吗? 于是我准备写一个工具,这个工具可以批量将网页保存成图片或PDF并且生成对应的图片案...
- Python 自动化测试工具大家可能知道 Pyppeteer，其实它就是 Puppeteer 的 Python 版本的实现，二者功能类似。但其实 Puppeteer 和 Pyppeteer 不仅仅可以用来做爬虫，还能干很多其他的事情，今天就来介绍用 Puppeteer 搞的一个骚操作——自动发文。“ 阅读本文大概需要 6 分钟。 ”前言自动化测试对于软件开发来说是一个很重要也很方便的东西，但... Python 自动化测试工具大家可能知道 Pyppeteer，其实它就是 Puppeteer 的 Python 版本的实现，二者功能类似。但其实 Puppeteer 和 Pyppeteer 不仅仅可以用来做爬虫，还能干很多其他的事情，今天就来介绍用 Puppeteer 搞的一个骚操作——自动发文。“ 阅读本文大概需要 6 分钟。 ”前言自动化测试对于软件开发来说是一个很重要也很方便的东西，但...
推荐直播
-
让你的应用用上GaussDB2024/12/19 周四 16:30-18:00
Jerry 华为云生态技术讲师
GaussDB很受客户关注，伙伴们想知道什么时候该选用，开发者也跃跃欲试想尝鲜。课程会分享适用的场景，并一步步演示如何用上GaussDB。
即将直播 -
2024创原会年度技术峰会2024/12/20 周五 09:00-12:00
华为云讲师团
2024创原会年度技术峰会将于12月20日在海南万宁石梅湾威斯汀酒店举办，本次大会将以“智能・进化”为主题探讨从Cloud Native到AI Native的新阶段企业如何通过AI技术重塑企业应用，围绕AI如何在千行万业落地进行深入交流，探索可以先行先试先成功的创新场景和实现路径。
即将直播 -
华为云开发者日·2024年度创享峰会2024/12/23 周一 14:00-16:00
华为云讲师团
华为云开发者日HDC.Cloud Day是面向全球开发者的旗舰活动，汇聚来自千行百业、高校及科研院所的开发人员。致力于打造开发者专属的技术盛宴，全方位服务与赋能开发者围绕华为云生态“知、学、用、创、商”的成长路径。通过前沿的技术分享、场景化的动手体验、优秀的应用创新推介，为开发者提供沉浸式学习与交流平台。开放创新，与开发者共创、共享、共赢未来。
去报名
热门标签