- 小三：怎么了小二？一副愁眉苦脸的样子。小二：唉！这不是快过年了吗，家里又催相亲了 …小三：现在不是流行网恋吗，你可以试试相亲软件呀。小二：这玩意靠谱吗？小三：我也没用过，你自己看看软件评论区吧。小二：这 … 不过也只能先到评论区看看了。本文以 360 手机助手为例，地址为：http://zhushou.360.cn/，相亲软件选择 3 个比较流行的，分别为：世纪佳缘、百合婚恋、有缘网，我们使... 小三：怎么了小二？一副愁眉苦脸的样子。小二：唉！这不是快过年了吗，家里又催相亲了 …小三：现在不是流行网恋吗，你可以试试相亲软件呀。小二：这玩意靠谱吗？小三：我也没用过，你自己看看软件评论区吧。小二：这 … 不过也只能先到评论区看看了。本文以 360 手机助手为例，地址为：http://zhushou.360.cn/，相亲软件选择 3 个比较流行的，分别为：世纪佳缘、百合婚恋、有缘网，我们使...
- 爬取游民星空的福利 爬取游民星空的福利
- urllib库是Python3内置的HTTP请求库，不需要单独安装，默认下载的Python就已经包含了该库。urllib库有4个模块：request、parse、robotparser和error。 urllib库是Python3内置的HTTP请求库，不需要单独安装，默认下载的Python就已经包含了该库。urllib库有4个模块：request、parse、robotparser和error。
- Python 爬虫从入门到入坑全系列教程（详细教程 + 各种实战） Python 爬虫从入门到入坑全系列教程（详细教程 + 各种实战）
- BeautifulSoup 是一个可以从 HTML 或 XML 文件中提取数据的 Python 库，它能够将 HTML 或 XML 转化为可定位的树形结构，并提供了导航、查找、修改功能，它会自动将输入文档转换为 Unicode 编码，输出文档转换为 UTF-8 编码。BeautifulSoup 支持 Python 标准库中的 HTML 解析器和一些第三方的解析器，默认使用 Python 标准... BeautifulSoup 是一个可以从 HTML 或 XML 文件中提取数据的 Python 库，它能够将 HTML 或 XML 转化为可定位的树形结构，并提供了导航、查找、修改功能，它会自动将输入文档转换为 Unicode 编码，输出文档转换为 UTF-8 编码。BeautifulSoup 支持 Python 标准库中的 HTML 解析器和一些第三方的解析器，默认使用 Python 标准...
- Selenium 是一个用于测试 Web 应用程序的框架，该框架测试直接在浏览器中运行，就像真实用户操作一样。 Selenium 是一个用于测试 Web 应用程序的框架，该框架测试直接在浏览器中运行，就像真实用户操作一样。
- 在不久之前，有几位朋友问我，大规模抓取是如何实现的？说实话，其实我也并确定自己一定是正确且完整的，不过我数量级并不难以实现。下面说说我是从哪几个方面进行聚焦爬虫相关优化的，同时如果你有更好的方法欢迎您与我探讨 在不久之前，有几位朋友问我，大规模抓取是如何实现的？说实话，其实我也并确定自己一定是正确且完整的，不过我数量级并不难以实现。下面说说我是从哪几个方面进行聚焦爬虫相关优化的，同时如果你有更好的方法欢迎您与我探讨
- 协程 & asyncio & 异步编程a 1.协程 1.1 greenlet实现协程 1.2 yield关键字 1.3 asyncio 1.4 async & await关键字 2.协程意义 3.异步编程 3.1 事件循环 3.2 快速上手 3.3 await 3.4 Task对象 3.5 asyncio.Future对象 3.5 concurrent.futures.Future对象 3... 协程 & asyncio & 异步编程a 1.协程 1.1 greenlet实现协程 1.2 yield关键字 1.3 asyncio 1.4 async & await关键字 2.协程意义 3.异步编程 3.1 事件循环 3.2 快速上手 3.3 await 3.4 Task对象 3.5 asyncio.Future对象 3.5 concurrent.futures.Future对象 3...
- Selenium 是一个强大的自动化测试工具，支持 Python 调用浏览器进行网页抓取。本文介绍了 Selenium 的安装、基本使用、元素定位、高级操作等内容。主要内容包括：发送请求、加载网页、元素定位、处理 Cookie、无头浏览器设置、页面等待、窗口和 iframe 切换等。通过示例代码帮助读者快速掌握 Selenium 的核心功能。 Selenium 是一个强大的自动化测试工具，支持 Python 调用浏览器进行网页抓取。本文介绍了 Selenium 的安装、基本使用、元素定位、高级操作等内容。主要内容包括：发送请求、加载网页、元素定位、处理 Cookie、无头浏览器设置、页面等待、窗口和 iframe 切换等。通过示例代码帮助读者快速掌握 Selenium 的核心功能。
- ''''''# 正则抓取上面的源代码中的m3u8的url# 写入文件 分析当前的页面源代码# 写入response.content bytes二进制类型# 请求可以获取index.m3u8文件# 写入response.content bytes二进制类型# 拆分返回的内容获取真整的index.m3u8文件的url。 ''''''# 正则抓取上面的源代码中的m3u8的url# 写入文件 分析当前的页面源代码# 写入response.content bytes二进制类型# 请求可以获取index.m3u8文件# 写入response.content bytes二进制类型# 拆分返回的内容获取真整的index.m3u8文件的url。
- XPath 是一门在 XML 文档中查找信息的语言。查找所有id属性等于head并且class属性等于s_down的div标签。html_tree = etree.HTML(html字符串)通过在路径表达式中使用“|”运算符，您可以选取若干个路径。谓语用来查找某个特定的节点或者包含某个指定的值的节点。选取文档中的所有 title 和 price 元素。查询所有id属性中包以he开头的div标签。查 XPath 是一门在 XML 文档中查找信息的语言。查找所有id属性等于head并且class属性等于s_down的div标签。html_tree = etree.HTML(html字符串)通过在路径表达式中使用“|”运算符，您可以选取若干个路径。谓语用来查找某个特定的节点或者包含某个指定的值的节点。选取文档中的所有 title 和 price 元素。查询所有id属性中包以he开头的div标签。查
- 简单来说，Beautiful Soup是python的一个库，最主要的功能是从网页抓取数据。官方解释如下：Beautiful Soup提供一些简单的、python式的函数用来处理导航、搜索、修改分析树等功能。它是一个工具箱，通过解析文档为用户提供需要抓取的数据，，所以不需要多少代码就可以写出一个完整的应用程序。 简单来说，Beautiful Soup是python的一个库，最主要的功能是从网页抓取数据。官方解释如下：Beautiful Soup提供一些简单的、python式的函数用来处理导航、搜索、修改分析树等功能。它是一个工具箱，通过解析文档为用户提供需要抓取的数据，，所以不需要多少代码就可以写出一个完整的应用程序。
- 学习建议本文仅用于学习使用，不做他用；本文仅获取页面的内容，作为学习和对Python知识的了解，不会对页面或原始数据造成压力；请规范文明使用本文内容，请仅作为个人学习参考使用。本文主要学习了Python爬虫的基础，及常用的几个模块或库的使用，比如BeautifulSoup、request等。 学习目标获取百度当天的热搜内容，并打印出来；内容需要包含热搜的标题、热搜简介、以及热搜的指数。 预... 学习建议本文仅用于学习使用，不做他用；本文仅获取页面的内容，作为学习和对Python知识的了解，不会对页面或原始数据造成压力；请规范文明使用本文内容，请仅作为个人学习参考使用。本文主要学习了Python爬虫的基础，及常用的几个模块或库的使用，比如BeautifulSoup、request等。 学习目标获取百度当天的热搜内容，并打印出来；内容需要包含热搜的标题、热搜简介、以及热搜的指数。 预...
- XPath详解，涉及获取所有节点，子节点，父节点，属性匹配，文本获取，属性获取，按序选择等。 XPath详解，涉及获取所有节点，子节点，父节点，属性匹配，文本获取，属性获取，按序选择等。
- 爬虫基本原理、会话和Cookie详解 爬虫基本原理、会话和Cookie详解
上滑加载中
推荐直播
-
昇腾AI算法挑战赛-核心算子如何优化？专家带你深度解析2025/11/17 周一 16:00-17:00
王老师 华为算子专家
昇腾AI算法挑战赛进阶赛战鼓催征！本期直播间，我们特邀华为算子专家王老师，为你深度剖析Matmul、wholereducesum等核心算子的底层原理与优化技巧，直击赛题核心。想提升代码效率、冲击更高排名？锁定直播，带你破局！
回顾中 -
AI编码实干派，“码”力全开2026/02/26 周四 15:00-16:30
谈宗玮/于邦旭/丁俊卿/陈云亮/王一男
【中国，深圳，2026年2月26日】，以“AI编码实干派，码力全开”为主题的华为云码道（CodeArts）代码智能体新春发布会在线上成功召开。华为云码道公测版正式发布，为开发者和企业提供具备工程化能力的智能编码解决方案。
回顾中 -
华为云码道-玩转OpenClaw，开启在线养虾模式2026/03/11 周三 19:00-20:00
刘昱，华为云高级工程师/谈心，华为云技术专家/李海仑，上海圭卓智能科技有限公司CEO
OpenClaw 火爆开发者圈，华为云码道最新推出 Skill ——开发者只需输入一句口令，即可部署一个功能完整的「小龙虾」智能体。直播带你玩转华为云码道，玩转OpenClaw
回顾中
热门标签