- 目录 背景 简介 测试 结论 背景 一直以来，python的web框架给别人的感觉就是: 一个能打的都没有。社区也在不断的努力,特别在 asyncio 爆发之后，出现了一些新的异步框架，比如sanic,比如vibora,相比传统的flask, django，这些新的框架相对成熟了很多，而且在性能上已经有长足的进步了，和node, golang ，已经有一战之力了，大家可以... 目录 背景 简介 测试 结论 背景 一直以来，python的web框架给别人的感觉就是: 一个能打的都没有。社区也在不断的努力,特别在 asyncio 爆发之后，出现了一些新的异步框架，比如sanic,比如vibora,相比传统的flask, django，这些新的框架相对成熟了很多，而且在性能上已经有长足的进步了，和node, golang ，已经有一战之力了，大家可以...
- 写在前面 最近该系列的爬虫更新比较慢了，原因是实在写不动了，70多篇博客，每一篇都是一个案例，在写好多都不是篇博客可以容纳的了，而且爬虫的技术在70多篇中都有所涉及了，但是flag既然历下了，那么就必须要把它完成，接下来进入一些稍微稍微麻烦一点的内容，第一个咱就写分布式爬虫，这个其实核心就是提高爬取效率的，属于套路，而且是常见的讨论，走起。 为什么要用分布式 好问... 写在前面 最近该系列的爬虫更新比较慢了，原因是实在写不动了，70多篇博客，每一篇都是一个案例，在写好多都不是篇博客可以容纳的了，而且爬虫的技术在70多篇中都有所涉及了，但是flag既然历下了，那么就必须要把它完成，接下来进入一些稍微稍微麻烦一点的内容，第一个咱就写分布式爬虫，这个其实核心就是提高爬取效率的，属于套路，而且是常见的讨论，走起。 为什么要用分布式 好问...
- 混乱的代价 稍后等于永不 – 勒布朗法则 简单代码规则 能通过所有的测试 没有重复的代码 体现系统中的全部设计理念 包括尽量少的实体，比如类，方法，函数等 更改的原则 更改一个变量名 拆分一个过长的函数 消除重复的代码 清理嵌套的if语句 函数 函数要么做事情，要么回答什么事 要么do什么操作 要么返回值 这种指定需要分割开 使用异常替代返回的错误码 ... 混乱的代价 稍后等于永不 – 勒布朗法则 简单代码规则 能通过所有的测试 没有重复的代码 体现系统中的全部设计理念 包括尽量少的实体，比如类，方法，函数等 更改的原则 更改一个变量名 拆分一个过长的函数 消除重复的代码 清理嵌套的if语句 函数 函数要么做事情，要么回答什么事 要么do什么操作 要么返回值 这种指定需要分割开 使用异常替代返回的错误码 ...
- 如果if判断中存在多个表达式判断，需要使用逻辑运算符。 例如有一个变量a，需要判断是否在1到5之间，那么则需要判断a是否大于1且a小于5。这个时候需要使用and逻辑运算符进行判断。 and python中使用and判断左右两边表达式是同时正确，正确时返回最后一个对象（或者说值），错误时返回第一个对象（或者说值）。 a=10 if a>1 and a<5: ... 如果if判断中存在多个表达式判断，需要使用逻辑运算符。 例如有一个变量a，需要判断是否在1到5之间，那么则需要判断a是否大于1且a小于5。这个时候需要使用and逻辑运算符进行判断。 and python中使用and判断左右两边表达式是同时正确，正确时返回最后一个对象（或者说值），错误时返回第一个对象（或者说值）。 a=10 if a>1 and a<5: ...
- 爬前叨叨 第40篇博客吹响号角，爬取博客园博客~本文最终抓取到了从2010年1月1日到2019年1月7日的37W+文章，后面可以分析好多东西了呢 经常看博客的同志知道，博客园每个栏目下面有200页，多了的数据他就不显示了，最多显示4000篇博客如何尽可能多的得到博客数据，是这篇文章研究的一点点核心内容，能√get到多少就看你的了~ 单纯的从每个栏目去爬取是不显... 爬前叨叨 第40篇博客吹响号角，爬取博客园博客~本文最终抓取到了从2010年1月1日到2019年1月7日的37W+文章，后面可以分析好多东西了呢 经常看博客的同志知道，博客园每个栏目下面有200页，多了的数据他就不显示了，最多显示4000篇博客如何尽可能多的得到博客数据，是这篇文章研究的一点点核心内容，能√get到多少就看你的了~ 单纯的从每个栏目去爬取是不显...
- 写在前面 曾经有人问我，为何要写100篇关于爬虫的博客？我想说，因为吹牛吹过头了呗，100篇是真的难写。 希望在未来爬虫100例系列博客能在Python爬虫教学领域有那么一点点的位置。 今天开始，我将从一些成熟框架入手，继续提高你的爬虫知识面。 Portia是啥？ 这个框架在最开始就计划写一下了，没想到拖到这里，Portia属于可视化爬虫，基本描述参照下述内容... 写在前面 曾经有人问我，为何要写100篇关于爬虫的博客？我想说，因为吹牛吹过头了呗，100篇是真的难写。 希望在未来爬虫100例系列博客能在Python爬虫教学领域有那么一点点的位置。 今天开始，我将从一些成熟框架入手，继续提高你的爬虫知识面。 Portia是啥？ 这个框架在最开始就计划写一下了，没想到拖到这里，Portia属于可视化爬虫，基本描述参照下述内容...
- 文章目录 本面试题题库，由公号：非本科程序员 整理发布第1题：是否遇到过python的模块间循环引用的问题，如何避免它?第2题：简单介绍一下python函数式编程？第3题：python中函数装饰器有什么作用？第4题： 按照要求完成编码？第5题：按照要求完成编码？第6题：关注题，最近在公号更新一个神奇的系列入门文章 本面试题题库，由公号：非本科程序员 整... 文章目录 本面试题题库，由公号：非本科程序员 整理发布第1题：是否遇到过python的模块间循环引用的问题，如何避免它?第2题：简单介绍一下python函数式编程？第3题：python中函数装饰器有什么作用？第4题： 按照要求完成编码？第5题：按照要求完成编码？第6题：关注题，最近在公号更新一个神奇的系列入门文章 本面试题题库，由公号：非本科程序员 整...
- 帮粉丝写爬虫会成为这个系列的最后10篇内容，如果你有想要爬取的网站，在评论区告诉我吧，当然爬虫100例课程结束之后，还会持续为大家提供一些更加有趣的爬虫博客或者Python视频课 写在前面-Ruia 本篇博客介绍的框架为Ruia，一款基于 asyncio 和 aiohttp 的异步爬虫框架，其余过多的介绍咱就不废话了，直接看一下github地址：https... 帮粉丝写爬虫会成为这个系列的最后10篇内容，如果你有想要爬取的网站，在评论区告诉我吧，当然爬虫100例课程结束之后，还会持续为大家提供一些更加有趣的爬虫博客或者Python视频课 写在前面-Ruia 本篇博客介绍的框架为Ruia，一款基于 asyncio 和 aiohttp 的异步爬虫框架，其余过多的介绍咱就不废话了，直接看一下github地址：https...
- 背景交代 在反爬圈子的一个大类，涉及的网站其实蛮多的，目前比较常被爬虫coder欺负的网站，猫眼影视，汽车之家，大众点评，58同城，天眼查…还是蛮多的，技术高手千千万，总有五花八门的反爬技术出现，对于爬虫coder来说，干！就完了，反正也996了~ 作为一个系列的文章，那免不了，依旧拿猫眼影视“学习”吧，为什么？因为它比较典型~ 猫眼影视 打开猫眼专业版，常规操... 背景交代 在反爬圈子的一个大类，涉及的网站其实蛮多的，目前比较常被爬虫coder欺负的网站，猫眼影视，汽车之家，大众点评，58同城，天眼查…还是蛮多的，技术高手千千万，总有五花八门的反爬技术出现，对于爬虫coder来说，干！就完了，反正也996了~ 作为一个系列的文章，那免不了，依旧拿猫眼影视“学习”吧，为什么？因为它比较典型~ 猫眼影视 打开猫眼专业版，常规操...
- 文章目录 写在前面 第一种方式 you-get 第二种方式 自己动手，丰衣足食 第一步 第二步 第三步 第四步 第五步 第六步 编码时间 写在后面 写在前面 爬虫核心概念是分析数据包，提取想要的数据，数据入库。 我们学习到的各种手段，都是为了提高数据爬取的效率，提高解析数据的便携与准确性，提高入库存取的效率这些问题。 ... 文章目录 写在前面 第一种方式 you-get 第二种方式 自己动手，丰衣足食 第一步 第二步 第三步 第四步 第五步 第六步 编码时间 写在后面 写在前面 爬虫核心概念是分析数据包，提取想要的数据，数据入库。 我们学习到的各种手段，都是为了提高数据爬取的效率，提高解析数据的便携与准确性，提高入库存取的效率这些问题。 ...
- 童年回忆《数码宝贝：最后的进化》10 月 30 日在中国内地上映。所有和我们同龄的人都仍然记得数码宝贝，并且印象最深的还是第一部， 那永远的第一部！ 本系列文章导读链接 第一篇：Python 爬虫小课 1-9 宝妈程序媛福利-育儿网问答数据抓取 第二篇：Python 爬虫小课 2-9 中国妖怪数据库，运行中竟然发现有个色(he)欲(xie)妖怪分类 第三篇... 童年回忆《数码宝贝：最后的进化》10 月 30 日在中国内地上映。所有和我们同龄的人都仍然记得数码宝贝，并且印象最深的还是第一部， 那永远的第一部！ 本系列文章导读链接 第一篇：Python 爬虫小课 1-9 宝妈程序媛福利-育儿网问答数据抓取 第二篇：Python 爬虫小课 2-9 中国妖怪数据库，运行中竟然发现有个色(he)欲(xie)妖怪分类 第三篇...
- 组合模式是把一个类别归为一个整体，并且组织多个整体之间的关系，使用通过树形结构来描述所有整体。 一般的编写方式为一个类别对象下添加多个该对象的元素，该对象又为其它对象下的元素。简单来说就是一个学校有一个总部，总部下有有师资部、招生部；总部有分校，分校也有。 在我个人看来，设计模式的使用并不局限于书本描述的具体问题的解决，是需要丰富的业务经验才能更好的灵活应用，本人能... 组合模式是把一个类别归为一个整体，并且组织多个整体之间的关系，使用通过树形结构来描述所有整体。 一般的编写方式为一个类别对象下添加多个该对象的元素，该对象又为其它对象下的元素。简单来说就是一个学校有一个总部，总部下有有师资部、招生部；总部有分校，分校也有。 在我个人看来，设计模式的使用并不局限于书本描述的具体问题的解决，是需要丰富的业务经验才能更好的灵活应用，本人能...
- 为什么写这个系列的文章 互联网很多python面试分享的资料，但是都是对题目进行了非常简单的解读，我想针对每个面试题都深入并且细致的解释清楚，从这个出发点去帮助你建立python体系，所以有了这个系列的文章 序号文章Python面试题No1Python基础面试，看这篇文章画重点吧Python面试题No2Python面试快问快答，理论要的就是速度与精准Python面试... 为什么写这个系列的文章 互联网很多python面试分享的资料，但是都是对题目进行了非常简单的解读，我想针对每个面试题都深入并且细致的解释清楚，从这个出发点去帮助你建立python体系，所以有了这个系列的文章 序号文章Python面试题No1Python基础面试，看这篇文章画重点吧Python面试题No2Python面试快问快答，理论要的就是速度与精准Python面试...
- 今天是持续写作的第 37 / 100 天。 如果你有想要交流的想法、技术，欢迎在评论区留言。 本篇文章与你一起学一个方法 imwrite。 OpenCV 保存图像 读取图像之后，对应的就是保存图像，在 OpenCV 里面，保存图像也有讲究。 在 C++语言里面，OpenCV 函数结构如下： CV_EXPORTS_W bool imwrite( co... 今天是持续写作的第 37 / 100 天。 如果你有想要交流的想法、技术，欢迎在评论区留言。 本篇文章与你一起学一个方法 imwrite。 OpenCV 保存图像 读取图像之后，对应的就是保存图像，在 OpenCV 里面，保存图像也有讲究。 在 C++语言里面，OpenCV 函数结构如下： CV_EXPORTS_W bool imwrite( co...
- 本篇博客的最终目标是爬取世界上 9139 位艺人的身高、体重、生日、血型，当然有些数据目标网站没有提供，不在做过多的扩展。 爬虫小课系列文章导读链接 第一篇：Python 爬虫小课 1-9 宝妈程序媛福利-育儿网问答数据抓取 第二篇：Python 爬虫小课 2-9 中国妖怪数据库，运行中竟然发现有个色(he)欲(xie)妖怪分类 第三篇：151 只宝可梦... 本篇博客的最终目标是爬取世界上 9139 位艺人的身高、体重、生日、血型，当然有些数据目标网站没有提供，不在做过多的扩展。 爬虫小课系列文章导读链接 第一篇：Python 爬虫小课 1-9 宝妈程序媛福利-育儿网问答数据抓取 第二篇：Python 爬虫小课 2-9 中国妖怪数据库，运行中竟然发现有个色(he)欲(xie)妖怪分类 第三篇：151 只宝可梦...
上滑加载中
推荐直播
-
码道新技能，AI 新生产力——从自动视频生成到开源项目解析2026/04/08 周三 19:00-21:00
童得力-华为云开发者生态运营总监/何文强-无人机企业AI提效负责人
本次华为云码道 Skill 实战活动，聚焦两大 AI 开发场景：通过实战教学，带你打造 AI 编程自动生成视频 Skill，并实现对 GitHub 热门开源项目的智能知识抽取，手把手掌握 Skill 开发全流程，用 AI 提升研发效率与内容生产力。
回顾中 -
华为云码道：零代码股票智能决策平台全功能实战2026/04/18 周六 10:00-12:00
秦拳德-中软国际教育卓越研究院研究员、华为云金牌讲师、云原生技术专家
利用Tushare接口获取实时行情数据，采用Transformer算法进行时序预测与涨跌分析，并集成DeepSeek API提供智能解读。同时，项目深度结合华为云CodeArts（码道）的代码智能体能力，实现代码一键推送至云端代码仓库，建立起高效、可协作的团队开发新范式。开发者可快速上手，从零打造功能完整的个股筛选、智能分析与风险管控产品。
回顾中 -
华为云码道全新升级，多会话并行与多智能体协作2026/05/08 周五 19:00-21:00
王一男-华为云码道产品专家；张嘉冉-华为云码道工程师；胡琦-华为云HCDE；程诗杰-华为云HCDG
华为云码道4月份版本全新升级，此次直播深度解读4月份产品特性，通过“特性解读+实操演示+实战案例+设计创新”的组合，全方位展现码道在多会话并行与多智能体协作方面的能力，赋能开发者提升效率
正在直播
热门标签