- scrapy中有一个参数:DOWNLOAD_DELAY 或者 download_delay 可以设置下载延时,不过Spider类被初始化的时候就固定了,爬虫运行过程中没发改变。 随机延时,可以降低被封ip的风险 代码示例 random_delay_middleware.py # -*- coding:utf-8 -*- import logging impor... scrapy中有一个参数:DOWNLOAD_DELAY 或者 download_delay 可以设置下载延时,不过Spider类被初始化的时候就固定了,爬虫运行过程中没发改变。 随机延时,可以降低被封ip的风险 代码示例 random_delay_middleware.py # -*- coding:utf-8 -*- import logging impor...
- 区别: tuple元组是不可变的列表 frozensets冻结集合是不可变的集合 代码示例 # 可变对象可以进行写操作(增、删、改) l = list([1, 2, 3]) l.append(4) [1, 2, 3, 4] s = set([1, 2, 3]) s.add(4) {1, 2, 3, 4} # 不可变对象不能进行写操作 t = tuple([1,... 区别: tuple元组是不可变的列表 frozensets冻结集合是不可变的集合 代码示例 # 可变对象可以进行写操作(增、删、改) l = list([1, 2, 3]) l.append(4) [1, 2, 3, 4] s = set([1, 2, 3]) s.add(4) {1, 2, 3, 4} # 不可变对象不能进行写操作 t = tuple([1,...
- 用于对特定的配置进行操作,当前模块的名称在 python 3.x 版本中变更为 configparser。 1.读取配置文件 - read(filename) 直接读取ini文件内容 - sections() 得到所有的section,并以列表的形式返回 - options(section) 得到该section的所有option - items(sectio... 用于对特定的配置进行操作,当前模块的名称在 python 3.x 版本中变更为 configparser。 1.读取配置文件 - read(filename) 直接读取ini文件内容 - sections() 得到所有的section,并以列表的形式返回 - options(section) 得到该section的所有option - items(sectio...
- 原理: 中文字符的编码范围是: \u4e00 - \u9fff 1 只要编码在此范围就可判断为中文字符 以下代码Python2下测试有效 1、判断字符串中是否包含中文 def is_contain_chinese(check_str): """ 判断字符串中是否包含中文 :param check_str: {str} 需要检测的字符串 :return: {bo... 原理: 中文字符的编码范围是: \u4e00 - \u9fff 1 只要编码在此范围就可判断为中文字符 以下代码Python2下测试有效 1、判断字符串中是否包含中文 def is_contain_chinese(check_str): """ 判断字符串中是否包含中文 :param check_str: {str} 需要检测的字符串 :return: {bo...
- 以下使用的是py3代码,py2可能引用方式不一样 服务器端 server.py # -*- coding: utf-8 -*- from xmlrpc.server import SimpleXMLRPCServer def file_read(filename): with open(filename, "r") as f: return f.read()... 以下使用的是py3代码,py2可能引用方式不一样 服务器端 server.py # -*- coding: utf-8 -*- from xmlrpc.server import SimpleXMLRPCServer def file_read(filename): with open(filename, "r") as f: return f.read()...
- 测试环境: macpython3 先查看本机支持的字体 # 显示可以用的中文字体 from matplotlib.font_manager import FontManager import subprocess def show_can_use_font(): # all font list get from matplotlib.font_manager... 测试环境: macpython3 先查看本机支持的字体 # 显示可以用的中文字体 from matplotlib.font_manager import FontManager import subprocess def show_can_use_font(): # all font list get from matplotlib.font_manager...
- scrapy辅助功能实用函数: get_response: 获得scrapy.HtmlResponse对象, 在不新建scrapy项目工程的情况下,使用scrapy的一些函数做测试 extract_links: 解析出所有符合条件的链接 代码示例 以拉勾首页为例,获取拉勾首页所有职位链接,进一步可以单独解析这些链接,获取职位的详情信息 import req... scrapy辅助功能实用函数: get_response: 获得scrapy.HtmlResponse对象, 在不新建scrapy项目工程的情况下,使用scrapy的一些函数做测试 extract_links: 解析出所有符合条件的链接 代码示例 以拉勾首页为例,获取拉勾首页所有职位链接,进一步可以单独解析这些链接,获取职位的详情信息 import req...
- 安装 pip install graphviz1 图片保存形式:pdf或png,在初始化时指定 代码示例 # -*- coding: utf-8 -*- # @File : graphviz_demo.py # @Date : 2018-07-03 # @Author : Peng Shiyu from graphviz import Digraph d... 安装 pip install graphviz1 图片保存形式:pdf或png,在初始化时指定 代码示例 # -*- coding: utf-8 -*- # @File : graphviz_demo.py # @Date : 2018-07-03 # @Author : Peng Shiyu from graphviz import Digraph d...
- 插入排序 列表被分为有序区和无序区两个部分,最初有序区只有一个元素 每次从无序区选择一个元素,插入到有序区的位置,直到无需去变空 代码实现 # -*- coding: utf-8 -*- # @File : insert_sort_demo.py # @Date : 2018-06-11 import random # 插入排序 O(n^2) def i... 插入排序 列表被分为有序区和无序区两个部分,最初有序区只有一个元素 每次从无序区选择一个元素,插入到有序区的位置,直到无需去变空 代码实现 # -*- coding: utf-8 -*- # @File : insert_sort_demo.py # @Date : 2018-06-11 import random # 插入排序 O(n^2) def i...
- 以下是python3的代码 from dateutil import parser time_str = "2018 9 03" dtime = parser.parse(time_str) print(dtime, type(dtime)) # 2018-09-03 00:00:00 <class 'datetime.datetime'> time... 以下是python3的代码 from dateutil import parser time_str = "2018 9 03" dtime = parser.parse(time_str) print(dtime, type(dtime)) # 2018-09-03 00:00:00 <class 'datetime.datetime'> time...
- pypi : https://pypi.org/project/zope.interface/ 文档:https://zopeinterface.readthedocs.io/en/latest/index.html 面向对象中接口负责定义规则,具体实现类来实现规则 安装 pip install zope.interface 1 代码示例 from zope... pypi : https://pypi.org/project/zope.interface/ 文档:https://zopeinterface.readthedocs.io/en/latest/index.html 面向对象中接口负责定义规则,具体实现类来实现规则 安装 pip install zope.interface 1 代码示例 from zope...
- python3 pip install pdfminer3k 1 # -*- encoding: utf-8 -*- try: from urllib.request import urlopen except: from urllib import urlopen from io import StringIO from pdfminer.pdfinterp... python3 pip install pdfminer3k 1 # -*- encoding: utf-8 -*- try: from urllib.request import urlopen except: from urllib import urlopen from io import StringIO from pdfminer.pdfinterp...
- 摘要算法模块,hashlib 碰撞:把无限多的数据集合映射到一个有限的集合中 要注意摘要算法不是加密算法,不能用于加密(因为无法通过摘要反推明文),只能用于防篡改,但是它的单向计算特性决定了可以在不存储明文口令的情况下验证用户口令。 对原始口令加一个复杂字符串来实现,俗称“加盐”:加salt算法 通过彩虹表根据哈希值反推原始口令 hashlib模块 imp... 摘要算法模块,hashlib 碰撞:把无限多的数据集合映射到一个有限的集合中 要注意摘要算法不是加密算法,不能用于加密(因为无法通过摘要反推明文),只能用于防篡改,但是它的单向计算特性决定了可以在不存储明文口令的情况下验证用户口令。 对原始口令加一个复杂字符串来实现,俗称“加盐”:加salt算法 通过彩虹表根据哈希值反推原始口令 hashlib模块 imp...
- python3.6 下测试 # -*- coding: utf-8 -*- class Demo(object): name = "demo" def instance_func(self): pass @classmethod def class_func(cls): pass @staticmethod def static_func(): pass def... python3.6 下测试 # -*- coding: utf-8 -*- class Demo(object): name = "demo" def instance_func(self): pass @classmethod def class_func(cls): pass @staticmethod def static_func(): pass def...
- 文档: PyPI: https://pypi.org/project/Flask-SocketIO/Github: https://github.com/miguelgrinberg/Flask-SocketIOdoc: https://flask-socketio.readthedocs.iosocket.io: https://socket.io/ 安装 pi... 文档: PyPI: https://pypi.org/project/Flask-SocketIO/Github: https://github.com/miguelgrinberg/Flask-SocketIOdoc: https://flask-socketio.readthedocs.iosocket.io: https://socket.io/ 安装 pi...
上滑加载中
推荐直播
-
华为云码道-玩转OpenClaw,在线养虾2026/03/11 周三 19:00-21:00
刘昱,华为云高级工程师/谈心,华为云技术专家/李海仑,上海圭卓智能科技有限公司CEO
OpenClaw 火爆开发者圈,华为云码道最新推出 Skill ——开发者只需输入一句口令,即可部署一个功能完整的「小龙虾」智能体。直播带你玩转华为云码道,玩转OpenClaw
回顾中 -
华为云码道-AI时代应用开发利器2026/03/18 周三 19:00-20:00
童得力,华为云开发者生态运营总监/姚圣伟,华为云HCDE开发者专家
本次直播由华为专家带你实战应用开发,看华为云码道(CodeArts)代码智能体如何在AI时代让你的创意应用快速落地。更有华为云HCDE开发者专家带你用码道玩转JiuwenClaw,让小艺成为你的AI助理。
回顾中 -
Skill 构建 × 智能创作:基于华为云码道的 AI 内容生产提效方案2026/03/25 周三 19:00-20:00
余伟,华为云软件研发工程师/万邵业(万少),华为云HCDE开发者专家
本次直播带来两大实战:华为云码道 Skill-Creator 手把手搭建专属知识库 Skill;如何用码道提效 OpenClaw 小说文本,打造从大纲到成稿的 AI 原创小说全链路。技术干货 + OPC创作思路,一次讲透!
回顾中
热门标签