- 前言本文使用Python第三方库和浏览器实'企鹅'空间的的爬取,利用Matplotlib库实现词云的绘制,对于matplotlib感兴趣的童鞋可以参考《Python绘制精美可视化数据分析图表(一)-Matplotlib》，这里不再赘述。Selenium的介绍Selenium库是一个web的自动化测试工具，最初是为网站自动化测试而开发的，类似我们以前玩游戏用的“按键精灵”软件。他跟按键精灵一样... 前言本文使用Python第三方库和浏览器实'企鹅'空间的的爬取,利用Matplotlib库实现词云的绘制,对于matplotlib感兴趣的童鞋可以参考《Python绘制精美可视化数据分析图表(一)-Matplotlib》，这里不再赘述。Selenium的介绍Selenium库是一个web的自动化测试工具，最初是为网站自动化测试而开发的，类似我们以前玩游戏用的“按键精灵”软件。他跟按键精灵一样...
- 抓取JD商品先说说起因吧,是因为有朋友找我一起合作抓取某东的商品数据,我做为一个刚入爬虫的新手,当然是不可能完整的拿下这个啦.这次爬虫要的是商品的详细数据,我的工作就是筛选所有的商品的url,解析成json文件,传给他,他在继续通过我传入的url进行商品的详细信息需求这次的需求是通过关键字,找出含有关键字信息的产品,并且按照高级筛选的条件,要前100条商品的数据,如下还要根据销量,价格,评论... 抓取JD商品先说说起因吧,是因为有朋友找我一起合作抓取某东的商品数据,我做为一个刚入爬虫的新手,当然是不可能完整的拿下这个啦.这次爬虫要的是商品的详细数据,我的工作就是筛选所有的商品的url,解析成json文件,传给他,他在继续通过我传入的url进行商品的详细信息需求这次的需求是通过关键字,找出含有关键字信息的产品,并且按照高级筛选的条件,要前100条商品的数据,如下还要根据销量,价格,评论...
- 今天我们抓取的是m3u8的视频,视频有长视频和短视频之分.抓取m3u8类型视频对于短视频一般来说一个视频对应的就是一个url长视频 一个视频就几百兆到几十G不等 这种视频往往不会由一个连接进行全部返回 视频是由多个片段组成的每个片段大概是几秒到几分钟所以对于长视频的下载没有办法通过一个url进行获取下载，需要获取每个频段的url 进行下载进行拼接最终变成一个完整的视频然而视频还有加密... 今天我们抓取的是m3u8的视频,视频有长视频和短视频之分.抓取m3u8类型视频对于短视频一般来说一个视频对应的就是一个url长视频 一个视频就几百兆到几十G不等 这种视频往往不会由一个连接进行全部返回 视频是由多个片段组成的每个片段大概是几秒到几分钟所以对于长视频的下载没有办法通过一个url进行获取下载，需要获取每个频段的url 进行下载进行拼接最终变成一个完整的视频然而视频还有加密...
- 第一次发表实战类型的爬虫文章,如果有那里不明白或者出现bug的可以找我私信,欢迎大家在下面评论,可以给出我更好的建议,欢迎大家指正.网站链接放在这里了鬼吹灯主要是以协程为主来爬取小说得章节内容,协程爬取不懂得小伙伴可以先关注我一手,后续会整理理论的知识放在专栏里整体思路得到鬼吹灯页面的源码解析源码得到每一个章节的url得到书名,这个书名通过切片得到通过url得到一个页面的内容使用并发... 第一次发表实战类型的爬虫文章,如果有那里不明白或者出现bug的可以找我私信,欢迎大家在下面评论,可以给出我更好的建议,欢迎大家指正.网站链接放在这里了鬼吹灯主要是以协程为主来爬取小说得章节内容,协程爬取不懂得小伙伴可以先关注我一手,后续会整理理论的知识放在专栏里整体思路得到鬼吹灯页面的源码解析源码得到每一个章节的url得到书名,这个书名通过切片得到通过url得到一个页面的内容使用并发...
- @[TOC](Requests+Etree+BeautifulSoup+Pandas+Path应用 | 获取页面指定区域数据存入html、excel文档) 1 需求来源获取网页指定区域数据，并进行保存；简单说就是pa chong的需求了。 2 需求细节注意：请文明上网，本文仅作为学习用。讲述的是思路和方法，所以对被测试网站关键数据进行隐藏。如有需要，可学习思路后自行找测试对象进行学习。某网站... @[TOC](Requests+Etree+BeautifulSoup+Pandas+Path应用 | 获取页面指定区域数据存入html、excel文档) 1 需求来源获取网页指定区域数据，并进行保存；简单说就是pa chong的需求了。 2 需求细节注意：请文明上网，本文仅作为学习用。讲述的是思路和方法，所以对被测试网站关键数据进行隐藏。如有需要，可学习思路后自行找测试对象进行学习。某网站...
- 文章目录 微信小程序 Spdier - OfferShow 反编译逆向（一） 前言 一、任务说明 1.尝试反编译分析出js_code参数的生成方式，用来获取token 2.将小程序搜索出来的数据保存至本地excel 二、微信小程序抓包 - 分析 三、wxapkg反编译 - 分析 1.在夜神模拟器获取微信程序员的包 1.1 获取wxapkg的地址 1.2 删除wxapkg文件重新生成 1.3 复制w 文章目录 微信小程序 Spdier - OfferShow 反编译逆向（一） 前言 一、任务说明 1.尝试反编译分析出js_code参数的生成方式，用来获取token 2.将小程序搜索出来的数据保存至本地excel 二、微信小程序抓包 - 分析 三、wxapkg反编译 - 分析 1.在夜神模拟器获取微信程序员的包 1.1 获取wxapkg的地址 1.2 删除wxapkg文件重新生成 1.3 复制w
- # 一、任务说明 ## 1.PDF下载 **提示：下载2019年1月1日-至今的"银行间货币市场"PDF文件** # 一、任务说明 ## 1.PDF下载 **提示：下载2019年1月1日-至今的"银行间货币市场"PDF文件**
- 一、 关于壳的介绍 1、壳的功能：壳最本质的功能就是实现加载器，壳是指在一个程序的外面再包裹上另外一段代码，保护里面的代码不被非法修改或反编译的程序。它们一般都是先于程序运行，拿到控制权，然后完成它们保护软件的任务，深入点就是在apk外面再套一层壳，在运行的时候这层壳会把真正的apk的dalvik指令集释放出来，为apk加壳是目前主流的防护方案，真正的源码是隐藏在壳之下的，要想拿到源码研究其逻辑就 一、 关于壳的介绍 1、壳的功能：壳最本质的功能就是实现加载器，壳是指在一个程序的外面再包裹上另外一段代码，保护里面的代码不被非法修改或反编译的程序。它们一般都是先于程序运行，拿到控制权，然后完成它们保护软件的任务，深入点就是在apk外面再套一层壳，在运行的时候这层壳会把真正的apk的dalvik指令集释放出来，为apk加壳是目前主流的防护方案，真正的源码是隐藏在壳之下的，要想拿到源码研究其逻辑就
- 反编译工具有很多种，我推荐JADX，后续有更好的反编译工具我会继续补充 反编译工具有很多种，我推荐JADX，后续有更好的反编译工具我会继续补充
- 抓包概念：抓包是将网络传输发送与接收的数据包进行截获、重发、编辑、转存等操作，也用来检查网络安全等。 抓包概念：抓包是将网络传输发送与接收的数据包进行截获、重发、编辑、转存等操作，也用来检查网络安全等。
- Frida 是一款基于 Python + JavaScript 的 Hook 与调试框架，实现app逆向的强大工具； Frida 是一款基于 Python + JavaScript 的 Hook 与调试框架，实现app逆向的强大工具；
- Spider、App逆向，本案例使用的App是：引力播.apk，涉及到查壳、脱壳、反编译； Spider、App逆向，本案例使用的App是：引力播.apk，涉及到查壳、脱壳、反编译；
- Frida可以通过将JavaScript 脚本插入到APP的内存中来对APP的逻辑进行跟踪和监视乃至修改原程序的逻辑，实现逆向开发和分析人员想要实现的功能称之为HOOK（钩子 即通过钩子机制与钩子函数建立联系）； Frida可以通过将JavaScript 脚本插入到APP的内存中来对APP的逻辑进行跟踪和监视乃至修改原程序的逻辑，实现逆向开发和分析人员想要实现的功能称之为HOOK（钩子 即通过钩子机制与钩子函数建立联系）；
- 微信开发者工具 / 反编译工具CrackMinApp 下载安装 微信开发者工具介绍：微信提供的微信小程序开发工具，可以通过它来使用代码开发，也有小程序开发文档提供，很多程序员都会使用这个微信开发者工具。微信开发者工具属于是代码编程开发工具，除此之外也会有其他的代码编程开发工具，不过前提是需要懂代码才能使用这种开发工具，有一定的上手难度哦。 反编译工具CrackMinApp介绍：(反编译微信小程序) 微信开发者工具 / 反编译工具CrackMinApp 下载安装 微信开发者工具介绍：微信提供的微信小程序开发工具，可以通过它来使用代码开发，也有小程序开发文档提供，很多程序员都会使用这个微信开发者工具。微信开发者工具属于是代码编程开发工具，除此之外也会有其他的代码编程开发工具，不过前提是需要懂代码才能使用这种开发工具，有一定的上手难度哦。 反编译工具CrackMinApp介绍：(反编译微信小程序)
- Scrapy 框架学习 Scrapy 框架学习
上滑加载中
推荐直播
-
计算机核心课程贯通式实践教学体系介绍2025/01/05 周日 09:00-12:00
华为开发者布道师、湖南大学二级教授、博士生导师赵欢
1月5日上午，华为开发者布道师直播间将迎来重磅嘉宾！赵欢老师，计算机教育创新先锋，其 “小而全系统” 教学方案重塑计算机类专业课程与实践，融合鲲鹏生态技术知识，斩获国家级教学成果奖。杨科华老师专注小型全系统实践，在香橙派鲲鹏 Pro 开发板构建精妙 mini 系统，带您直击计算机底层奥秘。还有香橙派系统开发部李博经理，精通开发板硬件与应用，将全方位揭秘开发板使用及 FPGA 开发实战案例。三位大咖齐聚，为高校师生开启计算机系统能力提升的知识宝库，精彩即将上线，速速预约！
回顾中 -
GaussDB数据库介绍2025/01/07 周二 16:00-18:00
Steven 华为云学堂技术讲师
本期直播将介绍GaussDB数据库的发展历程、优势、架构、关键特性和部署模式等，旨在帮助开发者了解GaussDB数据库，并通过手把手实验教大家如何在华为云部署GaussDB数据库和使用gsql连接GaussDB数据库。
去报名 -
DTT年度收官盛典：华为开发者空间大咖汇，共探云端开发创新2025/01/08 周三 16:30-18:00
Yawei 华为云开发工具和效率首席专家 Edwin 华为开发者空间产品总监
数字化转型进程持续加速，驱动着技术革新发展，华为开发者空间如何巧妙整合鸿蒙、昇腾、鲲鹏等核心资源，打破平台间的壁垒，实现跨平台协同？在科技迅猛发展的今天，开发者们如何迅速把握机遇，实现高效、创新的技术突破？DTT 年度收官盛典，将与大家共同探索华为开发者空间的创新奥秘。
去报名
热门标签