Logo

Menu

解决python logging模块写入日志文件后乱码和存在esc问题
爬虫

解决python logging模块写入日志文件后乱码和存在esc问题

乱码是因为没有设置文件格式，存在esc是因为颜色问题，阅读器无法渲染。解决配置如下 import re # 自定义formatter，匹配常见的ANSI转义序列，处理日志中的esc字符 class NoColorFormatter(logging.Formatter): def forma

程序员Zero Published on 2024-05-17
逆向B站刷播放量
爬虫 B站逆向python爬虫刷播放量

逆向B站刷播放量

逆向B站刷播放量 找到刷播放量的请求URL -.js -.css -.png -.svg -.html -data -Ha 首先在过滤器里面把静态资源相关的先过滤了 找到请求URL为：https://api.bilibili.com/x/click-interface/click/now。但是这个是

程序员Zero Published on 2024-01-16
河南考生中考移民大庆大家究竟在吵什么？我爬取了两万五千条抖音评论和近6年分数线并进行了数据分析
爬虫 中考移民抖音逆向河南高考

河南考生中考移民大庆大家究竟在吵什么？我爬取了两万五千条抖音评论和近6年分数线并进行了数据分析

所涉及到的知识点 爬虫 爬虫基础 requests库的基本使用 pyquery库的基本使用 js逆向 js补环境(VMP还原) execjs的使用 数据分析 pandas的使用 numpy的使用 matplotlib的使用 绘制组合条形图 绘制词云图 绘制折线图 绘制柱状图 存储数据 pymysql

程序员Zero Published on 2024-01-16
某练通逆向（附数据分析结果）
爬虫 dlt数据分析

某练通逆向（附数据分析结果）

背景 背景是23年11月末时候有个人找到我说想打个省标，我问预算多少，我跟他要600，结果他跟我说别人都是200零基础问我200能不能打，我当时就震惊了，一年多没正经打过代练，现在代练行业都这么玩了吗？ 正好当时在学APP逆向，由于跟dlt太熟悉了，我就把某代练通的搜索接口和分页查询接口给逆向了，这

程序员Zero Published on 2024-01-01
JS逆向中的execjs的配置导入问题
爬虫 js逆向

JS逆向中的execjs的配置导入问题

本文共503字 一定要先这样导入 from functools import partial  # 锁定参数 <

程序员Zero Published on 2023-11-28
JEB运行闪退问题
爬虫 jeb安卓逆向

JEB运行闪退问题

本文共436个字 jeb是一款静态调试和动态分析工具，但是正版pro是需要收费的，我们在下载的时候一般都是下盗版。盗版文件就衍生出来了这样一个问题，就是版本不是最新的。我这里的jeb版本是4.20.支持的jdk版本为11，（有的版本是2.X或者3.X，就对应jdk8以下和jdk8）。 在双击jeb_

程序员Zero Published on 2023-11-28
某易有道翻译逆向
爬虫 AESjs逆向md5

某易有道翻译逆向

分析网站 分析payload 从下图可以看出，sign99%是需要逆向的，mysticTime98%也是需要逆向的（推测结合生成sign），不然传过去这个参数干嘛。其他的参数都很随意，像yduuid这种99%是不需逆向 分析请求头 都是很常规的，不需逆向

程序员Zero Published on 2023-11-19
某准网逆向
爬虫 看准网，js逆向

某准网逆向

初步逆向思路 首先进入页面，这里我们爬取软件开发工程师的薪资。找到网络，发送页面数据那个请求，可以看到，请求数据有两个加密的，这个是get请求，请求url是https://www.kanzhun.com/search?cityCode=31&industryCodes=&pageNum=1&quer

程序员Zero Published on 2023-11-18
Scrapy-redis分布式爬取数据
爬虫 scrapy爬虫

Scrapy-redis分布式爬取数据

本文共1257个字 导包 scrapy是使用redis这个数据库实现分布式的，因此我们刚开始要安装这个scrapy-redis包。pip install scrapy-redis。 创建项目

程序员Zero Published on 2023-10-30