Anti - crawling website crack Demo, we hope to update together
| Author | Zok |
|---|---|
| [email protected] | |
| BLOG | www.zhangkunzhi.com |
| Introduce | 数据解密、反爬处理、学习教程 |
记录并分享进步的过程
- 【大众点评】字体 | 坐标解密
- 【bilibili】视频下载器
- 【GitHub】自动登陆
- 【淘宝】自动登陆 | 过检测
- 【百度】翻译
- 【51job】查岗位
- 【美团】解析数据 | token生成器
- 【美团】全国区域爬虫
- 【快递查询】-快递单号查询
此工具包在我另外一个项目中，欢迎 star
├── DianPing // -----大众点评-----
│ ├── parse_address_poi.py // 坐标加密
│ └── parse_font_css.py // CSS字体解密
├── GitHub // ------GitHub-----
│ └── login.py // GitHub自动登陆
├── JingDong // -------京东-------
├── BaiDu // -------百度-------
│ └── translation.py // 百度翻译
├── MeiTuan // -------美团-------
│ ├── get_login_cookies.py // 基于pyppeteer登陆并获取cookies
│ ├── parse_play_areas.py // 三级区域解析器(休闲板块)
│ ├── parse_play_info.py // 休闲会所商铺数据解析
│ ├── parse_hotel_info.py // 酒店基础数据解析
│ ├── parse_hotel_comments.py // 酒店评论解析
│ ├── create_food_token.py // 餐饮页Token生成器
│ ├── parse_food_comments.py // 获取用户评论数据
│ └── parse_food_info.py // 解析餐馆数据
├── TaoBao // -------淘宝-------
│ ├── login_for_sina.py // 淘宝自动登陆-新浪入口
│ ├── auto_login_pyppeteer.py // 淘宝自动登陆-淘宝账号
│ ├── login_for_pyppeteer.py // 利用pyppeteer过webdriver检测
│ └── login_for_mitmproxy.py // 利用mitmproxy过webdriver检测
├── BiliBili // -------BiliBili-------
│ └── login.py // 视频下载器
├── MeiTuanArea // -------基于美团全国区域采集器-------
├── KuaiDi // -------快递单号快速查询-------
└── 51Job // -------51job-------
└── select_job.py // 编码转换，岗位查询
- 快递单号快速查询
- 美团三级区域解析器
- 美团休闲娱乐商铺信息
- TB过检测登陆
- 美团餐饮数据解析
- 51job查岗位
- 美团评论解析
