爬虫实战案例

39 Case Studies
基础 中级 高级
c14

主流模拟浏览器检测对抗

selenium,playwright,puppeteer,phantomjs,simulate

难度:4.5 4.0k 进入挑战 →
c13

API 参数签名与分块传输

web-scraping,api,js-reverse,range,数据加密,JS逆向,网络爬虫练习,在线爬虫练习,混淆加密

难度:4 12.0k 进入挑战 →
c12

AES 密钥混淆与 Selenium 高级对抗

scraping,api,reverse,macbook,数据加密, JS逆向,网络爬虫练习,在线爬虫练习,混淆加密,逆向破解

难度:4 8.8k 进入挑战 →
SPONSORED
c11

Web Workers 多线程反调试

reverse,macbook,worker,JS逆向,网络爬虫练习,在线爬虫练习,混淆加密,逆向破解

难度:4 24.5k 进入挑战 →
c10

简单模拟 Cloudflare Challenge

高级,API接口,JS逆向,混淆,代码加密,captch,SEMrush,Ahrefs,selenium

难度:4 17.2k 进入挑战 →
c09

浏览器指纹检测及爬虫 IP 封禁

高级,API接口,JS逆向,混淆,代码加密,captch,SEMrush,Ahrefs,seleniuum,代理IP

难度:4 14.9k 进入挑战 →
c08

Selenium高级对抗及浏览器 Hook 反调试

高级,API接口,JS逆向,混淆,代码加密,金融数据,selenium

难度:4 12.8k 进入挑战 →
c07

服务端 Token 及 API 参数签名

高级,API接口,JS逆向,混淆,代码加密,captch,SEMrush,Ahrefs,selenium

难度:4 14.2k 进入挑战 →
c06

用户行为检测及模拟浏览器对抗

高级,API接口,JS逆向,混淆,代码加密,captch,selenium

难度:3.5 13.4k 进入挑战 →
c05

AES 加密及拖拽式滑块验证码反爬虫

高级,API接口,JS逆向,混淆,代码加密,captch,human,selenium,航班

难度:3.5 5.5k 进入挑战 →
c04

用户行为检测反爬虫

高级,API接口,JS逆向,混淆,代码加密,captch,human,selenium,微博

难度:3.5 5.2k 进入挑战 →
c03

时间戳哈希签名 + 随机数防重放反爬虫

高级,API接口,JS逆向,混淆,代码加密,数据加密,hash,参数签名,时间戳,timestamp

难度:3.5 21.4k 进入挑战 →
c02

拖拽式滑块验证码反爬虫

高级,拖拽,验证码,captch,Selenium,JS逆向,混淆,代码加密,数据加密,航班

难度:3.5 6.2k 进入挑战 →
c01

尝尝甜头:Cookie 反爬虫

高级,逆向,referer,TensorFlow,mnist

难度:3.5 29.0k 进入挑战 →
n07

随机CSS样式类名,无Element ID

入门,CSS,random,classname

难度:2 5.8k 进入挑战 →
SPONSORED
e04

被屏蔽IP后使用代理服务器爬取页面

入门,IP代理,屏蔽IP,proxy,翻页,pagination,代理服务器

难度:1 24.2k 进入挑战 →
n06

网页表单爬取(RPA初阶)

入门,Form,RPA,自动化测试,表单

难度:2 11.5k 进入挑战 →
n05

CSS Sprites (雪碧图)反爬

入门,CSS,sprites,雪碧图,offfset,position,absolute,中国500强

难度:2 9.2k 进入挑战 →
n04

CSS伪元素反爬

入门,CSS,pseudo-element,xpath,电影海报

难度:2 9.7k 进入挑战 →
h06

初识浏览器指纹:Selenium是如何被反爬的

进阶,Selenium,浏览器指纹,模拟浏览器,JS逆向,混淆,代码加密,API接口,常见弱密码,

难度:3 12.2k 进入挑战 →
h05

js逆向破解时间戳反爬

进阶,JS逆向,混淆,代码加密,API接口,常见弱密码,时间戳,timestamp,hash,参数签名

难度:3 19.3k 进入挑战 →
h04

js加密混淆及简单反调试

进阶,JS逆向,混淆,代码加密,API接口,常见弱密码,anti-debugging,反调试

难度:3 10.1k 进入挑战 →
h03

网页滚动加载的原理及爬取(JavaScript加密混淆逆向基础)

进阶,JS逆向,信息流,feed,scroll,混淆,代码加密,高分电影,API接口

难度:3 91.3k 进入挑战 →
h02

高分电影列表复杂页面的解析(仿豆瓣电影)-xpath高级用法

进阶,豆瓣电影,海报,图片,images,复杂样式

难度:3 26.2k 进入挑战 →
n03

限制访问频率不低于1秒

入门,IP限制,频率,frequency,sleep

难度:2 60.5k 进入挑战 →
n02

使用Base64编码的图片爬取与解码还原

入门,图片,images,base64,编码,解码

难度:2 15.3k 进入挑战 →
h01

CSS样式偏移混淆文本内容的解析与爬取

进阶,CSS,offfset,position,absolute,混淆,中国500强

难度:3 21.8k 进入挑战 →
n01

User-Agent与Referer校验反爬

入门,user-agent,referer,中国500强

难度:2 30.0k 进入挑战 →
e03

无序号翻页

入门,翻页,分页,无序号,pagination,non-digit

难度:1 48.2k 进入挑战 →
e02

带验证码的登录爬取

入门,用户名,密码,验证码,username,password,login,captcha,digit

难度:1 79.6k 进入挑战 →
SPONSORED
e01

用户名密码登录爬取后台数据

入门,用户名,密码,username,password,login,中国500强

难度:1 44.0k 进入挑战 →
s08

http post请求的数据爬取

入门,Post,table,server

难度:0.5 84.2k 进入挑战 →
s07

ajax动态加载数据的爬取

入门,API接口,AJax,Json,server

难度:0.5 30.1k 进入挑战 →
s06

带iframe的页面源码分析及数据爬取

入门,iframe,table,http,server

难度:0.5 21.0k 进入挑战 →
s05

网页图片的爬取及本地保存

入门,爬取图片,images,download,二进制文件

难度:0.5 32.1k 进入挑战 →
s04

分页参数分析及翻页爬取

入门,爬虫翻页,pagination,分页,table,server

难度:0.5 57.6k 进入挑战 →
s03

lxml库进阶语法及解析练习

入门,lxml,xpath,table,advanced

难度:0.5 29.1k 进入挑战 →
s02

http请求分析及头构造使用

入门,requests,xpath,table,http,user-agent,http-headers,server

难度:0.5 28.7k 进入挑战 →
s01

requests库及lxml库入门

入门,requests,lxml,xpath,table,servers

难度:0.5 59.5k 进入挑战 →

新挑战筹备中

正在调试更复杂的反爬算法...
更多关卡即将解锁

AD