爬虫技术进阶体现在反爬对抗和规模化抓取上。

目前网页的对抗难度上限是跟浏览器特征绑定的高度混淆 JS 和验证码拖拽等；APP 的 SO 混淆，抓包和设备特征检测对抗等。

这套爬虫课程内容涉及：

1.反混淆极具难度的 JS 和拖拽验证码

2.APP 的 HOOK 抓取

3.虚拟化技术做设备指纹擦除对抗

4.安卓群控抓取技术

5.爬虫工程化经验

6.规模化抓取窍门

7.社会工程

8.抓取黑科技