# 反爬虫兵法演绎20讲

## 你将获得

*   爬虫与反爬虫工程师的生存法则
*   10+ 反爬虫疑难点的排查思路
*   反爬虫专家系统反爬心法总结
*   从工程师到Leader的层次跃迁

  

## 讲师介绍

DS Hunter，反爬虫专家，前某公司研发总监，现某大厂前端负责人。

DS Hunter 的反爬风格独特，既善于长期蛰伏，在竞对不易察觉的角度和时间发起进攻；也能用技术和心理双层攻势，直接击败或劝退对手。同时他具备丰富的爬虫经验，在爬与反爬的左右互搏中，积累了大量的技巧与新奇理论。

他曾在多个月内，使竞对无法抓取到己方的任何数据，甚至可能影响竞对和己方的后续合并。之后改做前端，反爬虫的经验也给予了他不少的帮助。秉承着“技术手段大同小异，但使用方法更为精髓”的理念，DS Hunter在反爬虫领域不断前行。

  

## 课程介绍

随着Web 2.0浪潮的推进以及大数据的横行，数据价值迅猛提升。而价值提升的背后，正预示着爬虫和反爬虫需求的增加。越来越多的公司在发起攻势，获取数据；又或者在修筑堡垒，封锁信息。

爬虫方和反爬虫方斗争中的招式愈发疯狂，恶劣的生存环境愈发恶劣，现如今深陷其中的工程师们不得不面对以下这些问题：

*   如何自保，有没有一套行之有效的生存法则？
*   反爬虫的手段都有哪些，使用它们的最佳时机又是什么？
*   面对爬虫各式各样的伪装，怎样才能精准识别？
*   如何才能在这个领域立足并向上发展？
*   ……

基于以上的问题，我们邀请到了反爬虫专家 DS Hunter——前某公司研发总监，现某大厂前端负责人。他将根据自己多年来丰富的爬虫与反爬虫技巧和经验，另辟蹊径，从历史和基础理论出发，进行高层次的分析和总结，为你提炼出经典实用的反爬虫“兵法”。用实践加实战的方式，帮你找到自己的前进方向，提升反爬效率，开辟新的反爬虫斗争思路。更进一步，助你成为团队领袖，向大师进发。

![](https://static001.geekbang.org/resource/image/fd/eb/fda48aabb8da01dbe1ccfacc00b733eb.jpg)

### 课程模块设计

课程主要分为四大模块：

**历史背景篇**

从历史视角出发，带你更加深刻地了解爬虫反爬虫。在这个模块中你会发现，虽然爬虫技术在不断发展，但战争的总体思路并没有太大的变化。

**理论与实践案例篇**

本模块是课程的核心内容。这里会介绍爬虫和反爬虫的基础理论，以及部分实践案例。带你吃透做为一个非管理岗位的爬虫或者反爬虫工程师，应该了解的基础知识，为后续的学习铺平道路。

**项目实战篇**

在掌握了基础知识后，我们进入实战。由于反爬的单个实战参考意义极弱，因此这一模块主要会带你在系统层面进行实战，帮助你把基础知识运用到实战中，融会贯通，发起向100分的冲刺。

**进阶篇**

在这一模块，你将了解反爬虫团队的管理技能以及团队组建等知识，打破发展上限，开启反爬虫团队作战的新模式。帮助你完成从技术到管理团队的跃迁，在团队方面做到“知己知彼”。

  

## 课程目录

![](https://static001.geekbang.org/resource/image/cc/8e/ccd4b6yy3f72686761fa77a2baea8f8e.jpg)

  

## 特别放送

#### 免费领取福利

[![](https://static001.geekbang.org/resource/image/d6/4d/d6069e2f191924aa849185001a98b14d.jpg)](https://time.geekbang.org/article/350702)

  

#### 限时活动推荐

[![](https://static001.geekbang.org/resource/image/5a/a5/5aa73814c0f0f59d0555e4a46db627a5.jpg?wh=1035x360)](https://shop18793264.m.youzan.com/wscgoods/detail/27cl9k4woq95k?scan=1&activity=none&from=kdt&qr=directgoods_982256518&shopAutoEnter=1)

  

## 订阅须知

1.  订阅成功后，推荐通过“极客时间”App端、Web端学习。
2.  本专栏为虚拟商品，交付形式为图文+音频，一经订阅，概不退款。
3.  订阅后分享海报，每邀一位好友订阅有现金返现。
4.  戳此[先充值再购课更划算](https://shop18793264.m.youzan.com/wscgoods/detail/2fmoej9krasag5p?scan=1&activity=none&from=kdt&qr=directgoods_1541158976&shopAutoEnter=1)，还有最新课表、超值赠品福利。
5.  企业采购推荐使用“[极客时间企业版](https://b.geekbang.org/?utm_source=geektime&utm_medium=columnintro&utm_campaign=newregister&gk_source=2021020901_gkcolumnintro_newregister)”便捷安排员工学习计划，掌握团队学习仪表盘。
6.  戳此[申请学生认证](https://promo.geekbang.org/activity/student-certificate?utm_source=geektime&utm_medium=caidanlan1)，订阅课程享受原价5折优惠。
7.  价格说明：划线价、订阅价为商品或服务的参考价，并非原价，该价格仅供参考。未划线价格为商品或服务的实时标价，具体成交价格根据商品或服务参加优惠活动，或使用优惠券、礼券、赠币等不同情形发生变化，最终实际成交价格以订单结算页价格为准。