带你玩转Python爬虫（胆小者勿进）千万别做坏事·······

这节课很危险，哈哈哈哈，逗你们玩的

目录

写在前面

1 了解robots.txt

1.1 基础理解

1.2 使用robots.txt

2 Cookie

2.1 两种cookie处理方式

3 常