编辑 settings.py 文件，然后根据以下提供的功能自行选择1. 修改是否遵守爬虫协议为 False# Obey robots.txt rules
ROBOTSTXT_OBEY = False2. 修改并发请求数，修改为1，或者2，越小爬取速度越慢，太快容易被识别到# Configure maximum concurrent requests performed by&
在读取dict的key和value时，如果key不存在，就会触发KeyError错误，如：t = {'a': '1','b': '2','c': '3',}print(t['d'])就会出现：KeyError: 'd'第一种解决方法：利用 dict 内置的 get(key[,default]) 方法，如果 ke
抓网页数据经常遇到例如 > 或者 这种HTML转义符，抓到字符串里很是烦人。比方说一个从网页中抓到的字符串html = '<abc>'用Python可以这样处理：import HTMLParser
html_parser = HTMLParser.HTMLParser()
txt = html_parser.unescape(html)&nbs
网盘链接：https://pan.baidu.com/s/1eK929ctWsd-rteJ8J_8i0g
提取码：46mv
网盘链接：https://pan.baidu.com/s/1ByHlzHaKOO7cpqb71PN4MA
提取码：yiya
呼，终于把图片跟文章分离出来了，这样就可以正大光明的在公共场合下看博客了哈哈哈哈哈
