本例中用到scrapy的crawlspider,爬取蜂鸟论坛一个帖子所有页的照片。目前爬取的所有帖子的照片都存放在一个目录,后续改进应用让不同帖子的照片分开存放,并且尽量解决相对链接以及js动态页面的链接爬取。