#scrapyCustomDownloader

自定义scrapy架构中的downloader程序。scrapy默认爬取无法解决动态页面解析的问题，这里主要是想通过自定义downloader模块中的下载处理，使用spynner来处理页面下载。