Skip to content

xbhog/scrapyRedis

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

12 Commits
 
 
 
 
 
 
 
 
 
 

Repository files navigation

爬虫分布式项目练习:

京东基础版本以及分布式版本 ---完成

程序运行方式:

  1. 打开redis-server.exe
  2. 打开redis-cli.exe
  3. 找到爬虫文件下的spider
  4. scrapy runspider spiderName
  5. 在redis-cli中输入:lpush redis-keyName(spider中定义的redis-key名字) URL(网页的链接)

拉钩网基础版本 ----持续中

About

scrapy_redis分布式练习

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

 
 
 

Contributors

Languages