Skip to content

Godning/scrapy_test

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

12 Commits
 
 
 
 
 
 

Repository files navigation

scrapy_test

  • 应用scrapy爬去搜狐新闻
  • 数据库连接不知道怎么写。。。
  • pipeline如何去重是接下来要解决的问题
  • 用了redis,效果还可以。
  • 接下来是内容分析的部分了。。。

About

搜狐新闻爬虫

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages