首页
后端开发
Python
知乎爬虫-Python

知乎爬虫-Python

22 次浏览 0 条评论
zip
zip
此项目的功能是爬取知乎用户信息以及人际拓扑关系，爬虫框架使用scrapy，数据存储使用mongo，下载这些数据感觉也没什么用，就当为大家学习scrapy提供一个例子吧。
zip
zhihu_spider-master.zip 预估大小：22个文件
folder
zhihu_spider-master 文件夹
file
.gitignore 30B
file
README.md 3KB
file
docker-compose.yml 232B
file
requirements.txt 60B
folder
doc 文件夹
file
主页.png 123KB
file
image.png 736KB
file
流程图.png 95KB
file
流程图.graffle 3KB
file
代码.png 109KB
file
people.png 520KB
file
relation.png 403KB
folder
zhihu 文件夹
file
main.py 96B
file
scrapy.cfg 254B
folder
zhihu 文件夹
folder
spiders 文件夹
file
profile.py 7KB
file
__init__.py 161B
file
items.py 1KB
file
pipelines.py 2KB
file
settings.py 4KB
file
constants.py 686B
folder
__init__.py 文件夹
folder
tools 文件夹
file
__init__.py 44B
file
async.py 696B
zip 文件大小：1.59MB