scrapy的安装与配置
安装
这里建议使用虚拟环境来搭建项目
1 | pip install scrapy //我这个已经默认为清华源了,如果没有设置,需要声明源,否则可能无法下载 |
如果安装有问题,需要上https://www.lfd.uci.edu/~gohlke/pythonlibs/下载相应配置
然后使用cmd cd到相应下载文件夹,输入:
1 | pip insatll -i 文件名 |
完成后便可进入项目环境
配置
进入项目并选择好解释器后在命令行中输入scrapy即可查看信息
输入:
1 | scrapy startproject 项目名称 |
来搭建项目;
然后输入:
1 | scrapy genspider 文件名 网站域名 |
即可使用基础框架。
以上操作完成后即可进行爬虫的编写了。
本博客所有文章除特别声明外,均采用 CC BY-NC-SA 4.0 许可协议。转载请注明来自 小chen妙妙屋!
评论





