其他分享
首页 > 其他分享> > scrapy框架爬虫

scrapy框架爬虫

作者:互联网

1.定位到相应文件夹
Windows:
windows系统
进入命令行窗口 win+r

2.scrapy startproject 项目

3.scrapy genspider 名称 www.xxx.com

基于CrawlSpider爬虫父类的创建
scrapy genspider -t crawl 名称 www.xxx.com

分布式爬虫:
执行工程 scrapy runspider xxx.py

标签:www,框架,genspider,xxx,爬虫,scrapy,com
来源: https://blog.csdn.net/qq_45803923/article/details/114191552