其他分享
首页 > 其他分享> > [爬虫框架scrapy]scrapy的安装

[爬虫框架scrapy]scrapy的安装

作者:互联网

玩爬虫几乎没有不知道scrapy框架的本文会介绍如何成功安装scrapy框架

windowns下安装scrapy

  1. 首先我们手动安装Twisted因为直接pip安装scrapy一般都是安装Twisted报错,索性直接安装
  2. https://www.lfd.uci.edu/~gohlke/pythonlibs/
  3. 打开这个网址Ctrl+F搜索Twisted
  4. 选择合适的版本,例如Twisted-20.3.0-cp38-win32.whl
  5. 下载后打开cmd输入:pip install
  6. 把Twisted-20.3.0-cp38-win32.whl拖进命令行点击回车
  7. 装好后开始安装scrapy
  8. 终端输入:pip install scrapy -i https://pypi.douban.com/simple/
  9. 上一步为换源,下载速度可以提升,嫌费事终端输入:pip install scrapy
  10. 安装完后进行测试终端输入:scrapy bench
  11. 如果没报错安装就成功了

linux下安装scrapy

  1. 直接安装
  2. pip instrall scrapy -i https://pypi.douban.com/simple/

标签:install,框架,爬虫,Twisted,scrapy,https,pip,安装
来源: https://www.cnblogs.com/liangritian/p/12950469.html