请选择 进入手机版 | 继续访问电脑版

21番茄网

 找回密码
 立即注册

QQ登录

只需一步,快速开始

搜索
热搜: 21番茄网
查看: 115|回复: 0

安装Scrapy不成功的解决办法

[复制链接]

520

主题

661

帖子

2056

积分

管理员

Rank: 9Rank: 9Rank: 9

积分
2056
发表于 2021-1-9 13:49:16 | 显示全部楼层 |阅读模式
安装Scrapy不成功的解决办法

      如果用pip install Scrapy安装不成功,这通过先安装Scrapy的依赖库,之后再安装Scrapy的方法,一般都可以安装成功。

      需要安装的依赖库有 lxmlpyOpenSSLTwisted。安装顺序也是按这个顺序。


                               
登录/注册后可看大图


      需要注意的是我们安装的这些库,都是通过wheel来安装的。因此在安装这些库之前,先得安装wheel。打开控制台窗口,输入pip install wheel,先安装wheel库。

      如果是通过Anaconda3安装的python,则已经自带了wheel库了。


                               
登录/注册后可看大图


1.lxml依赖库:在这个网址下载:https://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml,查询 lxml 对应环境python的.whl文件。

      要注意选择对应的python版本和电脑位数。然后,比如在cmd输入:pip install lxml-4.6.2-cp38-cp38-win_amd64.whl,等待安装完成。

2.pyOpenSSL:直接在cmd输入pip install pyOpenSSL,然后等待安装完成。

3.Twisted依赖库:在这个网址下载:https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted,查询 Twisted 对应环境python的.whl文件。
      然后,比如在cmd输入:pip install Twisted-20.3.0-cp38-cp38-win_amd64.whl,等待安装完成。

红线部分分别对应python版本和电脑位数:

依赖库 电脑位数.png

      特别注意:.whl文件下载后放在这个路径:C:\Users\电脑主机用户名


                               
登录/注册后可看大图


      以上三个依赖库全部安装完成后,就开始安装Scrapy,直接在cmd中pip install scrapy。如果下载速度太慢,可以考虑用国内的镜像。
      比如输入:pip install scrapy -i 国内地址
      详见:http://www.21fanqie.com/thread-242-1-1.html


                               
登录/注册后可看大图


参考:
1.https://blog.csdn.net/yueermomo12/article/details/109511375
2.https://blog.csdn.net/hjl_heart/article/details/106670517




上一篇:食物热量查询——薄荷网,用gevent库+queue模块,爬取练习
下一篇:Scrapy爬虫框架
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|Archiver|手机版|小黑屋|21番茄网 ( 粤ICP备10099428号-2 )奇远富

GMT+8, 2021-6-17 03:54 , Processed in 0.199150 second(s), 25 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表