完整pyspider安装

Dear 丶 2021-12-01 15:28 425阅读 0赞

通过pip install pyspider，部分win10用户在安装pyspider时可能会出现

Command “python setup.py egg_info” failed with error code 10 in ……

这个错误，是因为找不到pycurl导致，所以我们需要用下面的方法。

一、

pip install wheel

二、

访问：http://www.lfd.uci.edu/~gohlke/pythonlibs，下载相应的编译包，我是python3.6 64位所以选择下面这个

watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQxMDc2Nzk3_size_16_color_FFFFFF_t_70

三、

pip install whl文件所在的路径，如d:\pycurl-7.43.1-cp34-cp34m-win_amd64.whl

四、pip install pyspider

五、

如果出现Deprecated option ‘domaincontroller’: use ‘http_authenticator.domain_control则去自己的python路径的lib文件夹里找到pyspider里面的webui的webdav.py文件，修改第209行’domaincontroller’: NeedAuthController(app),为

  1. 'http_authenticator':{
  2.         'HTTPAuthenticator':NeedAuthController(app),
  3.     },

六、命令行pyspider all，如果一直停在xxxstarting……，就反复打开命令行执行此命令

七、大功告成

watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQxMDc2Nzk3_size_16_color_FFFFFF_t_70 1

watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQxMDc2Nzk3_size_16_color_FFFFFF_t_70 2

发表评论

表情：
评论列表 （有 0 条评论，425人围观）

还没有评论，来说两句吧...

相关阅读

    相关 爬虫PySpider框架

    PySpider web界面编写调试脚本，启停脚本，监控执行状态，查看活动历史，获取产出结果： 提供SaaS服务，可以在线提交部署 支持MySQL、Mo

    亦凉亦凉/ 0 赞/ 60 阅读

    相关 python3.6安装pyspider报错

    最近在学python爬虫，在安装pyspider库的时候，爆了一堆的错，查了好久才解决了，我把这些错误都集中记录在这个帖里，给大家做个参考。 首先是安装，用pip安装，用如下

    痛定思痛。痛定思痛。/ 0 赞/ 158 阅读