爬虫Scrapy命令行 命令介绍

忘是亡心i 2021-09-08 13:36 460阅读 0赞

全局命令有7个:

startproject:创建项目
settings:查看设置信息
runspider:运行爬虫
shell:打开Shell调试
fetch:下载网页信息
view:使用浏览器打开指定网址。
version:查看版本号

项目命令有7个:

crawl:运行指定的爬虫
check:检查爬虫代码
list:列出所有的爬虫
edit:使用默认的编辑器编辑爬虫文件
parse:使用爬虫抓取指定的URL
genspider:创建爬虫
bench:快速的性能测试

发表评论

表情:
评论列表 (有 0 条评论,460人围观)

还没有评论,来说两句吧...

相关阅读

    相关 Scrapy爬虫框架介绍

    Scrapy简介 > Scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架。 可以应用在包括数据挖掘,信息处理或存储历史数据等一系列的程序中。 > 其最