标签搜索

Scrapy笔记

Lan
Lan
2020-03-01 / 0 评论 / 254 阅读 / 正在检测是否收录...
温馨提示:
本文最后更新于2020年03月01日,已超过574天没有更新,若内容或图片失效,请留言反馈。

快捷启动.py

from scrapy.cmdline import execute
execute(['scrapy', 'crawl', 'ZhiLianZhaoPin'])

创建Scrapy爬虫项目

调出 CMD,输入如下代码并按【Enter】键,创建 Scrapy 爬虫项目:

scrapy startproject stockstar

其中 scrapy startproject 是固定命令,stockstar 是工程名字。

settings.py中关闭遵循robot

ROBOTSTXT_OBEY=False

创建Scrapy爬虫

scrapy genspider stock quote.stockstar.com

                                       名称         允许爬取域名

0

评论 (0)

取消