Scrapy笔记

 Lan   2020-03-01 12:01   89 人阅读  0 条评论

快捷启动.py

from scrapy.cmdline import execute
execute(['scrapy', 'crawl', 'ZhiLianZhaoPin'])

创建Scrapy爬虫项目

调出 CMD,输入如下代码并按【Enter】键,创建 Scrapy 爬虫项目:

scrapy startproject stockstar

其中 scrapy startproject 是固定命令,stockstar 是工程名字。

settings.py中关闭遵循robot

ROBOTSTXT_OBEY=False

创建Scrapy爬虫

scrapy genspider stock quote.stockstar.com

                                       名称         允许爬取域名

本文地址:https://www.lanol.cn/post/17.html
版权声明:本文为原创文章,版权归 Lan 所有,欢迎分享本文,转载请保留出处!

 发表评论


表情

还没有留言,还不快点抢沙发?