Python中Scrapy的使用

创建Scrapy项目:

在cmd命令中一次输入一下内容 :

start scrapyproject 项目名

cd 项目名

scrapy genspider 文件名 网址(去掉http://)

运行文件:

在cmd命令中输入:scrapy crawl 文件名

或者在工程下新建一个文件,加入一下代码:

import os
import sys
from scrapy.cmdline import execute
data=os.path.abspath(__file__)#绝对路径
dir_file=os.path.dirname(data)#上一级
sys.path.append(dir_file)
execute(['scrapy','crawl','文件名'])

 

猜你喜欢

转载自blog.csdn.net/Li_peipei/article/details/81582917