Python爬虫-Scrapy基础

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/qq_29027865/article/details/83756232

Scrapy的安装

依照顺序安装如下依赖库,如下:

  1. wheel
    pip install wheel
  2. lxml
    http://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml
  3. PyOpenssl
    https://pypi.python.org/pypi/pyOpenSSL#downloads
  4. Twisted
    http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
  5. Pywin32
    https://sourceforge.net/projects/pywin32/files/pywin32/Build 220/
  6. Scrapy
    pip install scrapy

安装成功后,通过在cmd的指定路径下输入

scrapy startproject hello

可以在当前的路径下创建一个名为hello的项目
接着在文件中含有.cfg文件的目录下,通过cmd输入:

scrapy genspider quotes quotes.toscrape.com

即初始创建完成

猜你喜欢

转载自blog.csdn.net/qq_29027865/article/details/83756232