「http代理」Python-Scrapy 代码样例（一）

　　http代理使用提示

　　1.http/https网页均可适用

　　2.scrapy不是python原生库，需要安装才能使用:pip install scrapy

　　3.在第一级tutorial目录下运行如下命令查看结果：scrapy crawl kdl

　　Scrapy项目目录

　　运行命令：scrapy startproject tutorial新建Scrapy项目，创建包含下列内容的tutorial目录

　　tutorial/

　　scrapy.cfg#项目的配置文件

　　tutorial/#该项目的python模块。之后您将在此加入代码

　　__init__.py

　　items.py#项目中的item文件

　　pipelines.py#项目中的pipelines文件

　　settings.py#项目的设置文件

　　spiders/#放置spider代码的目录__init__.py

　　...