##都是可以pip进行直接安装
1.grequests异步请求(爬取更高效)
import grequests
urls = [
'http://www.heroku.com',
'http://python-tablib.org',
'http://httpbin.org',
'http://python-requests.org',
'http://kennethreitz.com'
]
rs = (grequests.get(u) for u in urls)
htmls=grequests.map(rs)
for html in htmls:
print(html.text)
2.Virtualenv python虚拟环境搭建(可以隔离环境)
直接找个地方,在cmd下直接运行 virtualenv ***(虚拟空间文件夹名称),运行是cmd进入文件scripts里运行activate文件,这样就算进入虚拟环境了,你可以创建项目和安装任何库