setting里的USER_AGENT和DownloaderMiddleware里的useragent的区别

版权声明:凡由本人原创,如有转载请注明出处https://me.csdn.net/qq_41424519,谢谢合作 https://blog.csdn.net/qq_41424519/article/details/87890940

setting里的USER_AGENT是全局的变量,分配给spider的,美运行一次就分配一次,spider里的所有的request必须共享。

DownloaderMiddleware里的useragent是分配给每一个request的,可以覆盖前者。

猜你喜欢

转载自blog.csdn.net/qq_41424519/article/details/87890940