初学python,在写爬虫的时候希望通过代理来抓取数据,防止本机IP被封,于是开始使用自定义opener。
问题来了,既然同一个进程的多个线程内存共享,那么调用urllib2.install_opener之后,是否意味着这个进程中的所有urllib2的open请求都会用同一个opener来实现?
如果希望分开使用不同的opener的话是不是只能考虑多进程了。。?
Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号
拥有18年软件开发和IT教学经验。曾任多家上市公司技术总监、架构师、项目经理、高级软件工程师等职务。 网络人气名人讲师,...