联系我们 - 广告服务
您的当前位置:官网首页 > 资讯 > 热评 >

对python多线程与global变量详解

来源: 编辑: 时间:2019-08-15
导读: 今天早上起来写爬虫,基本框架已经搭好,添加多线程爬取功能时,发现出错:比如在下载文件的url列表中加入200个url,开启50个线程。我的爬虫…竟然将50个ur......

今天早上起来写爬虫,基本框架已经搭好,添加多线程爬取功能时,发现出错:

比如在下载文件的url列表中加入200个url,开启50个线程。我的爬虫…竟然将50个url爬取并全部命名为0.html,也就是说,最后的下载结果,是有1个0.html,还有1-150。下面是我的代码:

x = str
 #x为给下载的文件命的名
 filepath = "e://wgetweibao//"+x+".html"
 try:
 wget.download
 theguardian_globle.g+=1
 print x+" is downloading..."
 except:
 print "error!"
责任编辑:

打赏

取消

感谢您的支持,我会继续努力的!

扫码支持
扫码打赏,你说多少就多少

打开支付宝扫一扫,即可进行扫码打赏哦

上一篇:网站URL的SEO价值有哪些?
下一篇:没有了

网友评论:

在“\templets\demo\comments.htm”原来的内容全部删除,插入第三方评论代码,如果不需要评论功能,删除comments.html里面的内容即可
推荐使用友言、多说、畅言(需备案后使用)等社会化评论插件

Copyright © 2018 博天堂918国际娱乐博天堂918国际娱乐-搏天堂918娱乐在线 All Rights Reserved Power by DedeCms
本站所有资讯来源于网络 如有侵权请联系QQ:9490489
Top