亿万教师注册python运用httplib结合threading多线程抓取数据时会有部分线程报错

RT如图,我发明只需总线程数量一多就会有部分线程抛出十分(比如说开40线程),但是假如线程调的比较低(比如说3个任务行列步队,每个行列步队5个线程,也便是统共15个线程)那么就不会有错误,这是神马情况啊?
这个有什么办法可以处理吗?

看你堆栈的最后一行,题目应该是关于有的URL
DNS无法分析
这种情况你单线程应该也会报错
只不过单线程跑的比较慢 可以没跑到
发起你打印url
看看出题目的URL究竟是哪些

(看完/读完)这篇文章有何感想! 亿万先生注册的分享…

发表评论

姓名 *
电子邮件 *
站点