fsd010's recent timeline updates fsd010's recent timeline updates |
fsd010V2EX member #65058, joined on 2014-06-14 13:50:09 +08:00 |
| python 爬虫释放资源相关问题 Python • fsd010 • Jan 2, 2016 • Lastly replied by fsd010 | 8 |
fsd010's recent replies
Jan 2, 2016 Replied to a topic by fsd010 › Python › python 爬虫释放资源相关问题 |
@Daniel65536 我问一下哈~如果按我原来的写法 requests.post 循环 1000 次，就建立 1000 个链接？如果采用 session 的方法可以复用链接不需重新建立连接？
Jan 2, 2016 Replied to a topic by fsd010 › Python › python 爬虫释放资源相关问题 |
@ratazzi 那是得每次请求后中断连接？还是指一个进程就一个链接？
Jan 2, 2016 Replied to a topic by fsd010 › Python › python 爬虫释放资源相关问题 |
@imn1 刚刚试验下， ctrl+c 没有中断连接，还保持，重启进程链接流量继续传输，可能传输的容量有限制，循环累积下很大就报错，线程不多就一个
Jan 2, 2016 Replied to a topic by fsd010 › Python › python 爬虫释放资源相关问题 |
@imn1 服务器那边无法接触到，这边代码上也没有做保持连接的做法，就默认 requests.post 就在这样
Jan 2, 2016 Replied to a topic by cyneuzk › Python › 新学爬虫，想请大家帮忙看下 |
我想问下，服务器连接池有限，怎样做到请求后释放资源？新手求解
Select Language