V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  warcraft1236  ›  全部回复第 61 页 / 共 125 页
回复总数  2491
1 ... 57  58  59  60  61  62  63  64  65  66 ... 125  
2019-02-04 09:38:29 +08:00
回复了 warcraft1236 创建的主题 Python Scrapy 的 RetryMiddleware 不生效,求教
@meik2333 if 里边的是 Scrapy 的代码,我没有改,但是经过你的提醒,我终于发现我确实看不到 log,因为我配置的 loglevel 是 warn,多谢
2019-02-03 23:33:24 +08:00
回复了 sagaxu 创建的主题 职场话题 年终奖很失望
什么公司呀,需要测试吗?
2019-02-02 15:57:46 +08:00
回复了 laboum92 创建的主题 职场话题 快 30 而立,第一次遇到这么大的职场打击
@insert000 我司招开发,你有意向不?
2019-01-30 10:02:55 +08:00
回复了 warcraft1236 创建的主题 Python 继承的父类的方法,我想修改部分逻辑,有什么好的方法吗
@zwzmzd 学习了,我去看看
python 感兴趣,不知道有啥项目
2019-01-29 18:39:36 +08:00
回复了 warcraft1236 创建的主题 Python 继承的父类的方法,我想修改部分逻辑,有什么好的方法吗
@dendi009 重写岂不是得复制粘贴代码之后,再修改,他的方法有很多 import,我懒得挨个 import 了
2019-01-29 17:43:50 +08:00
回复了 warcraft1236 创建的主题 Python 继承的父类的方法,我想修改部分逻辑,有什么好的方法吗
@mainlong 没懂
@wdytoya 然后呢?我只是问一下加班,至于?
2019-01-28 15:49:33 +08:00
回复了 kidlfy 创建的主题 Python pymongo 熟悉 mongo 的大佬帮忙看一下错误
pymongo 好像不这么用吧......
2019-01-25 13:40:29 +08:00
回复了 warcraft1236 创建的主题 Python Mac 系统下, Scrapy 自动走系统代理?
@15399905591 我代理是全局的
想问问北京这边加班多吗?
2019-01-25 09:47:05 +08:00
回复了 warcraft1236 创建的主题 Python Mac 系统下, Scrapy 自动走系统代理?
@15399905591 但是命令行中其他命令并不会走代理啊
2019-01-25 09:46:40 +08:00
回复了 enginex 创建的主题 职场话题 什么类型的公司加班相对少一些
@Vauman 我问得是有没有测试岗位........
我当时在新加坡的时候,用新加坡的手机号注册的新加坡的 paypal,然后绑定的国内的 VISA,过了阿里云的验证
2019-01-24 02:35:00 +08:00
回复了 warcraft1236 创建的主题 Python 请教 Linux 下 Scrapy 内存占用非常大的问题
@wind3110991

我这个推测应该不准,我修改了配置文件,改成了 ip 域名,都是 3 个线程,依然内存会爆
2019-01-24 02:11:25 +08:00
回复了 warcraft1236 创建的主题 Python 请教 Linux 下 Scrapy 内存占用非常大的问题
@wind3110991 我自己分析发现,减少并发数量可以降低内存,推测是由于服务器网速快,所以默认的 16 个线程都能满速下载,然后下载的时候,scrapy 用的 requests 应该设置的 chunked 比较大
2019-01-24 02:10:07 +08:00
回复了 warcraft1236 创建的主题 Python 请教 Linux 下 Scrapy 内存占用非常大的问题
@wind3110991 配置用的默认的,阿里云就是最低配的那个 1 核 1G 内存 Ubuntu 18 的系统
2019-01-23 20:25:04 +08:00
回复了 enginex 创建的主题 职场话题 什么类型的公司加班相对少一些
@Vauman 需要测试吗
1 ... 57  58  59  60  61  62  63  64  65  66 ... 125  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3627 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 43ms · UTC 10:30 · PVG 18:30 · LAX 02:30 · JFK 05:30
Developed with CodeLauncher
♥ Do have faith in what you're doing.