Home Sign Up Sign In
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
V2EX  ›  drymonfidelia  ›  全部回复第 78 页 / 共 88 页
回复总数  1743
1 ... 74  75  76  77  78  79  80  81  82  83 ... 88  
❮ ❯
2024 年 2 月 22 日
回复了 drymonfidelia 创建的主题 › 程序员 › Python aiohttp 异步 需要同时请求同域名下 8000 个 URL（对方网站无并发限制）把结果拼接返回，要求总耗时最短， 8000 个同时发还是先发 1000 个，不等待结果，间隔 0.1 秒再发下一批快？
没有 API 能一次性查多个商品库存
2024 年 2 月 22 日
回复了 drymonfidelia 创建的主题 › 程序员 › Python aiohttp 异步 需要同时请求同域名下 8000 个 URL（对方网站无并发限制）把结果拼接返回，要求总耗时最短， 8000 个同时发还是先发 1000 个，不等待结果，间隔 0.1 秒再发下一批快？
上货=>补货
2024 年 2 月 22 日
回复了 drymonfidelia 创建的主题 › 程序员 › Python aiohttp 异步 需要同时请求同域名下 8000 个 URL（对方网站无并发限制）把结果拼接返回，要求总耗时最短， 8000 个同时发还是先发 1000 个，不等待结果，间隔 0.1 秒再发下一批快？
@locoz 具体场景不方便公开，但差不多就是库存监控，有 90000 个商品，上货时间没办法提前知道，我们永远比同行慢 3 秒
2024 年 2 月 22 日
回复了 drymonfidelia 创建的主题 › 程序员 › Python aiohttp 异步 需要同时请求同域名下 8000 个 URL（对方网站无并发限制）把结果拼接返回，要求总耗时最短， 8000 个同时发还是先发 1000 个，不等待结果，间隔 0.1 秒再发下一批快？
对方套的是 akamai 的 cdn ，测试出来 azure 耗时最短
2024 年 2 月 22 日
回复了 drymonfidelia 创建的主题 › 程序员 › Python aiohttp 异步 需要同时请求同域名下 8000 个 URL（对方网站无并发限制）把结果拼接返回，要求总耗时最短， 8000 个同时发还是先发 1000 个，不等待结果，间隔 0.1 秒再发下一批快？
爬的是国外的站，对方的站套了 cdn 不知道是什么机房，已经选了测试出来的耗时最短的云买服务器爬了
2024 年 2 月 22 日
回复了 drymonfidelia 创建的主题 › 程序员 › Python aiohttp 异步 需要同时请求同域名下 8000 个 URL（对方网站无并发限制）把结果拼接返回，要求总耗时最短， 8000 个同时发还是先发 1000 个，不等待结果，间隔 0.1 秒再发下一批快？
@so1n 并发 8000 个要 3 秒多的话才能全爬完一组 8000 个，但是单请求一个耗时只有 0.15 秒
业务实时更新接近 9 万个 URL 的数据，同行不知道怎么做到的延迟不到一秒，我们用了 10 台服务器都做不到
2024 年 2 月 21 日
回复了 drymonfidelia 创建的主题 › 程序员 › 生产环境日志多大 rotate 一个文件合适？现在是 1GB rotate 一个文件， gzip 压缩完每个文件一百多 MB，一天会有 4~5 个文件（压缩前 4~5GB）
@darksheep9527 文件名里有创建时间呀，只要知道发生问题的时间还是可以一次定位到日志文件
2024 年 2 月 21 日
回复了 drymonfidelia 创建的主题 › 程序员 › 生产环境日志多大 rotate 一个文件合适？现在是 1GB rotate 一个文件， gzip 压缩完每个文件一百多 MB，一天会有 4~5 个文件（压缩前 4~5GB）
@ladypxy 我们产品不同时间活跃用户量差异很大，不适合按时间
2024 年 2 月 21 日
回复了 drymonfidelia 创建的主题 › 程序员 › 生产环境日志多大 rotate 一个文件合适？现在是 1GB rotate 一个文件， gzip 压缩完每个文件一百多 MB，一天会有 4~5 个文件（压缩前 4~5GB）
@feelinglucky 已经发生过不知道多少次日志撑爆硬盘了 要不我们能跑就行的代码连压缩都不会做
2024 年 2 月 21 日
回复了 WangLiCha 创建的主题 › 职场话题 › 等待工作的项目间歇期应该做点什么？
在我们公司 这个时候你上班看 av 都没人说你
2024 年 2 月 21 日
回复了 M4ster 创建的主题 › 程序员 › GitHub 用户来领空投： TOP 5k 项目的贡献者可领取价值 $200 空投
估计修 typo 工程师狂喜
我有两次高 star 项目的贡献 差一次
2024 年 2 月 21 日
回复了 Heimerdinger 创建的主题 › 职场话题 › 为什么互联网上对阿里程序员敌意这么大？？
自己 google ant design 圣诞节事件 删库事件
企业级的产品和玩具一样做
2024 年 2 月 21 日
回复了 trioon 创建的主题 › Windows › 解锁 bitlocker 过程中会丢失数据吗？
对 bitlocker 这层来说根本没有文件的概念
2024 年 2 月 21 日
回复了 trioon 创建的主题 › Windows › 解锁 bitlocker 过程中会丢失数据吗？
不可能 bitlocker 是按块加密的 要是有数据丢了整个盘都挂载不上 不存在只丢几个文件的情况
2024 年 2 月 20 日
回复了 killerzhangsan 创建的主题 › Telegram › 100 人民币或等值 USDT-解决 telegram bot 开发问题
@killerzhangsan botfather 100%也是这么做的，每次点击按钮的时候把用户 id 字段和 callback_data 随便找个地方存起来，每次收到文字消息的时候检查是否有存起来的 callback_data ，有就进行对应操作，然后把存起来的 callback_data 删掉。为了防止用户很久以前点的按钮忘记了，通常还要存一个点击时间，超过一段时间就废弃。
2024 年 2 月 20 日
回复了 killerzhangsan 创建的主题 › Telegram › 100 人民币或等值 USDT-解决 telegram bot 开发问题
@killerzhangsan 我知道你的意思了，在数据库里存用户最后一次点的按钮名字啊，不想用数据库就用 redis
微信公众号也是这么开发的
2024 年 2 月 20 日
回复了 killerzhangsan 创建的主题 › Telegram › 100 人民币或等值 USDT-解决 telegram bot 开发问题
@killerzhangsan 你发消息的时候给每个按钮起个名字，点击事件里就会带上用户点的按钮的这个名字，你就可以知道是哪个按钮了
1 ... 74  75  76  77  78  79  80  81  82  83 ... 88  
❮ ❯
About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   2331 Online   Highest 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 27ms · UTC 08:07 · PVG 16:07 · LAX 01:07 · JFK 04:07
♥ Do have faith in what you're doing.