V2EX › pubby 的所有回复 › 第 45 页 / 共 87 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 ... 41 42 43 44 45 46 47 48 49 50 ... 87

❮

❯

2016-04-25 16:28:05 +08:00

回复了 lls8672 创建的主题 › Python › 在用 scrapy 爬取天猫商品评价时，爬了几次后发现爬取不了了，在浏览器里打开需要输入验证码，怎么破？

@hadoop 可以的

一般安装了 rp-pppoe ，没有的话自己装一下

pppoe-setup 设置一下账号密码

ifup ppp0 拨号

重拨换 ip 用

ifdown ppp0 && sleep 5 && ifup ppp0

这些 vps 是这样的：
给你一个管理 ip 和端口，然后 ssh -p <端口> root@管理 IP 连上去拨号

拨号后 ppp0 上会有动态 ip

然后开个 socks5 或者 http 代理 (可能需要处理一下 iptables 规则)

本地用的时候记得连那个动态 ip : 代理端口

2016-04-25 14:22:30 +08:00

回复了 lls8672 创建的主题 › Python › 在用 scrapy 爬取天猫商品评价时，爬了几次后发现爬取不了了，在浏览器里打开需要输入验证码，怎么破？

降低访问频率！

1. 登录账号，每个账号用一个独立的代理 ip ，控制访问频率（大概 10 秒一次，出现验证码几率会降低）
2. 不登录账号，每个代理 ip 控制访问频率，需要很低频率才行，否则就不是验证码了而是直接让你登录，所以控制访问频率+切换 ip 吧。

2016-04-23 12:35:30 +08:00

回复了 vJianZhen 创建的主题 › Python › 豆瓣首页的动态流如何设计与实现？

@vJianZhen 可以看一下这个 http://www.infoq.com/cn/articles/three-people-background-team-and-billions-daily-release

“相册表写好了之后，会触发一个批处理的动作。这个动作就是去跟小王的每个好友说，小王有一个新的发布，请把这个发布插入到每个好友的时间线里面去。”

“这是一个单数据副本写扩散的过程。但是相对应的，读取就很简单了，每一个用户只需要读取自己的时间线表，就这一个动作就行，而不需要去遍历所有好友的相册表。”

2016-04-23 11:47:15 +08:00

回复了 vJianZhen 创建的主题 › Python › 豆瓣首页的动态流如何设计与实现？

redis 只是一种思路，因为常规数据库 IN (100 个 id) 的条件查询效率不高，不过 top1000 放内存表也是另外一种优化思路。

如果要最严谨的实现，那就是所有你关注的人的动态都要插入你自己的 timeline 列表

2016-04-23 11:27:05 +08:00

回复了 vJianZhen 创建的主题 › Python › 豆瓣首页的动态流如何设计与实现？

通常关注的人不会太多（比如 100 ），所以另外一个思路是我的 feed 表只有自己的数据，同时把 feed 中最新 1000 条（比如）放入 redis

然后一次性获取 100 人的 top1000 ，重排序就行了

2016-04-21 23:21:16 +08:00

回复了 snriud 创建的主题 › Android › Android 下有什么可以实现 Restful 的包吗？

@qgy18 劫持设备新应该对这种搞不定又会暴露自己的直接 TCP 回源

2016-04-21 22:41:05 +08:00

回复了 snriud 创建的主题 › Android › Android 下有什么可以实现 Restful 的包吗？

@qgy18 看来是劫持设备太老 :p

2016-04-21 22:32:07 +08:00

回复了 snriud 创建的主题 › Android › Android 下有什么可以实现 Restful 的包吗？

@qgy18 设备太老？

2016-04-21 21:27:26 +08:00

回复了 snriud 创建的主题 › Android › Android 下有什么可以实现 Restful 的包吗？

@zhgg0 这个问题，走 https 应该可以解决

2016-04-21 21:00:03 +08:00

回复了 mengjue 创建的主题 › 问与答 › 内网要如何架设 postfix 邮局？

relayhost = [smtp.mail.server]:25

smtp_sasl_auth_enable = yes
smtp_sasl_password_maps = hash:/path/to/sasl_passwd
smtp_sasl_mechanism_filter = plain, login

------- sasl_passwd -------
[smtp.mail.server]:25 user:password

记得 postmap /path/to/sasl_passwd 跑一下生成 sasl_passwd.map 文件

2016-04-21 20:53:42 +08:00

回复了 mengjue 创建的主题 › 问与答 › 内网要如何架设 postfix 邮局？

postfix 编译的时候记得加上 sasl 支持
可以支持需要认证的 smtp 进行 relay 的。

我就是 gitlab 通过 postfix 发信（ relay 到阿里云的邮件推送服务）

2016-04-21 17:43:00 +08:00

回复了 Liqianyu 创建的主题 › Android › 现在入手 Nexus 6p 合适吗？另已入手 Huawei P9

google store 母亲节便宜$50

2016-04-21 13:47:57 +08:00

回复了 cc959798 创建的主题 › 程序员 › 请问 IO 多路复用到底解决了什么问题？

select 是跨平台的，最原始的 io 多路复用
但是有 2 个主要限制： 1. 监控的文件描述符太少 2.效率太低，每次都要传入大量文件描述符

epoll , kqueue , I/O Completion Ports 都解决了这些问题

其实在 epoll 之前，还可以用 rt-signal ，用信号通知 IO 事件。

2016-04-21 13:14:14 +08:00

回复了 Mayuyu 创建的主题 › MySQL › insert 操作的时 AUTO_INCREMENT 的问题。

master-master 的方式，不是应该设这两个参数么？

A:
auto-increment-increment = 2
auto-increment-offset = 0

B:
auto-increment-increment = 2
auto-increment-offset = 1

auto-increment-increment=机器数 N
auto-increment-offset = 每台机器序号 [0,1,....,N-1]

2016-04-20 20:44:11 +08:00

回复了 wanttofly 创建的主题 › Android › 求助： Android ListView 嵌套 ListView 问题

有些追求极致性能的，会把原本大的 item 再拆成粒度更细的 item ，然后展开作为一个 list 数据绑定

比如
==================
a)头像，作者，时间
----------------------------
b)内容
----------------------------
c)评论 1
评论 2
d)更多
==================
头像，作者，时间
----------------------------
内容
----------------------------
评论 1
评论 2
更多
==================
.......

会预先处理好 a,b,c,d 四中数据类型，放到一个列表中

2016-04-20 20:31:07 +08:00

回复了 wanttofly 创建的主题 › Android › 求助： Android ListView 嵌套 ListView 问题

用一个 listview ，绑定的数据预先处理好回复类型（回复，还是回复的回复，或者是“查看更多”），然后每个 item 里根据不同类型展示不同 view

2016-04-15 18:26:44 +08:00

回复了 ptsa 创建的主题 › 问与答 › 有没有 64 位的 2g 以上内存千兆网卡最好支持 sata 我挂 lnmp 的类似树莓派的推荐

@UnisandK 这个可以做什么？性能怎么样

2016-04-15 12:42:34 +08:00

回复了 1password 创建的主题 › Google › 国内自建的邮件服务器往 Gmail 发邮件会不会收不到

不推荐自建，可以使用阿里云的邮件推送服务（每天每日 200 封免费），支持 smtp

但是阿里云发往 gmail 并没有加密传输，收到的邮件会提示 encryption: alibaba.com did not encrypt this message

所以，内容被审查很容易

2016-04-14 12:05:07 +08:00

回复了 xiaobubobo 创建的主题 › 问与答 › 为什么微信在海外年轻人市场占有率特别低？

我们的微信 H5 页面 1/5 流量来自马来西亚

2016-04-13 10:22:32 +08:00

回复了 tabris17 创建的主题 › 问与答 › IE11 不处理引用跨站脚本请求返回的 set-cookie？

P3P 头？

1 ... 41 42 43 44 45 46 47 48 49 50 ... 87

❮

❯