V2EX › shiny 的所有回复 › 第 167 页 / 共 292 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 ... 163 164 165 166 167 168 169 170 171 172 ... 292

❮

❯

2016-03-04 15:31:51 +08:00

回复了 tinyproxy 创建的主题 › 问与答 › 微信 oAuth 抽风

有没有记录具体的错误代码

2016-03-04 02:14:52 +08:00

回复了 gzelvis 创建的主题 › Linux › 想把上线 linux 用于生产的服务器的某个文件夹与本地公司部门服务器也是 linux 的进行实时同步，有什么办法？

rsync 定时同步试过吗

2016-03-04 02:10:32 +08:00

回复了 JunyuMu 创建的主题 › NGINX › nginx 怎么配置 www 域名跳非 www 域名呢？

listen 80;
listen 443 ssl;
if ($server_port ~ 80) {
return 301 https://example.com$request_uri;
}

https 跳转

至于 www 的跳转我是建一个 server_name 为 www.example.com ，然后 return 301
你也可以对 $host 做判断再跳转。 google 搜下，很多 SO 的答案都有用。

2016-03-04 01:30:56 +08:00

回复了 gujiaxi 创建的主题 › 分享发现 › 原来现在小学就要教编程语言啊

小时候没教过 logo ，但是能翻到的编程书就两本，一本是 basic ，一本就是 logo

2016-03-04 01:13:20 +08:00

回复了 yuedingwangji 创建的主题 › 正则表达式 › 如何练习正则

写个模板引擎，并且坚持改 bug

2016-03-04 00:45:53 +08:00

回复了 miracleyao 创建的主题 › Java › 关于个人支付开发的流程

@ty0716 原来个体户也可以申请微信支付和支付宝支付啊

2016-03-04 00:39:50 +08:00

回复了 akaayy 创建的主题 › 问与答 › 搜狗微信的反爬虫规则是怎么样的？我每 2 分钟抓取一次可以吗？

@shiny 2014 年的策略现在可能过期了吧，我提供下当时的笔记吧：

一、现象分析
1. 如果没有完全模拟浏览器，会在访问数页之后进入 antispider 页面要求输入验证码
2. 复制当前浏览器 cookies 后，可以访问更多页数，但一段时间后还是会触发验证码
3. 清理该 cookies 后无需验证码又可以访问
4. 此系统属于搜狗平台化运维体系 http://wenku.baidu.com/view/1fa63e39b90d6c85ec3ac6c5.html

二、两处 cookies 注入点
1. 访问首页注入 cookie SUID 标识了一次会话
2. antispider 页面有两种类型，第一次触发时仅仅使用 javascript 注入 cookies SNUID ，表示此次访问的不是 spider ；第二次触发后显示验证码，但是只要重新访问首页获取新的 SUID ，就可以避免验证码识别或者更换 IP
3. 自行拼接参数发送请求，可能导致嫌疑程度增加
4. user-agent 含 spider/bot 的具有重大作案嫌疑，触发时直接返回 403

三、反屏蔽机制——尽量模拟浏览器
1. 涉及 cookies 注入的图片和网页都访问一遍
2. 使用 javascript 注入的 cookies 全部抓取一遍并 setCookie
3. 如果 antispider 页面（ http://www.sogou.com/antispider/）出现验证码，清理旧 cookies ，重新发起请求

EOF.

2016-03-04 00:11:34 +08:00

回复了 akaayy 创建的主题 › 问与答 › 搜狗微信的反爬虫规则是怎么样的？我每 2 分钟抓取一次可以吗？

2014 年的时候分析过并绕过了搜狗的微信反爬虫规则，无需换 ip 就能大规模采集。
只是采集来的微信内容很多有非法信息，被网警找过一次。

2016-03-03 21:48:23 +08:00

回复了 muyege 创建的主题 › 程序员 › 请问有人使用 phped 吗？

做了那么多年 PHP ，还是第一次听说这个编辑器。
想买，我可以帮你代付

2016-03-03 21:29:27 +08:00

回复了 terro 创建的主题 › 站长 › ICP 备案是主机备案还是域名备案？

@terro 你刚解析上去的域名还能正常访问的，但次数多了就会出现上面拦截那张图了。（按我前几年观察到的情况）

2016-03-03 21:05:52 +08:00

回复了 terro 创建的主题 › 站长 › ICP 备案是主机备案还是域名备案？

@terro 没有备案的域名无法放到国内主机上的 80 端口；备案是针对域名的。