最后，和楼主说一句，现在这个大环境还敢搞爬虫的，而且搞的技术还不错的，基本要么就是大公司的核心团队有法务保护的那种，要么就是黑产的，无论是哪一种，都不是楼主你随便在公开论坛能花点小钱请到的。普通的程序员现在还敢玩爬虫的，基本就是刚出来混没经验也没人教的愣头青。

@herozzm 你的法律知识应该更新：
公开数据，不等于授权数据。明白吗？人家数据是公开的，但是人家那是在特定条件下的公开，比如，web 访问，app 访问，不代表允许你拿爬虫去爬。更进一步，搞清楚 [授权] 的概念，那些搞爬虫的公司，把别人的数据拿回来干嘛的？自己心里没点数吗？只是看看而已？不见得吧，爬虫最危险的问题，就在于你拿了别人的数据，做了什么，这几乎是所有被判刑的爬虫人员最后无法抵赖的，人家没授权你用它的数据干这个，你干了，等死，尤其这一点是很多干爬虫的程序员完全控制不了的——他们往往就傻乎乎的帮人把数据采集了，人家转头把数据干了非法的用途，程序员是要背锅的。为啥前面那么多说 [肯定刑] 的，这 tm 都是血的教训，程序员傻乎乎的写代码，结果出事了立刻就被卖了。

最后， [gov 现在都强调资源数据共享] 人家强调的是政务部门之间的数据共享，人家可不是允许你拿爬虫去爬人家的数据。

@ShadowFiendYan 大量出现重复数据其实就是已经被发现定位了，人家的技术团队针对性的在吐伪装数据给你，识相点要么自己收手，你继续对抗下去，对面肯定会准备线下搞你的。

爬虫和反爬在现在国内环境下已经是政治问题，不要以为用技术能解决政治问题，这是很多技术人员的错觉。

@zhady009 问任何一个专业点的教练，都会告诉你，三分练，七分吃。且这一切的前提是充足的休息。所以我现在看到说要人去运动的就烦，大前提都不说，叫现在大部分处于亚健康，休息不足的人去运动？嫌别人命长？

@ShadowFiendYan 你的法律知识应该更新，法律边界非常清晰：

爬一切没有得到 [授权] 的数据都是非法的！！！
爬一切没有得到 [授权] 的数据都是非法的！！！
爬一切没有得到 [授权] 的数据都是非法的！！！

明白吗？都是非法，授权给你的数据还需要你去爬吗？你直接找数据持有方拿硬盘拷不方便吗？还是说你是和百度一样专业做搜索引擎的？能严格执行爬虫 bot 协议？

另外法律早就定的很清楚，法人逃不掉，做开发的程序员一样要完蛋。就看对面搞不搞你，一旦搞你，证据到位的情况下一搞一个准

@herozzm 今日头条是多大的背景？你有多大背景？人家被抓住了有整个律师团队可以搞庭外和解，你的背景做得到吗？

恕我直言，现在大部分人需要的不是运动，而是足够的休息，他们往往连足够的休息都没有，在这种前提下运动就是奔着猝死去的

@thetbw 有一说一 jenkins 启动确实要占这么大的内存

5 到 8 口的企业交换机？我印象里企业交换机至少几十口起步的。

不说笑，楼主优先查一下网线，我个人认为网线问题可能更大一些，普通民用交换机，如果流量不打满，不至于出现丢包，断开现象，更大概率是网线或者网线头子有问题

@statement
对，我现在也意识到这点了，localstorage 不是缓存，但是它是什么呢？我把 chrome 的那个详细清理数据的界面呼叫出来，我发现它根本没有把 localstorage 单独列出来。这就很有意思


@QHKZ 这个我看到了，我也是今天才注意到，localstorage 是单独在调试工具里列出来

@diy886 说这些话没啥意义的，这类公司之所以可以这么干，根源在于他真的能找得到，至少目前这么干还是没问题。如果真找不到的时候它自然就死了。因此作为打工的，批判公司没啥意义。作为公司，批判打工的也没啥意义。大家各凭本事在这个市场混，混不下去自然就死了。

这个年景，大学学历要么过硬，要么你在学校就有特别突出的产品，否则就靠刷题，想进大厂很难了。现在不是过去那几年了，只要是毕业生大厂直接要

@chaleaochexist 为什么流行？因为它背后是 google ，爹好就牛逼，这是开源界定律之一（并不完全绝对，但是至少是必要条件之一）。否则 RPC 这东西人月神话时代就已经有基本原理结构的东西，不会一直到 GRPC 才火起来

个人建议，日常通勤电驴是消耗品，不易买太贵的

@urnoob 查了一下这个变化是 java9 变的，然后我试验后发现没啥不同，java8 和 java11 的结果是一样的，我目前怀疑问题是出在 java 如何读取 byte[]到字符的这个过程，对于根本无法转换为可见字符的 byte[] 数据部分，不知道 java 是怎么操作的，原本我想的是，char 就是个双字节数据啊，那 java 每次读两个 byte 不就行了吗？又没有可变长问题。可为啥这样一进一出，数据就不一样了呢？