关于爬虫爬回来的数据用什么方式最好和主站保持同步呢？

This topic created in 4651 days ago, the information mentioned may be changed or developed.

譬如我将海dao湾的链接爬回来，要怎么才能做到和它保持爬后的更新呢？实时监控最新添加的信息？

1 replies • 1970-01-01 08:00:00 +08:00

yangqi

Aug 19, 2013

海到弯的连接很少更新吧

就不停的爬，遇到已有的就更新就行了吧