首页 注册 登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
150530
V2EX  ›  程序员

毒瘤盗版网站

  •  1      
  •   150530 · 2023-09-07 08:24:23 +08:00 · 10158 次点击
    这是一个创建于 441 天前的主题，其中的信息可能已经有所发展或是发生改变。
    由于英语不好不常用谷歌，百度自然成为首选，用了浏览器插件可以屏蔽大部分广告，但是经常有一些盗版爬虫网站排名特别靠前，经常出现在搜索第一页，这种网站的爬虫每时每刻都在爬数据，几乎每分钟都会爬取新文章，导致搜索时不知道哪个关键词就命中了特别烦人，而且盗的文章很多图片都显示不出来，代码格式更是一坨一坨的，一点看下去的欲望都没有。

    我专门去百度搜了一下，这种网站还真不少，都是换皮的，特别是第一个这个淘嘟嘟，搜索关键词 dockerhub mycat pxc 第一页都有它。另外问一下有没有方法可以屏蔽这种网站，最好在百度中不会展示出来

    http://www.taodudu.cc
    https://www.xdnf.cn
    https://www.rstk.cn
    http://www.mfbz.cn
    https://www.xjx100.cn
    https://www.syrr.cn
    http://www.hqwc.cn
    https://www.exyb.cn
    http://dgrt.cn
    http://www.cbww.cn
    第 1 条附言  ·  2023-09-07 09:43:08 +08:00

    去看了一下权重，这也太逆天了，前3名数量已经超过了博客园，月收录更是接近1亿

    周收录 月收录 总关键词 前3名 第一页 第二页 第三页 第四页
    淘嘟嘟 2110万 9980万 286491 14617 70620 48582 59950 44364
    博客园 8530 40万 606627 14045 96420 102397 67048 161588
  • 爬虫
  • 百度
  • 网站
  • 盗版
    68 条回复  •  2023-09-09 12:56:17 +08:00
    littiefish
        1
    littiefish  
       2023-09-07 08:27:26 +08:00 via iPhone
    确认挺烦，有时候十几页都是一样的内容。
    目前只能改变关键词来处理
    JayZXu
        2
    JayZXu  
       2023-09-07 08:29:45 +08:00
    https://greasyfork.org/zh-TW/scripts/14178
    用这个脚本，然后 block 这些站点或者添加到屏蔽列表就行了
    dfkjgklfdjg
        3
    dfkjgklfdjg  
       2023-09-07 08:30:24 +08:00
    所以退而求其次用 bing.com 不好吗……
    150530
        4
    150530  
    OP
       2023-09-07 08:31:53 +08:00
    @JayZXu 多谢 我去了解下
    llllker
        5
    llllker  
       2023-09-07 08:35:28 +08:00   ❤️ 7
    油猴脚本：AC-baidu-重定向优化（带过滤、Block 的功能）

    https://greasyfork.org/en/scripts/14178
    +
    浏览器扩展：终结内容农场（有内容农场屏蔽规则）
    https://github.com/danny0838/content-farm-terminator
    llllker
        6
    llllker  
       2023-09-07 08:37:53 +08:00
    tampermonkey 脚本：AC 重定向优化（带过滤、Block 的功能）

    https://greasyfork.org/en/scripts/14178
    +
    扩展：终结内容农场（有内容农场屏蔽规则）
    https://github.com/danny0838/content-farm-terminator
    150530
        7
    150530  
    OP
       2023-09-07 08:39:15 +08:00
    @justxiaoxiao 感谢分享
    ChenSino
        8
    ChenSino  
       2023-09-07 08:41:10 +08:00   ❤️ 4
    谷歌也不影响搜中文啊
    gdb
        9
    gdb  
       2023-09-07 08:45:14 +08:00
    @justxiaoxiao 你这个插件不错啊！多谢分享，我也去 Firefox 下面试用一下看看。
    ExplodingFKL
        10
    ExplodingFKL  
       2023-09-07 08:46:30 +08:00   ❤️ 2
    卧槽，这种真 tm 恶心

    usedTo404
        11
    usedTo404  
       2023-09-07 08:47:02 +08:00   ❤️ 16
    “由于英语不好不常用谷歌，百度自然成为首选”
    vialon17
        12
    vialon17  
       2023-09-07 08:48:33 +08:00
    firefox 有个插件 block site,可以屏蔽网站，也可以防止小朋友偷偷玩 4399 ，
    拿来用还挺方便的，还支持正则，我喜欢屏蔽 csdn 微信用户（一般都是盗文）。
    vincentzhu
        13
    vincentzhu  
       2023-09-07 08:52:22 +08:00   ❤️ 1
    谷歌可以用中文搜索的
    gdb
        14
    gdb  
       2023-09-07 08:53:40 +08:00
    @justxiaoxiao 试用了一下，Google 里面的重定向跳转可以优化掉（直接显示网址），但是 baidu 搜索结果里面的不行。。。还是显示 baidu.com 开头的一大串字符串。。。
    sukinee
        15
    sukinee  
       2023-09-07 08:55:59 +08:00
    uBlacklist
    weilongs
        17
    weilongs  
       2023-09-07 09:04:38 +08:00
    我记得之前有个搞培训的人还特意教大家怎么搞这种网站变现。
    ltfree
        18
    ltfree  
       2023-09-07 09:04:51 +08:00
    看了下，这些垃圾网站权重还挺高的
    Terry3366
        19
    Terry3366  
       2023-09-07 09:20:29 +08:00
    其实把 谷歌搜索也能用中文搜
    ncepuzs
        20
    ncepuzs  
       2023-09-07 09:40:46 +08:00
    只看了下第一个，还是个企业备案……
    liuidetmks
        21
    liuidetmks  
       2023-09-07 09:42:07 +08:00
    不理解，为什么腾讯阿里也做内容农场，大公司是没有项目做了吗
    uiosun
        22
    uiosun  
       2023-09-07 09:46:39 +08:00
    @liuidetmks 美国做内容农场的公司，估值几个亿

    这是门大生意啊兄弟，你怎么会觉得“没有项目才来做内容农场”呢
    0littleboy
        23
    0littleboy  
       2023-09-07 09:47:40 +08:00
    为什么英文不好不能用谷歌
    volatileSpark
        24
    volatileSpark  
       2023-09-07 09:54:49 +08:00   ❤️ 1
    能用谷歌就代表可以科学上网，可以上网，就一定能用 poe 。现在问谷歌、百度获取一些问题解答远不如进入 poe 问 Chat-GPT 或者 Claude 。
    snitfk
        25
    snitfk  
       2023-09-07 09:57:41 +08:00   ❤️ 2
    google 搜中文也很方便，不要在屎坑里去翻东西了。
    webworker
        26
    webworker  
       2023-09-07 10:06:28 +08:00
    @justxiaoxiao 不错 安排上了
    dif
        27
    dif  
       2023-09-07 10:08:21 +08:00
    我英语不好，但还是用 google ，先用关键字搜索到结果，然后打开页面，点击翻译。虽然是机翻，但也能看懂七七八八。
    tpual
        28
    tpual  
       2023-09-07 10:14:55 +08:00
    直接广告插件安排上啊，广告终结者，百度前几页全干掉了，干干净净
    Tiller
        29
    Tiller  
       2023-09-07 10:21:36 +08:00
    用必应吧，起码比谷歌好点
    54xavier
        30
    54xavier  
       2023-09-07 10:21:39 +08:00
    有没有手机上 Safari 能用的屏蔽插件？要被百度的拼多多烦死了，每次检索都有拼多多，点开就跳转拼多多，真的超级烦。试过好几个屏蔽 AD 的插件，都屏蔽不掉。
    Tiller
        31
    Tiller  
       2023-09-07 10:21:48 +08:00
    @Tiller 呸，是比百度好点
    Stoney
        32
    Stoney  
       2023-09-07 10:40:38 +08:00 via iPhone
    其实 Google 搜中文也会有这些垃圾站，所以尽量不要中文了
    winglight2016
        33
    winglight2016  
       2023-09-07 10:57:05 +08:00   ❤️ 1
    每天一两个小时小时学习英语，半年后 lz 就可以用 Google 了，彻底解决问题可以节省多少时间？假设 lz 还能上 20 年班，跟百毒斗智斗勇浪费多少时间啊
    busterian
        34
    busterian  
       2023-09-07 11:02:53 +08:00
    英文不好就用百度是什么原理？ 哪怕翻不了墙，墙内也有 bing 和 F 搜可以用。自己喜欢待粪坑还嫌屎脏是什么逻辑
    sprite82
        35
    sprite82  
       2023-09-07 11:15:15 +08:00
    谷歌不能搜中文？
    liuidetmks
        36
    liuidetmks  
       2023-09-07 11:18:37 +08:00
    @uiosun 既然是大生意，也没见他们好好做，用户体验极差。
    作为市值几千亿的公司，网上到处爬人家内容，有点说不过去吧
    hpan
        37
    hpan  
       2023-09-07 11:23:29 +08:00
    百度没办法屏蔽垃圾网站，我们就只能屏蔽百度了
    yjd
        38
    yjd  
       2023-09-07 11:36:17 +08:00
    现在已经用 bing ，外网 google
    百度已经成为毒瘤
    psklf
        39
    psklf  
       2023-09-07 11:38:21 +08:00
    用百度，注定是吃屎
    Features
        40
    Features  
       2023-09-07 11:49:32 +08:00   ❤️ 1
    粪坑里找饭是不可取的
    llllker
        41
    llllker  
       2023-09-07 12:04:10 +08:00
    @gdb 以前还用过这个 anti redirect 的扩展，可以试试看行不行。

    https://greasyfork.org/zh-CN/scripts/11915-anti-redirect
    CEBBCAT
        42
    CEBBCAT  
       2023-09-07 13:34:33 +08:00
    > 由于英语不好不常用谷歌，百度自然成为首选
    我认为楼主需要反思一下这种思维
    zhenrong
        43
    zhenrong  
       2023-09-07 13:35:41 +08:00   ❤️ 1
    宁愿研究屏蔽脚本也不愿意换个搜索引擎吗，尊重祝福吧。
    vituralfuture
        44
    vituralfuture  
       2023-09-07 14:03:18 +08:00 via Android
    当你意识到中文和英文的信息差的时候，不管英文再烂都会努力学好。我以前就是这样，以前因为中文新闻要么正能量要么反贼，中立的太少，听说了 cnn 后每天看一篇 cnn 文章，一开始四十分钟才看完一篇，后面越来越快，现在看英文网站已经比较轻松了
    babyoung
        45
    babyoung  
       2023-09-07 14:23:29 +08:00 via iPhone
    @weilongs 有什么好的变现渠道吗
    akring
        46
    akring  
       2023-09-07 14:32:53 +08:00
    放下助人情节，尊重百度命运
    abelmakihara
        47
    abelmakihara  
       2023-09-07 15:01:52 +08:00
    说不定站长就在 V2EX 呢
    amlee
        48
    amlee  
       2023-09-07 15:09:57 +08:00
    op 请问下，你查权重是怎么查的？
    mortalbibo
        49
    mortalbibo  
       2023-09-07 15:11:43 +08:00
    @gdb 请问 google 重定向和内容农场有什么关系
    gdb
        50
    gdb  
       2023-09-07 15:59:45 +08:00 via Android
    @justxiaoxiao 好的，多谢，试过了，效果不错。

    其实我现在平时搜索也都不使用百度，百度的搜索结果质量实在是太差了，出来的结果多半都是没有用的这种广告链接。我其实都不知道这样的公司是靠什么生存的，就靠这种卖广告生存的吗，实在是有点过分。
    weilongs
        51
    weilongs  
       2023-09-07 16:31:19 +08:00
    @babyoung 没研究过，印象就是看过一个讲课人的博客写过类似这种文章，就是引流挂广告。然后再复制 N 多这种站点的思路。
    Jancy
        52
    Jancy  
       2023-09-07 16:36:38 +08:00   ❤️ 1
    感谢分享，我在给 op 添加几个：
    http://www.codenong.com
    http://www.1024sky.cn
    https://vimsky.com
    https://www.it1352.com
    https://www.coder.work
    http://t.zoukankan.com
    https://www.thinbug.com
    https://qa.1r1g.com
    Anivial
        53
    Anivial  
       2023-09-07 16:54:37 +08:00
    @usedTo404 有没有一种可能，谷歌的中文搜索也比百度好一万倍？
    Anivial
        54
    Anivial  
       2023-09-07 16:56:07 +08:00
    @usedTo404 原来是 OP 说的，抱歉了，确实挺逆天
    Byzliu
        55
    Byzliu  
       2023-09-07 16:56:15 +08:00 via Android
    这些还好，有的站群更恐怖，站群加起来几百上千万内容。
    Byzliu
        56
    Byzliu  
       2023-09-07 16:56:36 +08:00 via Android
    @amlee 站长工具或者爱站，搜就能搜到
    aelloncs
        57
    aelloncs  
       2023-09-07 17:34:26 +08:00   ❤️ 1
    由于英语不好不常用谷歌，百度自然成为首选；这真的是程序员说的话吗？
    feelinglucky
        58
    feelinglucky  
       2023-09-07 17:36:37 +08:00
    @Jancy 感谢，这些链接刚好用来安装好插件以后的准确性判断
    mortalbibo
        59
    mortalbibo  
       2023-09-07 18:57:46 +08:00
    @justxiaoxiao 请问 google 重定向和内容农场有什么关系,为什么还需要重定向插件
    wqq096737ink
        60
    wqq096737ink  
       2023-09-07 19:29:42 +08:00
    Bing
    kruskal
        61
    kruskal  
       2023-09-07 19:37:43 +08:00
    这些内容农场真是恶心
    5966
        62
    5966  
       2023-09-07 19:41:02 +08:00 via iPhone
    我手机浏览器里早没有百度书签了，一直谷歌。
    bruce0
        63
    bruce0  
       2023-09-07 19:47:14 +08:00
    Chrome 加 这个插件 uBlacklist 见一个 屏蔽一个
    llllker
        64
    llllker  
       2023-09-07 20:01:30 +08:00   ❤️ 1
    @mortalbibo ac 那个扩展可以 block 搜索结果
    blindlight1986
        65
    blindlight1986  
       2023-09-08 01:05:54 +08:00
    “由于英语不好不常用谷歌，百度自然成为首选” WTF, man????
    吃不来牛排，首选也不是吃奥利给啊。。。。。
    dito
        66
    dito  
       2023-09-08 02:02:19 +08:00 via Android
    必应不是很容易访问吗？这方面搜狗会不会也比百度强呢？
    pengtdyd
        67
    pengtdyd  
       2023-09-08 07:59:10 +08:00
    如果你觉的百度不够好，那就用插件去优化它，而不是抱怨。
    mortalbibo
        68
    mortalbibo  
       2023-09-09 12:56:17 +08:00
    @justxiaoxiao 搜噶，谢谢
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3015 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 29ms · UTC 14:18 · PVG 22:18 · LAX 06:18 · JFK 09:18
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.