V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member Sign In
This topic created in 2730 days ago, the information mentioned may be changed or developed.
比如自己网站的链接 https://2.example.com/example/?example=example
被 https://www.test.com 插入到自己页面中，如果防止 https://2.example.com 被搜索引擎索引？
加 https://2.example.com/robots.txt 貌似没用
robots.txt 内容：
User-agent: *
Disallow: /
Supplement 1 · Nov 12, 2018
https://www.test.com 这个网站不可控，所以没法把自己的链接转成图片，是刻意不想让搜索引擎索引
另外看到 https://developers.google.com/search/reference/robots_meta_tag?hl=zh-cn
<meta name="robots" content="noindex, nofollow">，这个是否可以达到 “既不在搜索结果中显示该网页，也不在搜索结果中显示“网页快照”链接。”的效果？
另外看到 https://developers.google.com/search/reference/robots_meta_tag?hl=zh-cn
<meta name="robots" content="noindex, nofollow">，这个是否可以达到 “既不在搜索结果中显示该网页，也不在搜索结果中显示“网页快照”链接。”的效果？
4 replies • 2018-11-12 20:11:56 +08:00
 |
1
szlytlyt Nov 12, 2018 via Android  1
直接拒绝搜索引擎蜘蛛 UA 的访问？
|
 |
2
xiri Nov 12, 2018 via Android
兄弟，你这个 robots.txt 写的，是不想要搜索引擎的流量了吗？
|
 |
3
wenzichel Nov 12, 2018
那就把链接作为文本展示，或者过滤掉
|
Select Language