• 全都有综合资源网

    分享赚钱

    一个专业的免费资源网

    每天更新100+优质资源

  • 手机版二维码

    随时手机查素材

  • 扫描二维码

    加入官方微信群

彻底禁止百度等搜索引擎收录的方法

技术文章 每日更新
2024-7-31 18:16 66人浏览 0人回复
原作者: 全都有综合资源网 来自: 全都有综合资源网 收藏 分享 邀请
摘要

建立一个网站的主要目的是优化搜索引擎排名,实现互联网营销,但在特殊情况下,仍然满足搜索引擎的需要不想包括 rdquo,这是最终的,有效的解决方案,禁止百度和其他搜索引擎。 1.Robots.txt只能抓取,不能收录。 ...

  建立一个网站的首要目标是优化搜索引擎排名,实现互联网营销,但在特别情况下,仍然满足搜索引擎的需要不想包括 & rdquo,这是终极的,有用的处理计划,制止百度和其他搜索引擎。
1.Robots.txt只能抓取,不能收录。
很多人以为。百度已经制止发送短信。这是个严重的误解,机械人。TXT 文件可以告诉搜索引擎哪些目录和文件可以被抓取,哪些不能。究竟证实,即使你制止搜索引擎抓取根目录,你也不能制止来自百度和其他搜索引擎的机械人。假如一个网站外链更多,根基上不能经过一般手段在百度制止,淘宝就是一个典型的例子(淘宝 robots.txt 设备为制止根目录,但主页仍然包括在内)。
2,判定user_agent制止百度等搜索引擎经过Nginx拜候,实现制止收录。
  既然我们不能停止间接经过制止抓取,那就爽性制止利用百度蜘蛛等搜索引擎可以拜候,思绪是:判定user_agent,假如是百度蜘蛛、谷歌机械人等搜索引擎的user_agent,就返回403大概404,这样百度等搜索引擎就会自己以为中国这个企业网站信息没法完全翻开门生大概已经不存在,自然情况也就不会收录了。

完全制止百度等搜索引擎收录的方式8509 作者:全都有综合资本网 来历:全都有综合资本网 公布时候:2024-7-31 18:16

Nginx的设置代码以下:

layui-box layui-code-view" style="margin-top: 0px; margin-bottom: 10px; padding: 9.5px; -webkit-tap-highlight-color: rgba(0, 0, 0, 0); white-space: pre-wrap; overflow-wrap: break-word; box-sizing: border-box; position: relative; font-size: 13px; border: 1px solid rgb(204, 204, 204); background-color: rgb(245, 245, 245); color: rgb(51, 51, 51); font-family: Menlo, Monaco, Consolas, "Courier New", monospace; overflow: auto; line-height: 1.42857; word-break: break-all; border-radius: 4px;">

code

  1. if ($http_user_agent ~* "qihoobot|Baiduspider|Googlebot|Googlebot-Mobile|Googlebot-Image|Mediapartners-Google|Adsbot-Google|Feedfetcher-Google|Yahoo! Slurp|Yahoo! Slurp China|YoudaoBot|Sosospider|Sogou spider|Sogou web spider|MSNBot|ia_archiver|Tomato Bot")
  2.         {
  3.                 return 403;
  4.         }

经过curl模拟搜索引擎抓取,测试以上代码有用,实现了完全制止百度收录!


©版权免责声明
1、本站所有资源均来自用户上传及互联网。 如有侵权,请联系站长!
2、分享目的仅供大家学习交流。 下载后必须在24小时内删除!
3、不得用于非法商业目的或违反国家法律。 否则,后果自负!
4、本站提供的源代码、模板、插件等资源不包含技术服务。 敬请谅解!
5.如果出现无法下载、无效或有广告的链接,请联系管理员寻求帮助!
6、本站资源价格仅用于赞助,所收取的费用仅用于维持本站日常运营!
7、如果遇到加密压缩包,请使用WINRAR解压。 如果遇到无法解压的加密压缩包,请联系管理员!
8、由于精力有限,很多源代码无法详细测试(解密),部分源代码无法区分为病毒或误报,所以没有进行修改。 请在使用前进行筛选。

路过

雷人

握手

鲜花

鸡蛋
热门教程
专业的免费源码资源分享平台
每天更新100+资源

招募版主发工资

  • 官方在线客服

    QQ客服:红颜

    点击交谈

    在线客服:良子

    点击交谈

    在线客服:闵月

    点击交谈
  • 上海市虹口区海伦中心B座4F4055-4056室

  • 手机扫码查看手机版

    手机查找资源更方便

  • 扫一扫关注官方微信公众号

    加入官方微信

一个专业的免费源码资源互联网分享平台 ©2001-2024 https://www.douyouvip.com全都有综合资源网( 豫ICP备2024057239号-1 )赞助会员|网站地图 HTML
全都有综合资源网,WordPress主题PHP源码,PHP网站源码,网站模板,软件源码,网站源码免费下载,免费网站源码,网站源码模板,免费网站源码下载,wp免费源码,wp免费主题下载,PHP企业网站源码,软件源码下载