突破搜索引擎robots.txt限制:让搜索引擎给你的网站做外链

所属分类: 网站运营 / 建站经验 阅读数: 125
收藏 0 赞 0 分享

我们知道搜索引擎的产品线很长,多个产品之间总不可能完全完美地配合,因此在robots.txt的限制收录那里就产生了一个可以被利用的漏洞。

原理分析(以搜狗为例)

搜狗针对各个搜索引擎,对搜索结果页面进行了屏蔽处理。其中“/sogou?”、“/web?”等路径均是结果页面的路径,那么,会不会有这样一种情况?搜狗存在其他的搜索结果页面路径,但是在robots.txt中却没有申明屏蔽?为了验证这一猜想,我们到百度中搜索搜狗。

突破搜索引擎robots.txt限制:让搜索引擎给你的网站做外链(2)

我们可以看到其中“/sie?”、“/sgo?”均为搜狗搜索结果页面的路径,但是在robots.txt文件中却没有被申明屏蔽!即是说这样路径的页面时允许被搜索引擎收录,如果这样的页面的搜索结果全部都是自己的网站呢?那么就实现了让搜索引擎给自己网站做外链的效果!

那么问题来了?如果让搜索结果全部都是自己的站点呢?很自然地就会想到站内搜索!具体寻找站内搜索参数的方式请自行搜索相关资料,此处直接说明结果:搜狗的站内搜索参数为insite,那么组装成这样一个网址:

http://www.sogou.com/sgo?query=SEO&insite=meeaxu.com

这个网址时可被收录的、这个页面的所有搜索结果均是指定网站的,将类似的网址在互联网上进行传播,蜘蛛爬行到之后最终会入库建立索引,最后达到了我们的目的:让搜索引擎给自己的网站链接。

写在最后

这种方法的时效性不高,很多人都使用之后就会被修复。之所以要将原理清楚地描述出来,是为了描述黑帽方法的发现过程。黑帽并不是简单地做什么站群、群发外链什么的,更多的是利用搜索引擎本身的漏洞来进行优化。本文仅仅是示例了一个非常简单的黑帽方法发现过程,更多大神都非常低调,其发现的方法也并未在互联网上传播。本文仅仅是为了让大家更了解黑帽,并非鼓励大家使用黑帽的方式来进行网站优化,不仅伤害用户也为互联网带来了更多污染。我希望大家更多地去考虑用户体验,去配合搜索引擎,同样能够达到最终目的。

更多精彩内容其他人还在看

网站在运营期间还能够进行采集?如何正确采集?

网站采集者在采集时,通常都是指定头尾特征从哪到哪过滤,那么网站在运营期间还能够进行采集?如何正确采集?下面就为大家详细介绍一下,一起来看看吧
收藏 0 赞 0 分享

如何挑选、修改、优化模板 让您的网站吊炸天

今天小编就为大家分享如何挑选、修改、优化模板,并且让您的网站吊炸天,这篇文章对于初期建站的朋友很有帮助,推荐过来,一起来学习吧
收藏 0 赞 0 分享

浅谈HTML5页面怎么才能发挥出更大的价值?

你难道还没有考虑使用HTML5? 当然我猜想你可能有自己的原因;它现在还没有被广泛的支持,在IE中不好使,或者你就是喜欢写比较严格的XHTML代码,今天小编为和大家一起浅谈HTML5页面怎么才能发挥出更大的价值,来看看吧
收藏 0 赞 0 分享

申请沃通的免费SSL证书的步骤详解

这篇文章主要介绍了申请沃通的免费SSL证书步骤详解,高安全性的SSL协议在网站中的应用还是比较广泛的,需要的朋友可以参考下
收藏 0 赞 0 分享

使用七牛云存储的镜像功能和免费流量来加速网站

这篇文章主要介绍了使用七牛云存储的镜像功能和免费流量来加速网站的方法,但是同时也要注意百度的SEO相关问题是否与镜像的使用相关,需要的朋友可以参考下
收藏 0 赞 0 分享

架设网站初期的一些成本和备案方面的经验建议

这篇文章主要介绍了建站初期一些基本方案上的选择建议,包括成本以及备案和域名等等琐碎的方面,需要的朋友可以参考下
收藏 0 赞 0 分享

Google Container Engine上申请和使用Docker容器的教程

这篇文章主要介绍了Google Container Engine上申请和使用Docker容器的教程,国内实际使用时要注意一下网络连通性,需要的朋友可以参考下
收藏 0 赞 0 分享

如何让你的网站网页更加吸引人?增强网页设计吸引力的方法

如何让你的网站网页更加吸引人?本文就给大家详细介绍下增强网页设计吸引力的方法,感兴趣的朋友们可以过来看看
收藏 0 赞 0 分享

在Vultr VPS主机上安装使用Windows Server的教程及评测

这篇文章主要介绍了在Vultr VPS主机上安装使用Windows Server的教程及评测,Vultr VPS使用KVM虚拟机软件,文中对其日本节点做了一些相关测试,需要的朋友可以参考下
收藏 0 赞 0 分享

站长大神进阶必备的九项工具介绍

这篇教程是向脚本之家的朋友介绍站长大神进阶必备的九项工具,对于建站的站长来说,是非常值得来了解的,好了,下面跟随小编来看看吧
收藏 0 赞 0 分享
查看更多