找回密码
 注册
【阿里云】2核2G云新老同享 99元/年,续费同价华为云精选云产品特惠做网站就用糖果主机Jtti,新加坡服务器,美国服务器,香港服务器
查看: 844|回复: 6

搜索引擎蜘蛛爬行规律探秘之二:外链是否有时效性

[复制链接]
发表于 2011 年 12 月 30 日 16:33:26 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。

您需要 登录 才可以下载或查看,没有账号?注册

×


  《搜索引擎蜘蛛爬行规律探秘之一蜘蛛如何抓取链接》写完距今天已经20多天了,本来想一直写下去呢,但是写完第一篇之后,忽然没有了思路。今天跟朋友们说起来了外链的时效性,也就是说外链会不会失效。

  本文不再讨论理论相关的内容了,而是会举一些例子来证明第一篇文章,同时也说一下链接的时效性吧。

  首先,外链所在页面被删除了,外链是否有效?

  答案外链所在页面删除了依然是有效。
  我在博客中国的博客(可能是因为流量超标在2006年被删除了)早就已经被删了,但是百度依然有快照。今天看了下首页的快照已经没有了,但是文章页面还存在。看快照日期可以看到是2006年,甚至更久的。

  也就是虽然页面被删除了有5年之久,但是百度的快照没有删除,那么你说这里面的链接蜘蛛会不会爬呢?

  我感觉应该是会爬的,而且我在博客网的这个博客是有一个域名A的链接的,当时只是做了个跳转到博客首页。后来在我启用域名A做博客的时候,立马就获得了一个很好的权重,而且文章很容易被秒收。相信这个5年前的链接起到了不少的作用。

  第二,如果外链所在页面搜索引擎没有了快照,外链是否有效呢?

  答案可能会出乎很多人的意料,外链所在页面没有了快照依然还可以有效。原因可以查看我在蜘蛛如何抓取链接这篇文章里写的,蜘蛛抓取页面之后,会把内容和链接分开,链接也就是URL会加入一个网址索引库,而蜘蛛爬行是从这个网址索引库出发的。

  第三,那么外链对于搜索引擎是否有时效性呢?

  很明显应该是有时效性的。那么我就猜测一下外链失效的原因吧,应该会有两个原因:那就是外链所在页面被删或者链接被删。

  1.针对页面被删的情况,搜索引擎应该会继续爬行这个页面上的外链,直到这个页面404一定时间后,会给搜索引擎网址索引库一个命令删除这个外链。

  2.而对于页面更改的情况,搜索引擎应该也会爬行这个外链,直到这个含有这个外链快照在搜索引擎内部彻底删除,会给网址索引库一个命令删除这个外链。因为含有外链的页面根据情况会保存N个时期的快照,这就是为什么有时候搜不同的词,网页的快照不同。

  总之,外链是有时效性,但是链接修改或者页面被删除并不代表无效了。当然搜索引擎内部会有一个复杂的计算,过程不会像我说的这么简单。如果有什么不同意见请直接在本文下面留言,大家互相讨论。

Jgwy.Com - Free Web Hosting Guide & Directory In China since 2001! Jgwy.Net-Jglt.Net
发表于 2012 年 3 月 3 日 12:19:18 | 显示全部楼层
【腾讯云】2核2G云服务器新老同享 99元/年,续费同价
努力学习当中····
Jgwy.Com - Free Web Hosting Guide & Directory In China since 2001! Jgwy.Net-Jglt.Net
回复

使用道具 举报

发表于 2012 年 3 月 12 日 18:47:40 | 显示全部楼层
{:soso_e204:}
Jgwy.Com - Free Web Hosting Guide & Directory In China since 2001! Jgwy.Net-Jglt.Net
回复

使用道具 举报

发表于 2012 年 3 月 12 日 18:48:09 | 显示全部楼层
{:soso_e204:}
Jgwy.Com - Free Web Hosting Guide & Directory In China since 2001! Jgwy.Net-Jglt.Net
回复

使用道具 举报

发表于 2012 年 3 月 13 日 12:54:45 | 显示全部楼层
留个脚印证明自己还活着
Jgwy.Com - Free Web Hosting Guide & Directory In China since 2001! Jgwy.Net-Jglt.Net
回复

使用道具 举报

发表于 2012 年 5 月 13 日 11:57:32 | 显示全部楼层
路过,来看看!顺便留下个脚印
Jgwy.Com - Free Web Hosting Guide & Directory In China since 2001! Jgwy.Net-Jglt.Net
回复

使用道具 举报

发表于 2012 年 5 月 13 日 14:45:54 | 显示全部楼层
【腾讯云】2核2G云服务器新老同享 99元/年,续费同价
说的好 来学一下咯
Jgwy.Com - Free Web Hosting Guide & Directory In China since 2001! Jgwy.Net-Jglt.Net
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|金光论坛

GMT+8, 2024 年 11 月 17 日 12:47 , Processed in 0.019537 second(s), 21 queries .

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表