其实目前URL已经不在被蜘蛛很重视了。日益发展的互联网,纯静态的网页肯定是满足不了用户的需求,当然,在flash站中,我们都会做伪静态供蜘蛛抓取!
什么是一个标准化的URL?
很多情况下,我们认为以下这几个链接都指向同一个页面:
但是从URL发送请求并返回网页内容的过程来看,这些URL都是互不相同的。对于上述URLS,Web服务器完全可以返回完全不同的内容。当这些URL所对应的内容都一样时(一般情况下都一样的),谷歌需要从上述URLS中选一个具有代表性的,而忽略其余的。那么这个被谷歌选择了的URL,就是一个标准化的URL。
谷歌URL标准是什么呢?
一般情况下,谷歌根据被外链的数量来判断。采用多的,则是标准化URL。
如果我想告诉谷歌我的标准URL,可采用301重定向进行URL标准化。
URL标准化处理之后,可以使搜索引擎更好跟踪你的网站,也就是你网站唯一的跟踪点,这样可以使网站的权重更加的集中。使得搜索引擎只要跟踪网站的一个页面,就可以了。这样在用户输入其他的地址时,同样搜索引擎会自动的跳转到你设定的标准页。
很多时候,纠结于带或不带http://,亦或纠结于 / 或 - ,其实是无关紧要的。Seo做久了就会发现,真正的功夫不是在URL上。当然,这里南京网站设计公司不能误导seo们,当确定了URL的形式,就不要去更改它,让蜘蛛来适应我们的规则即可。