服务器是网站生存的基础,1、做国内站点就要优先选择国内服务器

  • 栏目:软件 时间:2020-05-07 22:09
<返回列表

做网站的基础还是硬件设施,不管是选择虚拟主机还是、云主机、独立服务器。

随着网站访问人数变多,对服务器的负载量变大。因此网站经历了几次服务器更换。因为服务器的变动,如果处理不好,对SEO流量会有不同程度的影响。避免遇见服务器变动类的问题不清楚如何处理,搜罗了一下资料,并结合自己的一些经验来谈谈服务器对SEO的影响,以及在服务器出现变动时,SEO方面的应对办法应该如何处理。

解决因服务器而导致的蜘蛛抓取失败

• 作者 奕杉其 • 2012年01月29日10:34 •

服务器是网站生存的基础,不论是什么原因造成的服务器封禁,都直接影响搜索引擎的抓取,影响网站的用户体验,不利于seo工作的展开。重庆seo奕杉其将以自己的亲身经历,结合网络上一些朋友对这类问题的分析,总结出造成服务器封禁的三点主要原因:
一、服务器不稳定
现在的服务器多如牛毛,价格也各不相同,质量方面也是相差甚远,站长们往往在选择的时候都是“只认价不认质”, 有的空间商为了节省资源,故意屏蔽掉spider(蜘蛛)的IP,导致spider抓取失败,网站页面就无法被搜索引擎收录。
解决方法:选择有实力的正规空间商,尽可能保证您的网站稳定。服务器和空间的稳定性需要一定的技术实力来保障,一些没有实力的空间商,可能无力提供良好的服务,服务的稳定性无法保证。我们可以很形像的打个比喻:如果将“人”比喻为网站内容,那么服务器就是我们的“家”,它为我们挡风避雨,为我们的生存提供了一个优良的环境,而服务器的好坏将影响我们所能承受的风险。我想,谁都不愿意住在没有安全保障的屋子里,拿自己的生命开玩笑,同理,网站也是如此!如果您现在的服务器不理想,有必要另选时,请暂时让旧服务器能够使用一段时间,并且做301跳转,尽量减少更换服务器带来的一系列损失。
二、人为操作失误 对搜索引擎蜘蛛认识不够,对一些冒充搜索引擎spider的IP无法正确判断,继而误封搜索引擎IP。这样会导致搜索引擎不能成功抓取网站,无法成功抓取新网页,以及将之前已经成功抓取并收录的页面判定为无效链接,然后搜索引擎将会对这些死链接进行清除,继而网站页面收录减少,最终导致网站在搜索引擎的排名下降。
解决方法:正确认识各搜索引擎蜘蛛,而搜索引擎使用的 IP 地址会随时发生变化,为确保能够正确识别各搜索引擎IP,您可以使用DNS反查方式来确定抓取来源的IP是否属于正规搜索引擎,防止误封。
例如查Baiduspider:在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspide的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
$ host 123.125.66.120
120.66.125.123.in-addr.arpa domain name pointer
baiduspider-123-125-66-120.crawl.baidu.com.
host 119.63.195.254
254.195.63.119.in-addr.arpa domain name pointer
BaiduMobaider-119-63-195-254.crawl.baidu.jp.
三、保护性的偶然封禁。
1、如果网站的访问量过大,超过自身负荷,服务器会根据自身负荷进行保护性的偶然封禁。这种封禁是短暂性的,只要访问量下降到服务器的承受范围之内,那么服务器就会正常工作。
2、还有一种情况是spider造成的,搜索引擎为了达到对目标资源较好的检索效果,蜘蛛需要对您的网站保持一定量的抓取。搜索引擎会根据服务器承受能力,网站质量,网站更新等综合因素来进行调整, 建立一个合理的站点抓取压力。但是会有一些例外,在压力控制不好的情况下,服务器会根据自身负荷进行保护性的偶然封禁。
解决方法:1、如果是访问量造成的压力,那么恭喜你,说明你的网站已经拥有可观的访问人数,我们就应该升级服务器,来满足不段增长的访问量。2、如果是spider造成的,我们可以采用如下方式来减轻spider对服务器产生的压力:A、利用robots文件,屏蔽掉不想被spider抓取的页面。B、采用nofollow标签,屏蔽不想被spider爬行的链接。C、页面中较长的CSS、JS代码移到外部文件。D、删减多余代码。应当注意的是,以上两种情况在返回的代码中尽量不要使用404,建议返回503(其含义是“Service Unavailable”)。这样spider会过段时间再来尝试抓取这个链接,如果那个时间站点空闲,那它就会被成功抓取了。
最后,希望站长尽量保持站点的稳定,对于暂时不想被搜索引擎抓取的页面,使用正确的返回码告知搜索引擎,如果确实不想被搜索引擎抓取或者索引,可以写robots信息告知。
作者:奕杉其
来源:重庆seo
文章链接:本文来自

1、做国内站点就要优先选择国内服务器,毕竟海外服务器延迟和可靠性没有那么高。

先上一张简单的搜索引擎蜘蛛抓取简易图,方便理解下文。

2、服务器的稳定性,只有保证服务器稳定性才能谈得上用户体验,不然都不稳定怎么让那些搜索引擎的蜘蛛来抓取呢,也可以用对应的搜索引擎蜘蛛抓取工具进行检测维护。

搜索引擎蜘蛛抓取

3、服务器的设置也是很重要的,如果有些页面还没有测试好就丢到线上返回404,那么被蜘蛛抓取到404就会认为这个页面失效从而丢弃,这个就很不利了。在其他异常情况下可以返回502这样状态码,好让蜘蛛下一次在来抓取。

一、服务器对SEO的影响

文章由爱资料原创本文地址:

1.服务器的配置对网站速度会有影响:

配置低的服务器会影响网站打开速度。网站打开速度慢对搜索引擎蜘蛛抓取速度会有影响,单位时间内抓取量就会相对少。不利于收录。以下简单普及下服务器配置方面的几个知识点。

(1)带宽:带宽越大,速度越快。联想一下,你家装了4M的网络,与装了50M网络的区别。就能瞬间秒懂。

(2)单/双/多线:如果你是针对本地用户的,可以选择单线路服务器,但双线路服务器一般会优于单线服务器。双线路服务器=电信网通双线路接入。北方用网通的多,南方用电信的多。假如你的用户是遍及南北,此时选择双线路服务器会更适合一些。

(3)内存:服务器内存的大小会影响运行速度。就如电脑的内存,手机的内存一般,容量大的肯定要比容量小的运作速度快。

延伸问题:

* 如何测试服务器速度

(1)通过 ping.chinaz.com,输入网址,便可了解到速度。

(2)点击 开始——>运行—-> CMD——ping 网址

2.服务器稳定性对搜索引擎蜘蛛抓取频次的影响

服务器如果经常宕机则会影响到搜索引擎蜘蛛访问网站的频次。举个栗子,开了一家面包店,一周有3天是关门的。一周有3次要吃“闭门羹”。作为顾客,你还会去吗。同样的道理,每次蜘蛛来访问你的网站时都出现宕机的情况。那么,访问频次当然会相应的减少。访问频次的减少,优质内容再多都没用。因为不来,就没有所谓的抓取。

3.服务器正确的设置很关键

新来的运维哥对我说,最近有个搜索引擎蜘蛛来得特别勤快对服务器造成的压力比较大,把它的IP封了吧。我一看,倒吸一口气——那可是Baiduspider的IP!瞪着眼对他说:封了,吃啥饭?还要不要流量?

与SEO相关的服务器设置有这些:

在看之前先了解这几个术语:

UA封禁:即为用户代理(User-Agent),服务器通过UA识别访问者的身份。当网站针对指定UA的访问,返回异常页面(如403,500)或跳转到其他页面的情况,即为UA禁封。

IP封禁:IP禁封是指限制网络的出口IP地址,禁止该IP段的使用者进行内容访问。而UA禁封则是针对服务器通过UA(用户代理)识别身份后的用户进行指定的跳转。

Http状态码:状态代码(也称作错误代码),指为服务器所接收每个请求(网页点击)分配的 3 位数代码。多数有效网页点击都有状态代码 200("正常")。"网页未找到"错误会生产 404 错误。

看完解释后,来了解下如何设置服务器才有利于SEO。

* UA封禁:主要是使用Robots,在Robots文件中,别误把搜索引擎UA给封禁了,否则会影响抓取。不清楚Robots是什么可以自行百度。

设定正确的页面HTTP状态码:

* 此前网站存在一批垃圾页面,全部做成不能打开的状态。但是页面状态码没有返回404,而是返回200,而且每天还有蜘蛛大量去抓取。好家伙,从抓取量分配的角度来看,就极大的浪费了蜘蛛抓取量,同时还造成蜘蛛的误解,认为网站存在大量重复的页面。

* 服务器过载或者临时维护时,无法处理请求时,请返回503,而不是404。搜索引擎蜘蛛对503的解读是网站临时关闭,某个页面暂时不能访问,过段时间会再回来抓取。如果是做了404,搜索引擎则可能删除了页面。

4.服务器支持url重写

这个很关键,主要是从动态URL与静态URL角度上来思考。如果动态URL上存在多个参数,建议对URL进行静态化处理,避免搜索引擎蜘蛛掉入黑洞去。浪费抓取。如果发现自己的服务器没有URL重写的功能,可以与服务商联系进行配置。

最后,如果更换了服务器,记得到百度站长平台进行设置

步骤1

步骤2

上一篇:将针对发布恶劣诱导类广告的页面进行打击,《秀丽江山之长歌行》全集 下一篇:没有了

更多阅读

服务器是网站生存的基础,1、做国内站点

软件 2020-05-07
做网站的基础还是硬件设施,不管是选择虚拟主机还是、云主机、独立服务器。 随着网站访问...
查看全文

将针对发布恶劣诱导类广告的页面进行打

软件 2020-05-06
吸引眼球的形态诱导用户点击非法广告,为了改善用户体验以及引导行业生态向积极健康的方...
查看全文

Illyes在Google官方博客上发了一篇帖子,

软件 2020-05-06
首先当然是网站反应速度越快越好了,如果网站都打不开更不要说越好体验了。 一月份时,...
查看全文

友情链接: 网站地图

Copyright © 2015-2019 http://www.koi-bumi.com. 韦德体育有限公司 版权所有