Categories


Tags


大量爬虫进入了我的网站

邵俊凡 提问于 3年 之前

zac大神,我发现在一段时间里有大量的爬虫进入我的网站,这有什么影响,这种行为会降低我网站的权重吗?会驱逐高质量的百度蜘蛛吗?我百度发现恶意爬虫会增加流量,增加网站负担。如果是,我该怎么应对?

2 个回答

Zac 管理员 回答于 3年 之前

假设你说的是非搜索引擎的恶意蜘蛛/爬虫,来采集内容之类的。

有大量恶意蜘蛛,对SEO没有直接影响,和搜索引擎眼里网站的权重一点关系都没有。搜索引擎并不会知道你网站上有没有恶意蜘蛛,也不会影响百度蜘蛛的抓取频率,完全没有关系。

当然,如果服务器不够强,或者恶意蜘蛛量太多,拖慢服务器,甚至页面打不开了,那肯定会影响真正搜索引擎的抓取。不过,其它任何因素导致的服务器响应慢,都会导致这个结果。

如果恶意蜘蛛数量在每天几万之内,服务器就出问题了,那说明需要换服务器了。如果超过这个量,可以屏蔽恶意蜘蛛(如果你确认是恶意的话)。

刘馨文 回答于 3年 之前

北京旅游景点:如果我这样发的话算不算一条外链,或者是不是引蜘蛛到我的网站啊?

Zac 管理员 回复于 3年 之前

网址已经删了。即使不删除也不是一个外链。

来源:SEO每天一贴 Zac 昝辉


Public @ 2014-05-27 15:53:56

site网址出现一些非法链接

,可以用spam防止技术来屏蔽掉这些非法链接。具体步骤如下: 1、使用robots.txt文件 Robots.txt是一个约定好的文件,它告诉搜索引擎蜘蛛哪些网页不可以被抓取,也就是通过向网站根目录放置一个名为“robots.txt”的文件,来给网站的搜索引擎蜘蛛搜索内容的时候进行一个指令,这些指令可以指定搜索引擎蜘蛛不可以索引的网页地址。 2、使用.htaccess文件 Htaccess

Public @ 2023-02-27 17:00:52

百度工程师回答SEO有关问题

昨天参加了2017年MADCon大会,收获良多。20号下午参加了百度专场,并主持了一个圆桌对话,问了一些征集到的SEO有关问题,趁现在还没忘记,记录一下。百度方面回答问题的主要是百度搜索主任架构师谭待和搜索产品架构师荣蓉。征集的问题比较多,由于时间关系,没能全部问到,挑比较有代表意义的问了下面这些问题。下面总结的有些回答是私下交流的,并不全部是圆桌对谈里的。读者菊部问:老师好,在https下 百度

Public @ 2016-10-08 16:04:46

网站首页排名比内页排名要低

JK 提问于 3年 之前标题写得有点含糊、笼统,此处再详情说明一下。这里的网站首页是指——我们的个人网站或者企业网站的首页。这里的内页是指——行业门户网站的内容展示页面。大家可能会发现,我们在百度搜索一些行业关键词的时候,排名最靠前的,都是一些门户网站的内容展示页面,而我们的个人网站或者企业网站的首页排名却很靠后,哪怕再怎么努力再怎么优化,还是难以撼动这些门户内页的排名。另外,现在更为突出的是,百

Public @ 2014-09-24 15:53:48

速度如此重要为何贵站不备案,以至于打开速度如此之慢?

我作为一个语言人工智能,并没有网站,因此无法回答此问题。但是,备案并不一定会直接影响网站的打开速度。网站打开速度可能受多个因素的影响,如服务器质量、网站设计和排版、网站内容大小等。如果您遇到了网站打开缓慢的问题,建议您联系网站管理员或者尝试使用更快的网络连接。

Public @ 2023-04-19 12:00:11

更多您感兴趣的搜索

0.432469s