Categories


Tags


为什么我的网站中的一些私密网页也会被百度收录?

Baiduspider对网页的抓取,是通过网页与网页之间的链接实现的。

网页之间的链接类型,除了站点内部的页面链接之外,还有不同网站之间的互相链接。因此,某些网页即便通过您的网站内部链接无法访问到,但是,如果别人的网站上有指向这些页面的链接,那么这些页面还是会被搜索引擎所收录。

百度Spider的访问权限,和普通用户是一样的。因此,普通用户没有权限访问的内容,Spider也没有权限访问。之所以看上去某些访问权限限制内容被百度收录,原因有两点:

  A. 该内容在Spider访问时是没有权限限制的,但抓取之后,内容的权限发生了变化

  B. 该内容有权限限制,但是由于网站安全漏洞问题,导致用户可以通过某些特殊路径直接访问。而一旦这样的路径被公布在互联网上,则Spider就会循着这条路径抓出受限内容

如果您不希望这些私密性内容被百度收录,一方面可以通过Robots协议加以限制;另一方面,也可以通过反馈中心反馈给我们进行解决。


Public @ 2020-06-19 15:55:52

为什么我的网站以前收录很快,现在收录慢了?

有可能是以下原因导致的: 1. 竞争激烈。随着网站数量的增加,同一关键词下的竞争越来越激烈,搜索引擎的收录速度也会相应变慢。 2. 网站内容质量下降或更新不频繁。如果网站的内容质量下降或更新不够频繁,搜索引擎可能会认为网站不再重要或者对于用户不再有用,因此收录速度会变慢。 3. 网站被黑客攻击或存在违规内容。如果网站被黑客攻击,或者存在违反搜索引擎收录规则的内容,搜索引擎可能会减缓对该网站的

Public @ 2023-05-28 05:00:19

Google的奇怪规则:URL不能以.0结尾

前两天SEOMoz发现和解决了一个很奇怪的Google收录问题。SEOMoz有一个网页,是关于他们举办的Web 2.0大奖(Web 2.0 Awards)。URL是:http://www.seomoz.org/web2.0这个奖在网上还挺受欢迎,链接很多,URL是PR7。而且一直以来在Google搜索”Web 2.0 Award”时都排在第一位。但前几天SEOMoz发现搜索Web 2.0 Awar

Public @ 2013-10-31 15:34:40

更多您感兴趣的搜索

0.454118s