网站抓取了一些不存在的目录跟页面，本站倒是一个都不抓取是怎么回事？
微信 悬赏
网站抓取了一些不存在的目录跟页面，本站倒是一个都不抓取是怎么回事？要如何做才能让百度来抓取本站页面，一个多页了啥都没抓取，谜一样。。。
以下抓取页面都不存在，另外网站例如新闻页面生成的文章在根目录是没有的，应该是动态的，这是否导致都不抓取了呢？
回答：你确定蜘蛛是真的百度蜘蛛吗？99.99%的概率是假蜘蛛，不是真的！
来源：A5营销
白叶涵虚 提问于 3年 之前ZAC老师，我曾发现在URL中使用拼音作为目录层级对排名有一定影响，后来也获得了百度人员的确认，但是关于具体应用方面一直没有找到好的方法。例如是使用标题首字母还是声母，全拼的话可能会影响URL的长度所以是否直接使用关键词的全拼而不是完整标题的全拼等。想请问您对这方面有什么看法？1 个回答Zac 管理员 回答于 3年 之前我个人通常不建议在URL中使用拼音，尤其是最终产品
fanb 提问于 3年 之前Zac老师你好，关于小语种网站的URL静态化问题，我准备使用和网页关键字相同的URL，但是小语种中经常会有对应语种的特殊字符，比如西班牙语中的ú ，这样的字符，这样的字符用在URL中，想请问下是否会影响Google的收录呢 ? 谢谢老师1 个回答Zac 管理员 回答于 3年 之前URL中包含非英文单词或字符不会影响Google收录、排名。即使是非拉丁语系的字符，如中文，
网站做的越大，蜘蛛越多。可是有时候会发现：网站被各种搜索引擎的蜘蛛抓的服务器都快崩溃了，严重的占用了服务器的资源。这个时候要怎么办呢？百度蜘蛛：Baiduspider谷歌蜘蛛：Googlebot360蜘蛛：360SpiderSOSO蜘蛛：Sosospider神马蜘蛛：YisouSpider微软必应： BingBot在国内，我们不要把这几个蜘蛛使用robots.txt屏蔽就可以了，至于其他的，都可以
很多SEO从业人员在刚刚接触这个行业的时候，经常会问——百度蜘蛛是什么？我们可以理解为百度蜘蛛就是用来抓取网站链接的IP，小编经常会听到百度蜘蛛来的太频繁，服务器要被抓爆了，如果你无法识别百度蜘蛛，你怎么知道是百度蜘蛛抓爆的呢？也有出现百度蜘蛛都不来了的情况，还有很多站点想得到百度蜘蛛的IP段，想把IP加入白名单，但无法识别百度IP。那怎么才能识别正确的百度蜘蛛呢？来来来，只需做着两点，就能正确识
