Categories

Tags

robots协议

　Robots协议（也称为爬虫协议、机器人协议等）的全称是“网络爬虫扫除规范”（RobotsExclusionProtocol），网站经过Robots协议通知查找引擎哪些页面可以抓取，哪些页面不能抓取　　是查找引擎的一部分来定位和索引互联网上的每个可能答复查找恳求的网页，一般只在评论robots的HTML标签或许robots.txt文件的时分运用。

 Public @ 2010-10-17 15:26:25

超文本

超文本（Hypertext）是一种比普通文本具有更弹性的文本形式，即通过超链接将文本和其他形式的内容（如音频、视频、图像等）连接在一起。用户可以通过这些超链接自由地跳转至相关的内容，使文本具有更加直观、交互性的特点。超文本技术主要应用于网络上的文本交互，如网页浏览、电子邮件、电子书等。它不止于简单的文字，同时可以包含图片、音频、视频等内容。最常用的超文本技术之一是HTML（超文本标记语言）。

 Public @ 2023-06-08 06:50:07

浅谈404问题

今天为什么要说一下404问题呢,最近看case过程中发现个很有意思的网站，该网站被灌了大量的垃圾信息，被其发现后及时地进行了删除，这一点是值得肯定的。通常情况下，正常网站将自动返回404状态码，搜索引擎进行更新并删除，避免对网站用户及搜索引擎带来负面影响。但问题来了，该网站只删除了内容，没有任何主体内容的页面被保存了下来，未做404处理。当然，存在一类网站只删除内容后返回正常200状态码，提醒一句

 Public @ 2014-09-24 16:09:54

404页面设置方法

1. 通过服务器配置文件设置404页面 可以在服务器配置文件中添加以下代码来设置404页面： ``` ErrorDocument 404 /404.html ``` 在这个例子中，当用户请求一个不存在的页面时，服务器会返回404错误，并重新定向到404.html页面。 2. 使用.htaccess文件设置404页面 如果你使用的是 Apache 服务器，可以通过在网站根目录下创建一个.h

 Public @ 2023-04-17 13:50:14

更多您感兴趣的搜索

0.491645s