标签:robots文件的几个作用介绍

robots文件的几个作用介绍

一、屏蔽死链接许多时候,我们网站会产生死链接,比如说:网站改版、文章删除等,都很有可能会导致网站出现404页面,那么这个时候我们就需要通过robots来屏蔽这些死链接。查看死链的方法有以下两种:1、)通过网站日志查询。我们可以通过下载网站日...

2019-12-13 23:49:51
1 条记录