网站设置404页面后如果网站出现迉链接，搜索引擎蜘蛛爬行这类网址得到“404”状态回应时即知道该URL已经失效，便不再索引该网页并向数据中心反馈将该URL表示的网页从索引数据库中删除。避免因为死链接影响网站收录

404页面通常为用户访问了网站上不存在或已删除的页面，服务器返回404错误页面告诉浏覽者其所请求的页面不存在或链接错误，同时引导用户使用网站其他页面而不是关闭窗口离开消除用户的挫败感。

搜索引擎通过HTTP状态码來识别网页的状态当搜索引擎获得了一个错误链接时，网站应该返回404状态码告诉搜索引擎放弃对该链接的索引。而如果返回200或302状态码搜索引擎就会为该链接建立索引，这导致大量不同的链接指向了相同的网页内容结果是，搜索引擎对该网站的信任度大幅降低很多網站存在这个问题：404页面返回的是200或302状态码而不是404状态码。

有些网站由于应用了一些错误的服务器配置导致返回的是200状态码或是302状态码，虽然这些状态码对访问网站的用户没有影响但是却会误导搜索引擎，使搜索引擎认为该页面是有效页面从而抓取下来。如果404页面过哆就造成了大量的重复页面，很有可能被搜索引擎认为是作弊而遭到惩罚