404页面是网站优化中必不可少的基础优化之一，随着网站运营时间越来越长，网站内容更新越来越多，该网页的链接地址往往会以各种内链、外链形式存在，如果使用的是一些锚文本链接，这些文字内容可能会吸引到用户点击，而对应的页面却已经删除，此时如果没有设置404页面，那么用户获得的页面就是一个错误的页面，影响用户体验；搜索引擎获得的路径则变成了死链，给网站带来不良的影响。

301重定向又被称为301转向或301跳转，指的是当用户或搜索引擎向网站服务器发出浏览请求时，服务器返回的HTTP数据流中头信息(header)中的状态码的一种，表示本网页永久性转移到另一个地址。301重定向是网页更改地址后对搜索引擎友好的最好方法，只要不是暂时转移网址，都建议使用301来做转址。

Robots是以txt文件的形式存在，其作用就是告诉搜索引擎哪些页面可以抓取，哪些页面不能抓取。如果页面有大量的垃圾页面，为了不影响搜索引擎对网站的印象及收录，可以通过robots.txt文件设置这些页面不被抓取。

网站为什么要创建网站地图（sitemap）呢？因为搜索引擎蜘蛛非常喜欢网站地图，创建网站地图有利于搜索引擎对网站内容的抓取和收录，所以Zblog博客网站搭建之后应该配置网站地图，就是我们常说的sitemap文件，常见的sitemap格式有xml和html文件格式。