一个网站想要有一个好的排名就必须做好站内、站外的优化，相信大家一定看过很多关于站内或者站外优化的方法、秘笈、诀窍什么 的，有资深的SEO人员写的，有站长们自己的经验分享或者说是实战经验，今天跟大家说说自己对站内优化的一些看法跟理解吧。
我是刚刚接触站内优化的，因为之前一直是做站外优化的，所以对站内优化还不是很了解，今天主要跟打击分享的是站内优化过程中很多人会忽视的三个方面，即：sitemap、404页面、robots.txt。很多站长在做站内优化的时候很容易忽视这三个方面，觉得sitemap、404页面、 robots.txt没有什么优化的必要，只要网站上有就行了。其实完全不是这样的，很多新站收录慢，或者根本不被收录;老站排名上不去，很大的原因就是因为没有做好这三方面的优化。如果把这三个方面的优化做好你会发现蜘蛛对你的网站的友好度会大大提升。
为什么要讲网站地图呢，把蜘蛛比作是一个人，当你到一个陌生的城市时，第一个想到的应该是去买一张这个城市的地图，不然很容易迷路的。同样的道理蜘蛛爬行你的网站时要是有一张地图引导他，他就不会迷路，而且要是你的地图结构合理且连续性强的话，蜘蛛就会长时间停留在你的网站上。做一个很形象的比喻，我们在买到一张地图时，如果他上面的路标、地名标示的不是很明显，或者说是很清晰，我们上哪去找我们要到达的地方呢。还有就是你的地图很混乱，道路与道路之间没有一定的延续性也会导致迷路的。所以我们的网站地图优化需要我们在做站内链接的时候要有一定的合理延续性，当你从一个页面链接到另一个页面是一定要有一定的相关性，不然很容易引起蜘蛛的反感的，网站的URL地址就跟地图的路标一样一定要标明的很明确，不要用一些不懂得或者跟页面不相关的字母。不然蜘蛛在爬取你的网站时很难读懂你网站网页的具体内容的。