重要的代码

你的网络空间中的小朋友---机器人（这里指Googlebot及其他搜索引擎蜘蛛），也许他的脾气并不像你想想的那么坏，不过你要小心，不是所有的机器人都愿意和你交朋友。
 
元关键词
谷歌不太关注你的元关键词，不过你还是有必要使用元关键词的，因为他们至少能够帮助你进行网页内容的策划，我发现一些网站似乎为来访的机器人准备了全面的指令和说明，不过如果这些站长知道谷歌是如何操作的话，他们也许会很快发现很多指令和说明都是多余的，他们最好被去掉。当Googlebot登录到你的网站的某个页面时，他会索引该页面，然后看一下页面中的链接会引出什么样的结果，因此如果你注意到你的代码中存在“robot，follow“这样的指令，就将他删除，因为这样做只会减慢Googlebot 的运行速度，并打乱你的信息，不管你是否邀请他这样做，Googlebot都会跟踪这些链接
 
No Index/no follow
也许你不希望谷歌关注某些特定的页面，因为他们要比其他的页面差一些，如果这样的话，你可以使用“noindex“或者”no follow“标签，并让Googlebot快速，畅通无阻的达到你的优秀页面。
 
Revisit-after
  你是否觉得你有权利规定谷歌应该在什么时候访问你的网站？Googlebot想什么时候来就什么时候来，而且你应该为此感到高兴，你要做的是确保在他每次早放大额时候，你的网扎上都有新的内容供他索引，不管是新的突刺昂，文本，还是新的页面。
 
一点警告
有些机器人不是用于网站的索引和扫描的，他们会快速抓取大量页面，造成服务器拥堵，因此非常让人反感，这样的情况也可能发生在你的网站上，不过建议你不要因为存在恶意行为的威胁就阻止机器人的进入，通过向Googlebot和其他搜索引擎蜘蛛开放网站得到的好处，要远远大于恶意攻击的可能性

 迅龙网络-谷歌推广专家建议
  阅读你的服务器日志文件，并尽量弄懂他们的意思，格外关注一些常见的机器人，如Googlebot和Webcrawler，看一下在他们访问时会出现什么情况，他们进入了哪些页面？他们在你的网站上停留了多长时间？更为重要的是，那些页面没有被访问？你可以据此判断你的导航和网站地图中是否存在某些漏洞，然后对网站做出改进，提高网站的用户和机器人友