Google，雅虎，微软合作，共同遵守统一的Sitemaps标准。又同时宣布，共同遵守的robots.txt文件标准。Google，雅虎，微软各自支持的robots.txt文件及Meta标签的标准，以及一些各自特有的标准。下面做一个总结。　　三家都支持的robots文件记...  阅读全文>>