robot文件是什么意思|网站robotstxt文件中这些内容是什么意思

Ⅰ 网站robots.txt文件中这些内容是什么意思

我是这样写的user-agent: *disallow: sitemap: http://www.mmp4.net/后面是你的站点地图的文件地址其中的user-agene：内*代表所有蜘蛛disallow：应许所有蜘蛛抓容取sitemap: 这里放站点地图