禁止抓取

禁止Baiduspider抓取网站上所有图片、禁止或允许Baiduspider抓取网站上的某种特定格式的图片文件可以通过设置robots实现，请参考“robots.txt文件用法举例” 1、禁止访问网站中所有的动态页面 User-agent: * Disallow: /*?* 2、 禁止Baiduspider抓取网站上所有图片 仅允许抓取网页，禁止抓取任何图...