360搜索对Robots协议的支持

360搜索支持Robots协议的主要命令，以下为具体说明：

1. user-agent

360搜索各产品的爬虫user-agent为：

– 网页搜索 360Spider

– 图片搜索 360Spider-Image

– 视频搜索 360Spider-Video

2. Allow

站长可通过Allow命令指定建议收录的文件、目录 。

3. Disallow

站长可通过Disallow命令指定不建议收录的文件、目录。