Spider

Spider、蜘蛛、爬虫均为一个意思，一般是人为设计好的，用来收集信息。

User-Agent

User-Agent简称UA，一般代表了用户使用的设备、系统、浏览器、环境等信息，当然Spider也有专门的UA。

使用场景

安全专业人士

一般安全专业人士会巧用UA来绕过防火墙、安全设备的UA检测 构造特定的UA来访问一些其他UA无法访问的页面。 构造UA通过僵尸网络完成DDOS攻击，对服务器进行压力测试或者评估。

程序开发者

当然，程序猿也需要使用到UA，比方说通过判断UA来设计兼容不同设备访问的界面。再比方说，在设计爬虫脚本的时候也需要不断变化UA防止被网站检测到恶意行为。

百度Spider

百度最新UAPC

移动

百度使用最多UA

百度图片

360搜索

360网站安全检测

Google

Google图片搜索

Adwords移动网络

必应

搜搜

搜搜图片

雅虎英文

雅虎中国

搜狗图片

搜狗

网易有道 UA

宜搜 EasouSpider

华为赛门铁克蜘蛛

七牛镜像蜘蛛

监控宝