目前互联网中很多批量流量都是Bot（自动化程序）所产生的。这使得恶意攻击变得更加容易，黑客利用这些自动化程序可以进行业务攻击和欺诈，例如撞库、占座、抢票、刷排名、爬取网页内容、接口滥用、活动作弊等等。因此对抗恶意自动化程序的安全技术应运而生，一些成熟的WAF厂商开始扩展自身能力抵御恶意流量，一些专注于自动化程序管理的安全厂商也开始出现。
《New Tech：Bot Management》报告调研了全球15家提供自动化程序管理（Bot Management）技术及产品的公司，并从专职员工数量、产品覆盖范围、产品收益、产品客户数量等四个维度，评测出处于第一阵营、成长阵营、早期阵营三个阶段的公司，最终阿里云被评测为中国唯一一家进入第一阵营的公司，成为国内自动化程序管理技术和产品服务商的引领者。
阿里云爬虫风险管理产品是基于传统WAF的安全技术能力孵化出来的对抗爬虫的专业产品。该产品建设了一整套包括基础防护层、云端情报层、深度学习层在内的层次分明的爬虫检测模块，从提供流量上自定义爬虫特征工具，到共享云端优势的行业爬虫攻击情报，再到定制贴合客户业务的深度学习算法，逐步递进，可以帮助客户快速打造一套量身定做的反爬虫策略体系。
爬虫风险管理产品架构图
目前，阿里云爬虫风险管理产品主要应用在航空、旅游、金融、医疗、电子商务等领域，比如该产品为亚洲航空公司成功解决黄牛占座难题，最终帮助客户降低了90%的占座请求，线上订票业务得到极大提升，赢得客户高度认可。