-
使用WAF阻止爬虫攻击
-
应用场景
![]()
接口进行对接，实现数据的自动入湖。 互联网数据自动入湖 互联网数据是通过网站开放的API接口或网络爬虫来自动获取的。获取互联网数据需要先获得数据使用权，然后通过合法渠道获取数据。网络爬虫只能获取网站上公开的、不涉及版权和商业侵权的数据。 公有云存储中的数据自动入湖 数据接入提供基
来自：帮助中心 -
IP和域名威胁信息标签
![]()
是指使用洋葱路由技术对数据进行层层加密过程中使用到的主机，通过洋葱路由技术可以保证数据的完整性和保密性。 Y N Crawler 爬虫 中性 是指存在爬虫行为的主机。网络爬虫是基于一定的规则自动地抓取互联网信息的程序或者脚本。 Y N IDC IDC服务器 中性 IDC服务器。 Y N Base Station
来自：帮助中心 -
配置BOT管理防护规则防御机器行为
![]()
基于互联网开源的UA特征情报，结合WAF网站反爬虫的UA特征库，WAF支持10类已知BOT检测。 类型 说明 搜索引擎机器人 搜索引擎利用网络爬虫聚合并索引在线内容（如网页、图像及其他类型的文件），为用户提供实时信息。 网络扫描机器人 网络扫描机器人，即病毒、漏洞扫描器，旨在评估和
来自：帮助中心 -
配置BOT防护规则
![]()
中多个BOT名称，单击“批量设置防护动作”按钮批量设置防护动作。 表1 已知BOT检测项说明 检测项 说明 搜索引擎机器人 搜索引擎利用网络爬虫聚合并索引在线内容（如网页、图像及其他类型的文件），为用户提供实时信息。 网络扫描器 病毒/漏洞扫描器旨在评估和发现网络资产中是否存在病
来自：帮助中心 -
术语
![]()
网络内容提供商 网络内容提供商（Internet Content Provider, ICP），向广大用户提供互联网信息业务和增值业务。 网络爬虫 网络爬虫（又被称为网页蜘蛛，网络机器人），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。 网络时间协议 网络时间协议（Network
来自：帮助中心
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
