算法包介绍
本章节介绍目前视频智能分析服务提供的视觉能力算法包和包含的算法服务。
边缘算法视觉能力包
边缘算法视觉能力包适用场景:算法模型下发到边缘节点的客户设备中,在客户设备中执行算法分析任务,视频流数据不需要提供到华为云上。
当前提供的边缘算法视觉能力包有边缘专业类算法包和边缘通用类算法包,每个算法包中包含的算法服务如下面表格所示。
| 序号 | 包含的算法服务 | 算法场景 | 场景说明 |
|---|---|---|---|
| 1 | 边缘高密度人群统计 | 人群聚集检测 | 人群密度估计主要是在政府大门、广场等特定场景下,检测人群聚集情况,及时发现集会、群访等社会问题。根据视频监控画面选取重点关注区域,经算法自动分析,输出人群中人数估计值。当画面中人数估计值超过阈值(可配置)时,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 |
| 2 | 户外人数估计 | ||
| 3 | 厂区人数超限 | 识别工厂内特定区域的人数超过特定限制的事件,并发出告警。抓取取证图片和对应的时间信息,用于生成案卷上报的依据,保障厂区管理安全。 | |
| 4 | 边缘个体事件行为检测 | 危险区域吸烟检测 | 吸烟动作识别算法通过对视频流进行实时分析,结合行人检测算法和人体骨骼关节点检测算法,筛选出具有疑似动作的目标,再通过对目标进行连续追踪和分析,判断出目标的具体行为,进而对吸烟行为进行告警。 |
| 5 | 边缘高点人群统计 | 高点人群统计 | 该API用于高点业务场景下,分析边缘摄像头输出的RTSP视频流,对视频中的高密度人群总数进行统计,根据不同告警模式,上报告警信息。 |
| 6 | 边缘共享单车检测 | 共享单车乱摆放识别 | 共享单车违停检测是在监控区域内,对共享单车的违停行为进行自动检测,并对违停行为产生告警。监控人员观察告警视频画面,通知相关负责单位前去处理,以保障城市的管理秩序。 |
| 7 | 边缘烟火检测 | 焚烧垃圾树叶 | 识别街道、园区等场景明火焚烧垃圾树叶的事件。焚烧时火焰需明显可见,或能产生显眼的浓烟。当视频画面内发生明火焚烧垃圾树叶的事件后,经算法分析,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 |
| 8 | 火灾识别 | 识别工厂明火火灾、烟雾的事件。焚烧时火焰需明显可见,或能产生显眼的浓烟。当视频画面内发生明火或烟雾的事件后,经算法分析,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 | |
| 9 | 烟雾检测 | ||
| 10 | 厂区动火作业 | 识别工地上的动火事件,火焰需明显,并发出告警。抓取取证图片和对应的时间信息,用于生成案卷上报的依据,保障厂区管理安全。 | |
| 11 | 边缘城管事件-违规晾晒检测 | 沿街晾晒 | 识别在电线杆、或自己搭个架子,在街道上违规晾晒衣物被子的事件。需要通过算法,当视频画面内存在违规晾晒的事件时,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 |
| 12 | 边缘城管事件-占道经营检测 | 出店经营 | 出店经营是指经营物品店外摆放,或者有跨门占道经营行为。当视频画面内的店面门口出现摆放摊位、桌椅等进行经营活动时,经算法分析,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 |
| 13 | 占道经营 | 无照经营游商、占道经营和占道废品收购是指在城市道路上进行摊位销售经营活动或者公共场所从事流动性经营行为,经算法自动分析,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 | |
| 14 | 无照游商 | ||
| 15 | 边缘城管事件-乱堆物料检测 | 乱堆物堆料 | 识别木材、沙石、箱子等建筑材料在街道堆积的事件。需要通过算法,当视频画面内存在物料堆积的事件时,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 |
| 16 | 施工废弃料 | 识别在工地场景水泥袋、物料袋等施工废弃料的目标,并进行告警。抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 | |
| 17 | 工地物料乱堆放 | 识别在工地场景水泥袋、木材、土堆等物料乱堆放的事件,并进行告警。抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 | |
| 18 | 边缘城管事件-垃圾检测 | 暴露垃圾 | 打包垃圾、暴露垃圾、绿地脏乱是指公共场所未倒入垃圾容器的生活垃圾。当视频画面内出现暴露垃圾时,经算法自动分析,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 |
| 19 | 积存垃圾渣土 | ||
| 20 | 道路不洁 | ||
| 21 | 绿地脏乱 | ||
| 22 | 沙(河)滩不洁 | 识别沙滩、河滩上的垃圾袋、水瓶等生活垃圾,并进行告警,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 | |
| 23 | 餐厨垃圾遗撒 | 餐厨垃圾遗撒检测算法通过对视频画面进行实时监控,对餐厨垃圾的现象进行检测、告警,通知相关人员前来处理,维护后厨环境卫生安全。 | |
| 24 | 边缘城市垃圾桶满溢检测 | 垃圾箱满溢 | 垃圾箱满溢是指道路、小区旁的垃圾箱出现垃圾满溢且无人处理的现象。当视频画面内出现垃圾箱满溢时,经算法自动分析,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 |
| 序号 | 包含的算法服务 | 算法场景 | 场景说明 |
|---|---|---|---|
| 1 | 边缘消防通道占用检测 | 消防通道车辆占用检测 | 消防通道占用服务应用于消防通道等场景,智能检测识别占用通道的堆物或车辆,同时输出占道车辆车牌号,并及时上报告警,通知管理人员来处理占道堆物或车辆,避免出现由于消防通道被占用,导致消防力量无法及时赶到火灾现场展开救援等恶劣情况。 |
| 2 | 消防通道堆物占用检测 | ||
| 3 | 边缘人流量统计 | 人流量统计 | 人流统计服务是应用于园区、门店等监控区域内,统计用户感兴趣区域内的行人流量,不仅可统计时间段内进出某一区域的行人流量,或者统计某时刻当前区域的行人流量,或者显示历史访客热衷出现的区域,通过分析这些视频数据,更好地挖掘数据内部的价值,服务内外部客户。 |
| 4 | 边缘骑电动车未戴头盔识别 | 骑电动车未戴头盔检测 | 主要识别在街道场景,道路上存在行人骑电动车但未戴头盔的情形。需要通过算法,当视频画面内存在行人骑电动车未戴头盔的事件时,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 |
| 5 | 边缘入侵检测 | 人员入侵检测 | 识别人员和车辆入侵的事件。根据视频监控画面选取重点关注区域(需配置),算法可自动识别是否有人员和车辆入侵至关注区域内。当视频画面内发生入侵的事件后,经算法分析,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 |
| 6 | 车辆入侵检测 | ||
| 7 | 特定区域人员闯入 | 识别人员闯入的事件。根据视频监控画面选取重点关注区域(需配置),算法可自动识别是否有人员入侵至关注区域内。当视频画面内发生入侵的事件后,经算法分析,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 | |
| 8 | 行人踩踏绿地 | 识别行人踩踏绿地的事件。通过人员检测、跟踪算法,智能判断是否有行人踏入绿地中(绿地区域需要配置)。当视频画面内发生踩踏绿地的事件后,经算法分析,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 | |
| 9 | 厂区非法闯入 | 识别工厂内一些重要区域、危险区域的人员闯入事件,并发出告警。抓取取证图片和对应的时间信息,用于生成案卷上报的依据,保障厂区管理安全。 | |
| 10 | 边缘非机动车检测 | 非机动车乱停放 | 非机动车乱停放主要检测在未经许可、非合法设置停车泊位的地点停放非机动车。根据视频监控画面选取非机动车禁停区域,当该区域内出现非机动车停放且长时间(可配置)未离开时,经算法自动分析,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 |
| 11 | 非机动车入侵 | 非机动车入侵主要检测在未经许可非机动车进入的地点出现非机动车。根据视频监控画面选取非机动车禁入区域,当该区域内出现非机动车时,经算法自动分析,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 | |
| 12 | 电动车入户检测 | 电动车入户检测主要检测是否有电动车进入楼梯间、电梯间等事件。根据视频监控画面选取电动车禁入区域,当该区域内出现电动车时,经算法自动分析,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 | |
| 13 | 非机动车占用机动车道 | 在监控区域内,对非机动车占用机动车道的事件进行自动检测、产生告警。通知相关部门处置,以保障城市的管理秩序。 | |
| 14 | 边缘工服工帽检测 | 未穿工服检测 | 工人不佩戴安全帽和不穿反光衣的危险作业行为是日常管理中的一大难题,由于未佩戴安全帽或者未穿戴反光衣导致的安全隐患不容忽视。为解决安全生产中安全帽管理,提高工人的安全意识,利用建设在 、厂区的各种视频监控资源,根据人工智能分析技术对在岗工人是否佩戴安全帽和是否穿戴反光衣进行检测,做到日常监测和动态预警,实现安全生产信息化管理。 |
| 15 | 未戴安全帽检测 | ||
| 16 | 边缘关键岗位检测 | 工作室人员脱岗 | 通过人员检测、跟踪技术,识别摄像头画面中人员数量是否小于预设数量(需配置)。若识别的人员数量少于预设数量,则判断为有人员离岗,经算法分析,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 |
| 17 | 边缘异常停车 | 机动车违停 | 机动车违停主要检测在未经许可、非合法设置停车泊位的地点停放机动车。根据视频监控画面选取机动车禁停区域,当该区域内出现机动车停放且长时间(可配置)未离开时,经算法自动分析,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 |
| 18 | 边缘视频车辆 | 车辆检测 | 该API可分析视频流。对于给定的视频,能输出视频里的车辆信息,并能根据指定的roi区域,输出车辆和车牌信息(目前仅支持中国大陆车牌识别)。 |
| 19 | 边缘戴口罩检测 | 未戴口罩识别 | 未戴口罩识别服务是在监控区域内,对没有戴口罩的行人进行检测,并产生告警。告警可联动视频管理平台、门禁系统等,禁止该人员进入;或安排相关人员前去处理,以保障周边地区的疫情安全和相关人员的身体健康。 |
云上算法视觉能力包
云上算法视觉能力包适用场景:视频流数据需要通过IVM上传到华为云,在华为云上进行算法分析。
当前提供的云上算法视觉能力包有云上专业类算法包和云上通用类算法包,每个算法包中包含的算法服务如下面表格所示。
| 序号 | 包含的算法服务 | 算法场景 | 算法说明 |
|---|---|---|---|
| 1 | 云上高密度人群统计 | 人群聚集检测 | 人群密度估计主要是在政府大门、广场等特定场景下,检测人群聚集情况,及时发现集会、群访等社会问题。根据视频监控画面选取重点关注区域,经算法自动分析,输出人群中人数估计值。当画面中人数估计值超过阈值(可配置)时,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 |
| 2 | 户外人数估计 | ||
| 3 | 厂区人数超限 | 识别工厂内特定区域的人数超过特定限制的事件,并发出告警。抓取取证图片和对应的时间信息,用于生成案卷上报的依据,保障厂区管理安全。 | |
| 4 | 云上个体事件行为检测 | 危险区域吸烟检测 | 吸烟动作识别算法通过对视频流进行实时分析,结合行人检测算法和人体骨骼关节点检测算法,筛选出具有疑似动作的目标,再通过对目标进行连续追踪和分析,判断出目标的具体行为,进而对吸烟行为进行告警。 |
| 5 | 云上高点人群统计 | 高点人群统计 | 该API用于高点业务场景下,分析边缘摄像头输出的RTSP视频流,对视频中的高密度人群总数进行统计,根据不同告警模式,上报告警信息。 |
| 6 | 云上共享单车检测 | 共享单车乱摆放识别 | 共享单车违停检测是在监控区域内,对共享单车的违停行为进行自动检测,并对违停行为产生告警。监控人员观察告警视频画面,通知相关负责单位前去处理,以保障城市的管理秩序。 |
| 7 | 云上烟火检测 | 焚烧垃圾树叶 | 识别街道、园区等场景明火焚烧垃圾树叶的事件。焚烧时火焰需明显可见,或能产生显眼的浓烟。当视频画面内发生明火焚烧垃圾树叶的事件后,经算法分析,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 |
| 8 | 火灾识别 | 识别工厂明火火灾、烟雾的事件。焚烧时火焰需明显可见,或能产生显眼的浓烟。当视频画面内发生明火或烟雾的事件后,经算法分析,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 | |
| 9 | 烟雾检测 | ||
| 10 | 厂区动火作业 | 识别工地上的动火事件,火焰需明显,并发出告警。抓取取证图片和对应的时间信息,用于生成案卷上报的依据,保障厂区管理安全。 | |
| 11 | 云上城管事件-违规晾晒检测 | 沿街晾晒 | 识别在电线杆、或自己搭个架子,在街道上违规晾晒衣物被子的事件。需要通过算法,当视频画面内存在违规晾晒的事件时,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 |
| 12 | 云上城管事件-占道经营检测 | 出店经营 | 出店经营是指经营物品店外摆放,或者有跨门占道经营行为。当视频画面内的店面门口出现摆放摊位、桌椅等进行经营活动时,经算法分析,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 |
| 13 | 占道经营 | 无照经营游商、占道经营和占道废品收购是指在城市道路上进行摊位销售经营活动或者公共场所从事流动性经营行为,经算法自动分析,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 | |
| 14 | 无照游商 | ||
| 15 | 云上城管事件-乱堆物料检测 | 乱堆物堆料 | 识别木材、沙石、箱子等建筑材料在街道堆积的事件。需要通过算法,当视频画面内存在物料堆积的事件时,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 |
| 16 | 施工废弃料 | 识别在工地场景水泥袋、物料袋等施工废弃料的目标,并进行告警。抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 | |
| 17 | 工地物料乱堆放 | 识别在工地场景水泥袋、木材、土堆等物料乱堆放的事件,并进行告警。抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 | |
| 18 | 云上城管事件-垃圾检测 | 暴露垃圾 | 打包垃圾、暴露垃圾、绿地脏乱是指公共场所未倒入垃圾容器的生活垃圾。当视频画面内出现暴露垃圾时,经算法自动分析,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 |
| 19 | 积存垃圾渣土 | ||
| 20 | 道路不洁 | ||
| 21 | 绿地脏乱 | ||
| 22 | 沙(河)滩不洁 | 识别沙滩、河滩上的垃圾袋、水瓶等生活垃圾,并进行告警,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 | |
| 23 | 餐厨垃圾遗撒 | 餐厨垃圾遗撒检测算法通过对视频画面进行实时监控,对餐厨垃圾的现象进行检测、告警,通知相关人员前来处理,维护后厨环境卫生安全。 | |
| 24 | 云上城市垃圾桶满溢检测 | 垃圾箱满溢 | 垃圾箱满溢是指道路、小区旁的垃圾箱出现垃圾满溢且无人处理的现象。当视频画面内出现垃圾箱满溢时,经算法自动分析,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 |
| 序号 | 包含的算法服务 | 算法场景 | 算法说明 |
|---|---|---|---|
| 2 | 云上消防通道占用检测 | 消防通道车辆占用检测 | 消防通道占用服务应用于消防通道等场景,智能检测识别占用通道的堆物或车辆,同时输出占道车辆车牌号,并及时上报告警,通知管理人员来处理占道堆物或车辆,避免出现由于消防通道被占用,导致消防力量无法及时赶到火灾现场展开救援等恶劣情况。 |
| 3 | 消防通道堆物占用检测 | ||
| 4 | 云上人流量统计 | 人流量统计 | 人流统计服务是应用于园区、门店等监控区域内,统计用户感兴趣区域内的行人流量,可统计时间段内进出某一区域的行人流量、某时刻当前区域的行人流量、以及显示历史访客热衷出现的区域,通过分析这些视频数据,更好地挖掘数据内部的价值,服务内外部客户。 |
| 5 | 云上骑电动车未戴头盔识别 | 骑电动车未戴头盔检测 | 主要识别在街道场景,道路上存在行人骑电动车但未戴头盔的情形。需要通过算法,当视频画面内存在行人骑电动车未戴头盔的事件时,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 |
| 6 | 云上入侵检测 | 人员入侵检测 | 识别人员和车辆入侵的事件。根据视频监控画面选取重点关注区域(需配置),算法可自动识别是否有人员和车辆入侵至关注区域内。当视频画面内发生入侵的事件后,经算法分析,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 |
| 7 | 车辆入侵检测 | ||
| 8 | 特定区域人员闯入 | 识别人员闯入的事件。根据视频监控画面选取重点关注区域(需配置),算法可自动识别是否有人员入侵至关注区域内。当视频画面内发生入侵的事件后,经算法分析,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 | |
| 9 | 行人踩踏绿地 | 识别行人踩踏绿地的事件。通过人员检测、跟踪算法,智能判断是否有行人踏入绿地中(绿地区域需要配置)。当视频画面内发生踩踏绿地的事件后,经算法分析,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 | |
| 10 | 厂区非法闯入 | 识别工厂内一些重要区域、危险区域的人员闯入事件,并发出告警。抓取取证图片和对应的时间信息,用于生成案卷上报的依据,保障厂区管理安全。 | |
| 11 | 云上非机动车检测 | 非机动车乱停放 | 非机动车乱停放主要检测在未经许可、非合法设置停车泊位的地点停放非机动车。根据视频监控画面选取非机动车禁停区域,当该区域内出现非机动车停放且长时间(可配置)未离开时,经算法自动分析,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 |
| 12 | 非机动车入侵 | 非机动车入侵主要检测在未经许可非机动车进入的地点出现非机动车。根据视频监控画面选取非机动车禁入区域,当该区域内出现非机动车时,经算法自动分析,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 | |
| 13 | 电动车入户检测 | 电动车入户检测主要检测是否有电动车进入楼梯间、电梯间等事件。根据视频监控画面选取电动车禁入区域,当该区域内出现电动车时,经算法自动分析,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 | |
| 14 | 非机动车占用机动车道 | 在监控区域内,对非机动车占用机动车道的事件进行自动检测、产生告警。通知相关部门处置,以保障城市的管理秩序。 | |
| 16 | 云上工服工帽检测 | 未穿工服检测 | 工人不佩戴安全帽和不穿反光衣的危险作业行为是日常管理中的一大难题,由于未佩戴安全帽或者未穿戴反光衣导致的安全隐患不容忽视。为解决安全生产中安全帽管理,提高工人的安全意识,利用建设在 、厂区的各种视频监控资源,根据人工智能分析技术对在岗工人是否佩戴安全帽和是否穿戴反光衣进行检测,做到日常监测和动态预警,实现安全生产信息化管理。 |
| 17 | 未戴安全帽检测 | ||
| 18 | 云上关键岗位检测 | 工作室人员脱岗 | 通过人员检测、跟踪技术,识别摄像头画面中人员数量是否小于预设数量(需配置)。若识别的人员数量少于预设数量,则判断为有人员离岗,经算法分析,能够主动获取事件的现场画面和发生时间,抓取取证图片和对应的时间信息,用于生成案卷上报的依据。 |
| 19 | 云上异常停车 | 机动车违停 | 机动车违停主要检测在未经许可、非合法设置停车泊位的地点停放机动车。根据视频监控画面选取机动车禁停区域,当该区域内出现机动车停放且长时间(可配置)未离开时,经算法自动分析,主动获取事件的现场画面和发生时间,并将报警图片和信息推送至上级平台,用于生成案卷上报的依据。 |
| 20 | 云上视频车辆 | 云上视频车辆 | 该API可分析边缘摄像头输出的RTSP视频流,对于给定的视频,能输出视频里的车辆信息,并能根据指定的roi区域,准确输出车牌信息。 |
| 21 | 云上戴口罩检测 | 未戴口罩识别 | 未戴口罩识别服务是在监控区域内,对没有戴口罩的行人进行检测,并产生告警。告警可联动视频管理平台、门禁系统等,禁止该人员进入;或安排相关人员前去处理,以保障周边地区的疫情安全和相关人员的身体健康。 |