本发明涉及智慧交通,具体涉及基于多模态信息融合的一体化监控系统及方法。
背景技术:
1、随着城市化进程的加快以及交通运输需求的迅猛增长,智能交通管理系统在现代城市交通中的应用变得越来越普遍。然而,伴随着交通网络的复杂化和车辆数量的急剧增加,传统的交通监控与管理方法在面对日益复杂的交通状况时显得力不从心。传统的交通监控系统主要依赖于单一模态的数据来源,如视频监控或gps定位等,这些方法存在信息单一、覆盖面有限、响应速度慢等问题,难以满足现代交通管理对实时性、精准性和全面性的高标准要求。
技术实现思路
1、本申请提供基于多模态信息融合的一体化监控系统及方法,用于针对解决现有技术在进行交通监控时存在信息不完整、响应速度慢、异常检测精度低的技术问题。
2、鉴于上述问题,本申请提供了基于多模态信息融合的一体化监控系统及方法。
3、本申请的第一个方面,提供了基于多模态信息融合的一体化监控系统,所述系统包括:
4、信息采集模块,所述信息采集模块获取信息采集一体机,所述信息采集一体机集成包括摄像头、gps定位器和对讲通信模块,通过所述信息采集一体机同步采集获得交通区域监测多模态信息流;标准信息获取模块,所述标准信息获取模块分别对所述交通区域监测多模态信息流进行预处理步骤分析,获得多模态数据预处理程序,基于所述多模态数据预处理程序对所述交通区域监测多模态信息流进行并行预处理,得到标准交通区域监测多模态信息流;特征提取模块,所述特征提取模块对所述标准交通区域监测多模态信息流依次进行特征提取,获得多模态交通区域特征集合,基于所述多模态交通区域特征集合进行异常特征提取,得到异常多模态交通特征集合;映射抽取融合模块,所述映射抽取融合模块基于所述异常多模态交通特征集合对所述多模态交通区域特征集合进行映射抽取融合,生成异常多模态交通特征矩阵;协调运维管控模块,所述协调运维管控模块对所述异常多模态交通特征矩阵进行策略分析,获得交通协调控制策略参数,并基于所述交通协调控制策略参数对目标交通区域进行协调运维管控。
5、本申请的第二个方面,提供了基于多模态信息融合的一体化监控方法,所述方法包括:
6、获取信息采集一体机,所述信息采集一体机集成包括摄像头、gps定位器和对讲通信模块,通过所述信息采集一体机同步采集获得交通区域监测多模态信息流;分别对所述交通区域监测多模态信息流进行预处理步骤分析,获得多模态数据预处理程序,基于所述多模态数据预处理程序对所述交通区域监测多模态信息流进行并行预处理,得到标准交通区域监测多模态信息流;对所述标准交通区域监测多模态信息流依次进行特征提取,获得多模态交通区域特征集合,基于所述多模态交通区域特征集合进行异常特征提取,得到异常多模态交通特征集合;基于所述异常多模态交通特征集合对所述多模态交通区域特征集合进行映射抽取融合,生成异常多模态交通特征矩阵;对所述异常多模态交通特征矩阵进行策略分析,获得交通协调控制策略参数,并基于所述交通协调控制策略参数对目标交通区域进行协调运维管控。
7、本申请中提供的一个或多个技术方案,至少具有如下技术效果或优点:
8、本申请获取信息采集一体机,信息采集一体机集成包括摄像头、gps定位器和对讲通信模块,通过信息采集一体机同步采集获得交通区域监测多模态信息流;分别对交通区域监测多模态信息流进行预处理步骤分析,获得多模态数据预处理程序,基于多模态数据预处理程序对交通区域监测多模态信息流进行并行预处理,得到标准交通区域监测多模态信息流;对标准交通区域监测多模态信息流依次进行特征提取,获得多模态交通区域特征集合,基于多模态交通区域特征集合进行异常特征提取,得到异常多模态交通特征集合;基于异常多模态交通特征集合对多模态交通区域特征集合进行映射抽取融合,生成异常多模态交通特征矩阵;对异常多模态交通特征矩阵进行策略分析,获得交通协调控制策略参数,并基于交通协调控制策略参数对目标交通区域进行协调运维管控。本发明解决现有技术在进行交通监控时存在信息不完整、响应速度慢、异常检测精度低的技术问题,通过信息采集一体机同步采集交通区域的多模态信息流,通过标准信息获取模块进行预处理,特征提取模块提取交通特征,映射抽取融合模块生成异常特征矩阵,最后协调运维管控模块进行策略分析与优化,达到提升交通异常监控与管理效率的技术效果。
1.基于多模态信息融合的一体化监控系统,其特征在于,所述系统包括:
2.如权利要求1所述的基于多模态信息融合的一体化监控系统,其特征在于,所述获得多模态交通区域特征集合,包括:
3.如权利要求2所述的基于多模态信息融合的一体化监控系统,其特征在于,所述获得交通事件特征信息和交通位置特征集合,包括:
4.如权利要求2所述的基于多模态信息融合的一体化监控系统,其特征在于,所述得到异常多模态交通特征集合,包括:
5.如权利要求1所述的基于多模态信息融合的一体化监控系统,其特征在于,所述生成异常多模态交通特征矩阵,包括:
6.如权利要求5所述的基于多模态信息融合的一体化监控系统,其特征在于,所述确定异常多模态有效特征集合,包括:
7.如权利要求1所述的基于多模态信息融合的一体化监控系统,其特征在于,所述获得交通协调控制策略参数,包括:
8.基于多模态信息融合的一体化监控方法,其特征在于,所述方法通过权利要求1至7中任一项所述的基于多模态信息融合的一体化监控系统执行,包括: