一种视频检测方法、装置、存储介质、程序产品和设备与流程

    技术2025-01-16  41


    本发明涉及人工智能安全领域,尤其涉及一种视频检测方法、装置、存储介质、程序产品和设备。


    背景技术:

    1、近年来,主要是在针对图片、离线视频中存在生成式伪造的检测需求。视频本质上是由多帧图像组成的序列,可看作是多张图片的顺序组合,为解决生成式伪造检测的问题,底层技术主要基于伪造人脸图像在纹理、深度特征与真实人脸的不同,构造算法进行识别。

    2、生成式伪造的人脸视频,在连贯动作上的表现较为生硬,随着多模技术的发展,语音、唇形、动作等多模态下动作的一致性识别、匹配的算法也可以以伪造视频内动作表现作为切入,进行伪造检测。

    3、目前,针对生成式视频伪造的检测技术主要对离线视频或视频全部帧进行检测,需在视频完结后才能进行检测,无法针对实时视频流进行检测。此外,针对生成式视频伪造的基于多模的检测技术基于预设动作,若视频流中长时间不存在这些动作则模型无法工作,同时多模技术普遍存在识别准确率不高的问题,针对大段的空窗及准确率低的问题,若要满足使用精度需人审介入,但所有实时视频均交由人审检测成本较高。


    技术实现思路

    1、为解决现有存在的技术问题,本发明实施例提供一种视频检测方法、装置、存储介质、程序产品和设备

    2、为达到上述目的,本发明实施例的技术方案是这样实现的:

    3、第一方面,本发明实施例提供一种视频检测方法,包括:

    4、获取目标用户的视频流,基于目标时间段内的多个采样时间确定所述视频流的视频切片数据;所述视频切片数据包括多个视频片段,不同视频片段对应于不同采样时间;

    5、对所述多个视频片段进行伪造检测,获得所述多个视频片段各自对应的检测结果;

    6、按照预设规则对多个检测结果进行处理,获得所述视频流的检测结果;

    7、基于所述视频流的检测结果确定所述视频流中所述目标用户在所述目标时间段内是否存在伪造。

    8、上述方案中,所述对所述多个视频片段进行伪造检测,获得所述多个视频片段各自对应的检测结果,包括:获取在先存储的历史检测结果,所述历史检测结果包括所述视频流中对应于至少一个历史采样时间的各个视频片段的检测结果;在视频片段对应的采样时间不属于所述至少一个历史采样时间的情况下,对所述视频片段进行伪造检测,获得所述视频片段对应的检测结果;在视频片段对应的采样时间属于所述至少一个历史采样时间的情况下,基于所述历史检测结果确定所述视频片段对应的检测结果。

    9、上述方案中,所述基于目标时间段内的多个采样时间确定所述视频流的视频切片数据,包括:根据至少两种切片长度确定所述多个采样时间,基于每个采样时间对所述视频流进行采样,获得所述视频切片数据;所述视频切片数据包括至少两种时长的视频片段。

    10、上述方案中,所述按照预设规则对多个检测结果进行处理,获得所述视频流的检测结果,包括:按照所述预设规则在所述多个检测结果中确定多个目标检测结果,根据所述多个目标检测结果确定所述视频流的检测结果。

    11、上述方案中,所述检测结果为表征对应的视频片段中所述目标用户存在伪造的概率;所述按照所述预设规则在所述多个检测结果中确定多个目标检测结果,至少包括以下其中之一:在所述检测结果大于第一阈值的视频片段的数量大于或等于第一数量的情况下,根据所述检测结果大于所述第一阈值的所有视频片段各自对应的检测结果确定所述多个目标检测结果;在所述检测结果大于第二阈值的视频片段的数量大于或等于第二数量、且所述检测结果大于所述第二阈值的所有视频片段之间不存在覆盖的情况下,根据所述检测结果大于所述第二阈值的所有视频片段各自对应的检测结果确定所述多个目标检测结果;在所述检测结果大于第三阈值的视频片段的数量小于第三数量、且所述检测结果小于第四阈值的视频片段的数量大于或等于第四数量的情况下,根据所述检测结果小于所述第四阈值的所有视频片段各自对应的检测结果确定多个目标检测结果。

    12、上述方案中,所述根据所述多个目标检测结果确定所述视频流的检测结果,包括:根据所述多个目标检测结果的加权平均确定所述视频流的检测结果。

    13、上述方案中,所述基于所述视频流的检测结果确定所述视频流中所述目标用户在所述目标时间段内是否存在伪造,包括:在所述视频流的检测结果大于第五阈值的情况下,确定所述视频流中所述目标用户在所述目标时间段内存在伪造;在所述视频流的检测结果小于第六阈值的情况下,确定所述视频流中所述目标用户在所述目标时间段内不存在伪造;在所述视频流的检测结果小于或等于所述第五阈值、且大于或等于所述第六阈值的情况下,获取所述视频流的人工审核结果,基于所述人工审核结果确定所述视频流中所述目标用户在所述目标时间段内是否存在伪造。

    14、上述方案中,所述获取目标用户的视频流,包括:对所述目标用户进行活体动作识别,在识别通过的情况下获取所述视频流。

    15、第二方面,本发明实施例还提供一种视频检测装置,包括切片模块、检测模块、处理模块和确定模块;其中,

    16、所述切片模块,用于获取目标用户的视频流,基于目标时间段内的多个采样时间确定所述视频流的视频切片数据;所述视频切片数据包括多个视频片段,不同视频片段对应于不同采样时间;

    17、所述检测模块,用于对所述多个视频片段进行伪造检测,获得所述多个视频片段各自对应的检测结果;

    18、所述处理模块,用于按照预设规则对多个检测结果进行处理,获得所述视频流的检测结果;

    19、所述确定模块,用于基于所述视频流的检测结果确定所述视频流中所述目标用户在所述目标时间段内是否存在伪造。

    20、第三方面,本发明实施例还提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现前述第一方面所述方法的步骤。

    21、第四方面,本发明实施例还提供一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现前述第一方面所述方法的步骤。

    22、第五方面,本发明实施例还提供一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现前述第一方面所述方法的步骤。

    23、本发明实施例的视频检测方法、装置、存储介质、程序产品和设备,基于视频流中目标时间段内的多个采样时间确定包括多个视频片段的视频切片数据,针对视频流实时检测引入了视频切片操作,可随着视频流的推进不断切分新的视频片段;分别对多个视频片段进行伪造检测,并按照预设规则对多个视频片段各自对应的检测结果进行处理,获得视频流整体的检测结果,依据视频流的检测结果来确定视频流中是否存在目标用户的伪造,可综合运用多段视频片段的伪造检测结果对视频流整体是否存在伪造进行判断,相较于相关技术中只能针对单段确定视频进行检测,本实施例可通过持续的视频切片以及随时间推进的伪造判断,对视频流实时产生的视频片段进行识别,提升了检测效率,同时通过不同的采样时间保证了整体检测成本可控。



    技术特征:

    1.一种视频检测方法,其特征在于,所述方法包括:

    2.根据权利要求1所述的方法,其特征在于,所述对所述多个视频片段进行伪造检测,获得所述多个视频片段各自对应的检测结果,包括:

    3.根据权利要求1所述的方法,其特征在于,所述基于目标时间段内的多个采样时间确定所述视频流的视频切片数据,包括:

    4.根据权利要求1所述的方法,其特征在于,所述按照预设规则对多个检测结果进行处理,获得所述视频流的检测结果,包括:

    5.根据权利要求4所述的方法,其特征在于,所述检测结果为表征对应的视频片段中所述目标用户存在伪造的概率;所述按照所述预设规则在所述多个检测结果中确定多个目标检测结果,至少包括以下其中之一:

    6.根据权利要求5所述的方法,其特征在于,所述根据所述多个目标检测结果确定所述视频流的检测结果,包括:

    7.根据权利要求6所述的方法,其特征在于,所述基于所述视频流的检测结果确定所述视频流中所述目标用户在所述目标时间段内是否存在伪造,包括:

    8.根据权利要求1至7任一项所述的方法,其特征在于,所述获取目标用户的视频流,包括:

    9.一种视频检测装置,其特征在于,所述装置包括切片模块、检测模块、处理模块和确定模块;其中,

    10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1至8任一项所述方法的步骤。

    11.一种计算机程序产品,包括计算机程序,其特征在于,所述计算机程序在被处理器执行时实现权利要求1至8任一项所述方法的步骤。

    12.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现权利要求1至8任一项所述方法的步骤。


    技术总结
    本发明实施例公开了一种视频检测方法、装置、存储介质、程序产品和设备,方法包括:获取目标用户的视频流,基于目标时间段内的多个采样时间确定所述视频流的视频切片数据;所述视频切片数据包括多个视频片段,不同视频片段对应于不同采样时间;对所述多个视频片段进行伪造检测,获得所述多个视频片段各自对应的检测结果;按照预设规则对多个检测结果进行处理,获得所述视频流的检测结果;基于所述视频流的检测结果确定所述视频流中所述目标用户在所述目标时间段内是否存在伪造。

    技术研发人员:邓远达
    受保护的技术使用者:中国移动通信有限公司研究院
    技术研发日:
    技术公布日:2024/10/24
    转载请注明原文地址:https://symbian.8miu.com/read-25034.html

    最新回复(0)