基于大数据深度学习的隐私图片清理方法、设备及介质与流程

    技术2025-07-31  11


    本发明涉及图像识别,具体涉及一种基于大数据深度学习的隐私图片清理方法、设备及存储介质。


    背景技术:

    1、随着个人数据保护的关注度升高,自动化识别和处理包含隐私信息的图像成为重要需求。现有技术包含基于机器学习的图像识别方法和基于规则的过滤系统,它们能够在一定程度上检测和管理隐私图像,但存在准确率不高和适应性差的问题。近期,深度学习技术在图像识别准确性上取得进展,但当前的实现方案通常缺乏自适应性,并且在复杂多变的环境下识别效率仍有待提高。边缘计算结合方案尝试提高数据处理的隐私性和即时性,但受限于设备的计算能力,有限的模型复杂度限制了其应用范围。本发明旨在解决这些限制,通过创新的深度学习技术应用,显著提高隐私图像的自动识别性能和系统的实时响应能力。

    2、具体的说,现有技术的缺点主要集中在以下几个方面:

    3、1.准确率不足:现有的机器学习方法在复杂场景下识别隐私图像的准确率不高,难以适应用户个性化的隐私保护需求。

    4、2.自适应性差:随着隐私定义的不断演变和多样化,现有系统难以快速适应新型隐私标准,无法有效处理新出现的隐私风险和手段。

    5、3.效率低下:深度学习模型在处理大量图像数据时,识别和处理速度慢,难以满足实时隐私保护的需求。

    6、4.计算资源限制:边缘计算解决方案虽增加了数据处理的隐私性,但其所用深度学习模型因计算资源受限,模型复杂度和识别性能有限。


    技术实现思路

    1、本发明提出的一种基于大数据深度学习的隐私图片清理方法、设备及存储介质,可至少解决背景技术中的技术问题之一。

    2、为实现上述目的,本发明采用了以下技术方案:

    3、一种基于大数据深度学习的隐私图片清理方法,包括以下步骤,

    4、s1、输入图像;

    5、s2、图像预处理;

    6、s3、信息检测:通过运用深度卷积神经网络的深度学习模型进行信息检测;

    7、s4、隐私数据分类:基于支持向量机、随机森林这些机器学习算法,将检测到的信息进行隐私级别分类;

    8、s5、用户自定义策略:在用户体验层面,让用户能自定义如何处理联系到各类隐私等级的图像;

    9、s6、执行用户自定义策略:根据用户定义的处理办法,执行相对应的操作;

    10、s7、学习与自优化:获取用户反馈,进行自我学习和优化。

    11、进一步地,步骤s1中采用具有健壮性的针对各种包括jpg、png、bmp图像格式的编码/解码算法,将图像数据导入系统。

    12、进一步地,步骤s2中这个环节使用数学计算和算法,包括高斯滤波器进行图像降噪、z-score方法进行数据标准化、以及minmaxscaler应用于归一化操作;

    13、同时,图像会经过处理以调整大小和分辨率,以便适配后续深度学习模型。

    14、进一步地,s7中包括构建一种基于用户反馈的reward function,通过强化学习算法让系统优化其预定义的规则和用户界面。

    15、另一方面,本发明还公开一种基于大数据深度学习的隐私图片清理系统,包括以下模块:

    16、图像预处理模块:负责将用户上传的图片进行质量增强和格式标准化处理;

    17、信息检测模块:通过深度学习算法,专注于指定隐私信息,包括证件的文本字段、聊天内容的语义分析和私密照片特征的提取;

    18、隐私数据分类模块:根据检测结果,将图片自动归类为预设的隐私类别;

    19、用户自定义策略应用模块:执行用户定义的处理策略,针对识别的各类隐私图片采取相应行动;

    20、学习与自优化模块:分析用户反馈,持续更新识别模型以提升未来的处理效率和准确性。

    21、进一步地,所述图像预处理的处理流程包括首先将接收到的各种格式的图像数据进行解码,然后应用高斯滤波、归一化和尺寸调整预处理技术,将输入的图像数据进行标准化和降噪处理,为下一步的深度学习模型检测预处理过的图像做好准备。

    22、进一步地,所述隐私数据分类模块,通过利用无监督或半监督的机器学习技术,包括k-means聚类算法或层次聚类算法,将检测出的隐私信息进行分类,并将图片标记为相应的类别如证件照片、聊天记录、私密照片;这一步为后续根据用户自定义策略进行处理提供便利。

    23、进一步地,所述用户自定义策略应用模块用于为用户提供一个友好的用户界面,方便用户根据自己的隐私保护需求,预设对各类隐私图片的处理策略,包括自动删除、打码、加密保存或标记归档;本模块会根据用户预设的策略,对相应类别的隐私图片执行相应的操作。

    24、又一方面,本发明还公开一种计算机可读存储介质,存储有计算机程序,所述计算机程序被处理器执行时,使得所述处理器执行如上述方法的步骤。

    25、再一方面,本发明还公开一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如上方法的步骤。

    26、由上述技术方案可知,本发明的基于大数据深度学习的隐私图片清理方法及系统,该架构综合了卷积神经网络和自然语言处理算法,特别针对个人证件照片、聊天记录和私密照片等敏感信息的识别与分类。

    27、本发明公开一个自适应学习机制,它能够根据用户的修改和反馈实时调整识别模型,以便提升识别准确度,并且适应隐私标准的演变。还设置了一个用户自定义策略模块,它允许用户为不同隐私类别预设针对性处理规则(比如自动删除、加密、标记或归档),并且可以在系统级别实施这些策略,以优化隐私图片的管理和保护。同时,本发明还提供一种优化的数据处理流程,结合图像预处理和后续的分类、处理,能极大提高系统的处理速度和效率,特别是在大量图片数据情况下的性能。

    28、具体的说,本发明的优点如下:

    29、1.高精度的隐私信息识别:本发明通过大数据深度学习技术,对海量数据进行分析与学习,以精确识别可能存在隐私泄露的图片。通过复杂的神经网络构建,提高了模型对于复杂场景和模糊信息识别的准确度,有效降低了误删或误杀图片的情况。

    30、2.强大的自适应性:本发明根据用户反馈和行为分析数据,能够不断调整模型,适应用户的隐私需求变化。即便在隐私标准日新月异、隐私需求多元化的今天,也能确保用户隐私要求的精准落地,满足个性化的需求。

    31、3.高效的处理能力:利用优化的深度学习模型和数据处理流程,本发明可以进行高效的批量隐私图像处理,并实时响应用户识别需求。通过自学习和自优化,提升了处理过程的速度和效率,减少了等待时间。

    32、4.计算资源最优利用:轻量化的深度学习模型设计,扩展了隐私识别能力至计算资源有限的边缘设备上,使得处理过程更为经济高效,同时提高了设备性能的利用率,大大降低了硬件成本和运行压力。

    33、总的来说,本发明具有优异的自然场景识别能力和卓越的自适应性,能以更高的效率和精度保护用户的隐私,是一种非常实用且前瞻性的方法。


    技术特征:

    1.一种基于大数据深度学习的隐私图片清理方法,其特征在于,包括以下步骤,

    2.根据权利要求1所述的基于大数据深度学习的隐私图片清理方法,其特征在于:步骤s1中采用具有健壮性的针对各种包括jpg、png、bmp图像格式的编码/解码算法,将图像数据导入系统。

    3.根据权利要求2所述的基于大数据深度学习的隐私图片清理方法,其特征在于:步骤s2中这个环节使用数学计算和算法,包括高斯滤波器进行图像降噪、z-score方法进行数据标准化、以及minmaxscaler应用于归一化操作;

    4.根据权利要求1所述的基于大数据深度学习的隐私图片清理方法,其特征在于:s7中包括构建一种基于用户反馈的reward function,通过强化学习算法让系统优化其预定义的规则和用户界面。

    5.一种基于大数据深度学习的隐私图片清理系统,其特征在于:包括以下模块:

    6.根据权利要求5所述的基于大数据深度学习的隐私图片清理系统,其特征在于:所述图像预处理的处理流程包括首先将接收到的各种格式的图像数据进行解码,然后应用高斯滤波、归一化和尺寸调整预处理技术,将输入的图像数据进行标准化和降噪处理,为下一步的深度学习模型检测预处理过的图像做好准备。

    7.根据权利要求5所述的基于大数据深度学习的隐私图片清理系统,其特征在于:所述隐私数据分类模块,通过利用无监督或半监督的机器学习技术,包括k-means聚类算法或层次聚类算法,将检测出的隐私信息进行分类,并将图片标记为相应的类别如证件照片、聊天记录、私密照片;这一步为后续根据用户自定义策略进行处理提供便利。

    8.根据权利要求5所述的基于大数据深度学习的隐私图片清理系统,其特征在于:所述用户自定义策略应用模块用于为用户提供一个友好的用户界面,方便用户根据自己的隐私保护需求,预设对各类隐私图片的处理策略,包括自动删除、打码、加密保存或标记归档;本模块会根据用户预设的策略,对相应类别的隐私图片执行相应的操作。

    9.一种计算机可读存储介质,存储有计算机程序,所述计算机程序被处理器执行时,使得所述处理器执行如权利要求1至4中任一项所述方法的步骤。

    10.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如权利要求1至4中任一项所述方法的步骤。


    技术总结
    本发明的一种基于大数据深度学习的隐私图片清理方法、设备及介质,包括输入图像;图像预处理;通过运用深度卷积神经网络的深度学习模型进行信息检测;基于支持向量机、随机森林这些机器学习算法,将检测到的信息进行隐私级别分类;在用户体验层面,让用户能自定义如何处理联系到各类隐私等级的图像;根据用户定义的处理办法,执行相对应的操作;获取用户反馈,进行自我学习和优化。本发明通过采用先进的深度学习技术,提供高精度的隐私信息识别,以满足个体化和多变化隐私需求,以提高识别准确率;利用用户反馈和行为分析数据,构建自适应模型,以便快速响应隐私标准的更迭和多样化隐私要求,增强系统的自适应性。

    技术研发人员:周春峰,程晋,徐涛,宋巨龙,刘泽
    受保护的技术使用者:小沃科技有限公司
    技术研发日:
    技术公布日:2024/10/24
    转载请注明原文地址:https://symbian.8miu.com/read-34795.html

    最新回复(0)