车外环境视觉采集方法、装置、电子设备及存储介质与流程

    技术2026-01-19  6


    本技术涉及视觉采集领域,尤其涉及车外环境视觉采集方法、车外环境视觉采集装置、电子设备、存储介质及车辆。


    背景技术:

    1、随着互联网经济的发展,分享个人视频生活的场景越来越普遍,涉及诸多领域和场景,由此派生出各自主题类型的网络主播。比如,在汽车驾驶过程中,途经符合主题内容的地点或遇到符合主题的场景,人员在驾驶车辆和运营直播间互动间,产生不可调和的矛盾。

    2、一方面,为了车辆驾驶的安全,不允许人员随意脱离驾驶状态,哪怕是注意力不集中,而另一方面,车辆外部环境随车辆移动不断变换,符合主题内容的场景可能转瞬即逝。虽然可以在车辆上设置摄像头拍摄记录,但需要后期的大量编辑整理工作,需要专注的筛查有用的视频片段。

    3、车辆是非常高效且功能丰富的移动工具,可以迅速改变用户所处地理位置,并且已经进化到自动驾驶的阶段,非常适合户外节目的辅助用途。而现场直播又非常讲求身临其境的实时性,需要及时的人员互动。

    4、因此,需要一种车外环境视觉采集的方案,基于车辆平台,对符合预设节目主题的图像进行进行现场加工整理,自动生成实时播出的视频流,并在维护节目效果的同时,保障车辆的行驶安全。


    技术实现思路

    1、本发明的目的在于提供一种车外环境视觉采集方法、车外环境视觉采集装置、电子设备、存储介质及车辆,至少解决视频采集的同步问题,解决视频节目实时输出的问题,解决车辆环境下人员切换注意力时的车辆安全问题中的一个技术问题。

    2、本发明提供了下述方案:

    3、根据本发明的一个方面,提供一种车外环境视觉采集方法,所述车外环境视觉采集方法包括:

    4、车身内部布置摄像头,定位驾驶位头部活动范围;

    5、基于驾驶位头部活动范围设置定点,建立笛卡尔三维坐标系;

    6、车身外部布置摄像头;

    7、根据车身外部布置摄像头可控焦距设置坐标轴长度;

    8、根据坐标轴长度,基于笛卡尔三维坐标系建立立体视界面;

    9、规划立体视界面,划分视界面区块;

    10、根据所述划分视界面区块,提取车身外部摄像头的像素进行填充,构成立体视界面的图像;

    11、设置图形特征样本;

    12、根据所述图形特征样本,对比立体视界面上的图像;

    13、判断所述图形特征样本是否在立体视界面上的图像中过滤到相似度超过预设相似度阈值的图形;

    14、若,过滤到相似度超过预设相似度阈值的图形,则生成位置提示信息。

    15、进一步的,所述车身外部布置摄像头包括:

    16、参照所述笛卡尔坐标系的定点为起点,到车身外部布置摄像头的安装点,设置参考射线;

    17、根据所述参考射线设置摄像头的拍摄角;

    18、根据所述划分视界面区块,提取车身外部摄像头的像素进行填充,构成立体视界面的图像,所述车身外部布置摄像头同步焦距控制;

    19、根据所述车身外部布置摄像头同步焦距控制,所述立体视界面统一为一个图形帧。

    20、进一步的,所述根据所述图形特征样本,对比立体视界面上的图像包括:

    21、根据所述立体视界面统一为一个图形帧,逐帧刷新所述图形特征样本的对比结果;

    22、根据所述图形特征样本在立体视界面上的图像中过滤到相似度超过预设相似度阈值的图形,生成位置提示信息;

    23、所述位置提示信息包括,根据定位驾驶位头部正对前挡玻璃为起点,在立体视界面上标记相似度超过预设相似度阈值的图形的坐标;

    24、根据在立体视界面上标记相似度超过预设相似度阈值的图形的坐标,生成位置提示信息。

    25、进一步的,还包括:

    26、获取头部视界范围信息;

    27、根据所述头部视界范围信息和定位驾驶位头部活动状态,逐帧裁剪头部视界扫描所述立体视界面的图像,包括根据生成位置提示信息后的头部活动的视频流和头部视界范围的视频流;

    28、开辟缓存空间,缓存头部活动的视频流和头部视界范围的视频流以及所述立体视界面图形帧的视频流;

    29、根据时间戳,同步视频流的图形帧。

    30、进一步的,还包括:

    31、对应驾驶位,设置穿戴设备;

    32、所述穿戴设备包括vr视觉和振动点阵;

    33、其中,vr视觉对应头部视界范围,根据头部活动,显示逐帧裁剪头部视界扫描所述立体视界面的图像;

    34、振动点阵对应所述立体视界面的笛卡尔三维坐标系,根据定点到视界面的射线经过振动点阵的振动单元,振动单元根据所述位置提示信息振动。

    35、进一步的,所述提示信息包括:

    36、根据生成位置提示信息后的头部活动,判断当前头部视界范围是否脱离前挡玻璃预设安全范围;

    37、若,是,则判断当前头部视界范围脱离前挡玻璃预设安全范围是否超过预设的延时阈值;

    38、若,是,则车辆切换并保持在安全驾驶的模式;

    39、所述安全驾驶的模式包括,自动驾驶模式、辅助驾驶模式或驻车模式。

    40、进一步的,所述开辟缓存空间,缓存头部活动的视频流和头部视界范围的视频流以及所述立体视界面图形帧的视频流包括:

    41、根据所述立体视界面图形帧的视频流,生成背景视频流;

    42、根据头部视界范围的视频流相对所述立体视界面的位置,生成头部视界在背景视频中的活动轨迹;

    43、根据图形帧的时间戳,融合头部活动的视频流、背景视频流、头部视界范围的视频流和头部视界在背景视频中的活动轨迹,生成第三视角的视频流。

    44、根据本发明的二个方面,提供一种车外环境视觉采集装置,所述车外环境视觉采集装置包括:

    45、头部定位模块,用于车身内部布置摄像头,定位驾驶位头部活动范围;

    46、坐标建立模块,用于基于驾驶位头部活动范围设置定点,建立笛卡尔三维坐标系;

    47、摄像头布置模块,用于车身外部布置摄像头;

    48、坐标轴模块,用于根据车身外部布置摄像头可控焦距设置坐标轴长度;

    49、视界模块,用于根据坐标轴长度,基于笛卡尔三维坐标系建立立体视界面;

    50、视界分区模块,用于规划立体视界面,划分视界面区块;

    51、像素填充模块,用于根据所述划分视界面区块,提取车身外部摄像头的像素进行填充,构成立体视界面的图像;

    52、图形特征模块,用于设置图形特征样本;

    53、图形对比模块,用于根据所述图形特征样本,对比立体视界面上的图像;

    54、图形判断模块,用于判断所述图形特征样本是否在立体视界面上的图像中过滤到相似度超过预设相似度阈值的图形;

    55、提示信息模块,用于若,过滤到相似度超过预设相似度阈值的图形,则生成位置提示信息。

    56、根据本发明的三个方面,提供一种电子设备,包括:处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;

    57、所述存储器中存储有计算机程序,当所述计算机程序被所述处理器执行时,使得所述处理器执行所述车外环境视觉采集方法的步骤。

    58、根据本发明的四个方面,提供一种计算机可读存储介质,包括:其存储有可由电子设备执行的计算机程序,当计算机程序在电子设备上运行时,使得电子设备执行所述车外环境视觉采集方法的步骤。

    59、根据本发明的五个方面,提供一种车辆,包括:

    60、电子设备,用于实现所述车外环境视觉采集方法的步骤;

    61、处理器,处理器运行程序,当程序运行时从电子设备输出的数据执行所述车外环境视觉采集方法的步骤;

    62、存储介质,用于存储程序,程序在运行时对于从电子设备输出的数据执行所述车外环境视觉采集方法的步骤。

    63、通过上述方案,获得如下有益的技术效果:

    64、本技术通过建立笛卡尔坐标系,使摄像头基于同一坐标系统一建立立体视界面,使摄像头图像帧可以拼接成一个统一的视频帧。

    65、本技术通过笛卡尔坐标系的定点为起点的射线作为摄像头拍摄角参照,使摄像头之间的图像拼接范围充分。

    66、本技术通过截取用户的视界范围,在背景视频上标注坐标轨迹,生成视频流,直接作为当前的在线节目视频,提高了在线播出的实时性。

    67、本技术通过提示用户预设目标所在方位,使人员可以及时锁定高拍摄对象,提高主题表达的集中程度和效率。

    68、本技术通过预先设置特征样本,自动收集疑似的目标,为人员拓展了辨识范围和辨识效率,分担了用户的注意力负担。

    69、本技术通过自动切换自动驾驶状态,利用自动驾驶功能,分担用户的注意力不集中的驾驶安全风险。


    技术特征:

    1.一种车外环境视觉采集方法,其特征在于,所述车外环境视觉采集方法包括:

    2.根据权利要求1所述的车外环境视觉采集方法,其特征在于,所述车身外部布置摄像头包括:

    3.根据权利要求2所述的车外环境视觉采集方法,其特征在于,所述根据所述图形特征样本,对比立体视界面上的图像包括:

    4.根据权利要求3所述的车外环境视觉采集方法,其特征在于,还包括:

    5.根据权利要求4所述的车外环境视觉采集方法,其特征在于,还包括:

    6.根据权利要求5所述的车外环境视觉采集方法,其特征在于,所述提示信息包括:

    7.根据权利要求6所述的车外环境视觉采集方法,其特征在于,所述开辟缓存空间,缓存头部活动的视频流和头部视界范围的视频流以及所述立体视界面图形帧的视频流包括:

    8.一种车外环境视觉采集装置,其特征在于,所述车外环境视觉采集装置包括:

    9.一种电子设备,其特征在于,包括:处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;

    10.一种计算机可读存储介质,其特征在于,包括:其存储有可由电子设备执行的计算机程序,当计算机程序在电子设备上运行时,使得电子设备执行权利要求1至7任一项所述车外环境视觉采集方法的步骤。


    技术总结
    本申请公开一种车外环境视觉采集方法、装置、电子设备及存储介质,方法包括,车身内部布置摄像头,定位驾驶位头部活动范围;基于驾驶位头部活动范围设置定点,建立笛卡尔三维坐标系;车身外部布置摄像头;根据车身外部布置摄像头可控焦距设置坐标轴长度;根据坐标轴长度,基于笛卡尔三维坐标系建立立体视界面;规划立体视界面,划分视界面区块;根据所述划分视界面区块,提取车身外部摄像头像素进行填充,构成立体视界面的图像;设置图形特征样本;根据所述图形特征样本,对比立体视界面上图像;判断所述图形特征样本是否在立体视界面上图像中过滤到相似度超过预设相似度阈值的图形;过滤到相似度超过预设相似度阈值的图形,生成位置提示信息。

    技术研发人员:王俊峰,朱明轩,郭丽娜
    受保护的技术使用者:中国第一汽车股份有限公司
    技术研发日:
    技术公布日:2024/10/24
    转载请注明原文地址:https://symbian.8miu.com/read-39189.html

    最新回复(0)