本发明涉及人工智能,尤其涉及一种基于ai进行心理咨询的方法及系统。
背景技术:
1、随着工作压力的不断增大,从而导致心理疾病的问题也日益凸显;现在解决这些心理疾病的方式一般为寻求心理医生或者心理咨询师的帮助,但是对于大多数心理疾病患者来说,可能会存在各种担心,比如担心在心理咨询时个人隐私的泄露等情况,也有一个心理疾病患者通过购买一些心理咨询交互机器人进行一些互动来缓解心理疾病,但是现有的心理咨询交互机器人无法准确的获得用户对应的情绪状态,则无法准确的根据咨询用户的情绪状态执行较为精确的心理咨询交互,从而无法有效的调节咨询用户的情绪,从而无法对咨询用户的心理疾病调节提供准确的帮助。
技术实现思路
1、本发明的目的在于克服现有技术的不足,本发明提供了一种基于ai进行心理咨询的方法及系统,可以获得咨询用户的当前情绪状态,并且根据当前情绪状态与咨询用户进行咨询对话,提高心理咨询的效率,从而有效的帮助咨询用户调整心理疾病问题。
2、为了解决上述技术问题,本发明实施例提供了一种基于ai进行心理咨询的方法,所述方法包括:
3、咨询用户在ai咨询终端进行心理咨询时,所述ai咨询终端实时采集咨询用户的人脸图像数据、生理信号数据以及咨询语音信号数据;
4、分别对所述人脸图像数据、生理信号数据以及咨询语音信号数据进行情绪提取处理,获得所述咨询用户的当前情绪状态;
5、将所述咨询语音信号数据转化为语音文本数据,并对所述语音文本数据进行语义提取处理,获得所述咨询用户的咨询语义信息;
6、基于所述当前情绪状态在ai咨询模式数据库中匹配到对应的ai咨询模式,并获得所述ai咨询模式对应的ai语言模型;
7、将所述咨询语义信息输入所述ai语言模型中生成对应的心理咨询对话语音信号;
8、所述ai咨询终端基于所述心理咨询对话语音信号与所述咨询用户进行心理咨询对话处理,直至心理咨询对话结束。
9、可选的,所述咨询用户在ai咨询终端进行心理咨询时,包括:
10、所述咨询用户在所述ai咨询终端上选择进行心理咨询时,所述ai咨询终端生成提示语音信息,并向所述咨询用户播放所述提示语音信息;所述提示语音信息中包含提示所述咨询用户佩戴所述ai咨询设备关联的穿戴设备及咨询交互的耳麦设备,同时提示所述咨询用户正对所述ai咨询终端的图像采集设备。
11、可选的,所述ai咨询终端实时采集咨询用户的人脸图像数据、生理信号数据以及咨询语音信号数据,包括:
12、所述ai咨询终端控制携带的图像采集设备对所述咨询用户进行人脸图像采集处理,获得所述咨询用户的人脸图像数据;同时,
13、所述ai咨询终端控制关联的穿戴设备对所述咨询用户进行生理信号数据采集处理,获得所述咨询用户的生理信号数据,所述生理信号数据包括心率信号数据、皮肤电平信号数据以及血压信号数据;同时,
14、所述ai咨询终端控制所述耳麦设备上的麦克风对所述咨询用户进行咨询语音采集处理,获得咨询语音信号数据。
15、可选的,所述分别对所述人脸图像数据、生理信号数据以及咨询语音信号数据进行情绪提取处理,获得所述咨询用户的当前情绪状态,包括:
16、基于所述人脸图像数据进行图像中的情绪提取处理,获得人脸图像数据对应的第一情绪状态;
17、对所述生理信号数据中的心率数据、皮肤电平信号数据和血压信号数据进行分析处理,并基于数据分析结果获得所述生理信号数据对应的第二情绪状态;
18、基于所述咨询语音信号数据进行语音中的情绪识别处理,获得所述咨询语音信号数据对应的第三情绪状态;
19、基于所述第一情绪状态、所述第二情绪状态和所述第三情绪状态生成所述咨询用户的当前情绪状态。
20、可选的,所述基于所述人脸图像数据进行图像中的情绪提取处理,获得人脸图像数据对应的第一情绪状态,包括:
21、将所述人脸图像数据输入densenet网络模型中的多尺度空洞卷积模块中进行特征融合处理,获得融合人脸图像特征数据;
22、将所述融合人脸图像特征数据据输入densenet网络模型中的densenet-bc模块中进行图像中的情绪提取处理,获得人脸图像数据对应的第一情绪状态;所述densenet-bc模块中的使用的优化器为adam优化器;所述densenet-bc模块中由四个稠密连接块和过度层交替连接组成。
23、可选的,所述基于所述咨询语音信号数据进行语音中的情绪识别处理,获得所述咨询语音信号数据对应的第三情绪状态,包括:
24、对所述咨询语音信号数据进行音频预处理,获得预处理后的咨询语音信号数据,所述音频预处理依次包括反混叠滤波处理、重采样及量化处理、加窗及分帧处理、端点检测处理;
25、对预处理后的咨询语音信号数据进行特征提取处理,获得提取语音特征数据,所述提取语音特征数据中包含发音速率特征数据、短时能量特征数据、基音周期和频率特征数据、梅尔倒浦系数特征数据以及样本熵特征数据;
26、基于主元贡献分析算法对所述提取语音特征数据进行特征筛选处理,获得筛选语音特征数据;
27、基于所述筛选语音特征数据在预设语音情绪识别模型中进行语音情绪识别处理,获得所述咨询语音信号数据对应的第三情绪状态;所述预设语音情绪识别模型为训练收敛的bp神经网络模型。
28、可选的,所述将所述咨询语音信号数据转化为语音文本数据,并对所述语音文本数据进行语义提取处理,获得所述咨询用户的咨询语义信息,包括:
29、基于语音识别算法将所述咨询语音信号数据转化为语音文本数据;
30、基于自然语言算法对所述语音文本数据进行语义提取处理,获得所述咨询用户的咨询语义信息。
31、可选的,所述基于所述当前情绪状态在ai咨询模式数据库中匹配到对应的ai咨询模式,并获得所述ai咨询模式对应的ai语言模型,包括:
32、利用所述当前情绪状态在所述ai咨询模式数据库中进行ai咨询模式匹配处理,获得匹配的ai咨询模式;
33、根据匹配的ai咨询模式索引到对应的ai语言模型,所述ai语言模型中嵌入有与所述当前情绪状态相匹配的自然语言处理模型。
34、可选的,所述ai咨询终端基于所述心理咨询对话语音信号与所述咨询用户进行心理咨询对话处理,直至心理咨询对话结束,包括:
35、所述ai咨询终端将所述心理咨询对话语音信号加载至所述咨询用户佩戴的咨询交互的耳麦设备中进行心理咨询对话处理;
36、所述ai咨询终端判断与所述咨询用户的心理咨询对话是否结束,若未结束时,则返回所述ai咨询终端实时采集咨询用户的人脸图像数据、生理信号数据以及咨询语音信号数据,直至心理咨询对话结束为止。
37、另外,本发明实施例还提供了一种基于ai进行心理咨询的系统,所述系统包括:
38、实时采集模块:用于咨询用户在ai咨询终端进行心理咨询时,所述ai咨询终端实时采集咨询用户的人脸图像数据、生理信号数据以及咨询语音信号数据;
39、情绪提取模块:用于分别对所述人脸图像数据、生理信号数据以及咨询语音信号数据进行情绪提取处理,获得所述咨询用户的当前情绪状态;
40、语义提取模块:用于将所述咨询语音信号数据转化为语音文本数据,并对所述语音文本数据进行语义提取处理,获得所述咨询用户的咨询语义信息;
41、匹配模块:用于基于所述当前情绪状态在ai咨询模式数据库中匹配到对应的ai咨询模式,并获得所述ai咨询模式对应的ai语言模型;
42、生成模块:用于将所述咨询语义信息输入所述ai语言模型中生成对应的心理咨询对话语音信号;
43、咨询对话模块:用于所述ai咨询终端基于所述心理咨询对话语音信号与所述咨询用户进行心理咨询对话处理,直至心理咨询对话结束。
44、在本发明实施例中,咨询用户在ai咨询终端进行心理咨询时,所述ai咨询终端实时采集咨询用户的人脸图像数据、生理信号数据以及咨询语音信号数据;分别对所述人脸图像数据、生理信号数据以及咨询语音信号数据进行情绪提取处理,获得所述咨询用户的当前情绪状态;将所述咨询语音信号数据转化为语音文本数据,并对所述语音文本数据进行语义提取处理,获得所述咨询用户的咨询语义信息;基于所述当前情绪状态在ai咨询模式数据库中匹配到对应的ai咨询模式,并获得所述ai咨询模式对应的ai语言模型;将所述咨询语义信息输入所述ai语言模型中生成对应的心理咨询对话语音信号;所述ai咨询终端基于所述心理咨询对话语音信号与所述咨询用户进行心理咨询对话处理,直至心理咨询对话结束。可以获得咨询用户的当前情绪状态,并且根据当前情绪状态与咨询用户进行咨询对话,提高心理咨询的效率,从而有效的帮助咨询用户调整心理疾病问题。
1.一种基于ai进行心理咨询的方法,其特征在于,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述咨询用户在ai咨询终端进行心理咨询时,包括:
3.根据权利要求1所述的方法,其特征在于,所述ai咨询终端实时采集咨询用户的人脸图像数据、生理信号数据以及咨询语音信号数据,包括:
4.根据权利要求1所述的方法,其特征在于,所述分别对所述人脸图像数据、生理信号数据以及咨询语音信号数据进行情绪提取处理,获得所述咨询用户的当前情绪状态,包括:
5.根据权利要求4所述的方法,其特征在于,所述基于所述人脸图像数据进行图像中的情绪提取处理,获得人脸图像数据对应的第一情绪状态,包括:
6.根据权利要求4所述的方法,其特征在于,所述基于所述咨询语音信号数据进行语音中的情绪识别处理,获得所述咨询语音信号数据对应的第三情绪状态,包括:
7.根据权利要求1所述的方法,其特征在于,所述将所述咨询语音信号数据转化为语音文本数据,并对所述语音文本数据进行语义提取处理,获得所述咨询用户的咨询语义信息,包括:
8.根据权利要求1所述的方法,其特征在于,所述基于所述当前情绪状态在ai咨询模式数据库中匹配到对应的ai咨询模式,并获得所述ai咨询模式对应的ai语言模型,包括:
9.根据权利要求1所述的方法,其特征在于,所述ai咨询终端基于所述心理咨询对话语音信号与所述咨询用户进行心理咨询对话处理,直至心理咨询对话结束,包括:
10.一种基于ai进行心理咨询的系统,其特征在于,所述系统包括: