本申请涉及智能反馈,尤其涉及基于多模态智能感知的机器人自适应情感反馈系统。
背景技术:
1、情感反馈系统应用于人机互动领域,通过识别和回应用户的情感状态,提升互动的自然性和用户体验。
2、目前,现有的情感反馈系统主要依赖于有限的感知数据源,通常包括视觉、听觉或文本分析。在情感识别和反馈的准确性上存在显著不足,难以全面捕捉用户的真实情感状态。此外,现有技术缺乏对多模态数据的整合和深度分析,无法有效处理用户情感的复杂变化,导致情感反馈的个性化和精准度较低。由于缺乏对用户长期情感历史和深度情绪体验的挖掘,现有系统在情感支持的持续性和适应性上也存在明显的局限。
3、综上所述,现有技术中存在由于单一或有限的感知数据源依赖,导致情感识别和反馈的准确性不足,进一步影响情感反馈系统的个性化和精准度的技术问题。
技术实现思路
1、本申请的目的是提供基于多模态智能感知的机器人自适应情感反馈系统,用以解决现有技术中存在由于单一或有限的感知数据源依赖,导致情感识别和反馈的准确性不足,进一步影响情感反馈系统的个性化和精准度的技术问题。
2、鉴于上述问题,本申请提供了基于多模态智能感知的机器人自适应情感反馈系统。
3、本申请提供了基于多模态智能感知的机器人自适应情感反馈系统,包括:多模态感知数据获取模块,用于通过多模态感知数据获取模块,获取目标用户的多模态感知数据,所述多模态感知数据获取模块包括视觉感知设备、听觉感知设备、触觉感知设备、生理信号感知设备;情绪类别识别模块,用于基于所述多模态感知数据,使用人格类型框架关联预训练所对应的初始情感识别模型,识别出情绪类别,所述情绪类别包括正向情绪指标、中性情绪指标、反向情绪指标;虚拟情境搭建模块,用于基于所述多模态感知数据,与所述情绪类别中的正向情绪指标,搭建第一虚拟情境;基于所述多模态感知数据,与所述情绪类别中的中性情绪指标,搭建第二虚拟情境;基于所述多模态感知数据,与所述情绪类别中的反向情绪指标,搭建第三虚拟情境;第一情感反馈集合得到模块,用于在所述第一虚拟情境中,结合所述目标用户的人格类型框架所限定的人格类型,通过所述多模态感知数据的变化趋势,进行情绪调节与情绪变化分析,得到第一情感反馈集合;第二情感反馈集合得到模块,用于在所述第二虚拟情境中,结合所述目标用户的人格类型框架所限定的人格类型,通过所述多模态感知数据的变化趋势,进行情绪调节与情绪变化分析,得到第二情感反馈集合;第三情感反馈集合得到模块,用于在所述第三虚拟情境中,结合所述目标用户的人格类型框架所限定的人格类型,通过所述多模态感知数据的变化趋势,进行情绪调节与情绪变化分析,得到第三情感反馈集合;适应情感反馈结果获取模块,用于基于所述目标用户的历史对话内容,通过自然语言处理技术,对用户的语言使用、表达方式和情感词汇进行深度情绪体验挖掘,获取深度情绪指标,所述深度情绪指标反映用户深层次、持久的情绪体验,并对所述第一情感反馈集合、第二情感反馈集合、第三情感反馈集合进行矛盾自适应同化,获取适应情感反馈结果。
4、本申请中提供的一个或多个技术方案,至少具有如下技术效果或优点:
5、通过多模态感知数据获取模块,用于通过多模态感知数据获取模块,获取目标用户的多模态感知数据,所述多模态感知数据获取模块包括视觉感知设备、听觉感知设备、触觉感知设备、生理信号感知设备;情绪类别识别模块,用于基于所述多模态感知数据,使用人格类型框架关联预训练所对应的初始情感识别模型,识别出情绪类别,所述情绪类别包括正向情绪指标、中性情绪指标、反向情绪指标;虚拟情境搭建模块,用于基于所述多模态感知数据,与所述情绪类别中的正向情绪指标,搭建第一虚拟情境;基于所述多模态感知数据,与所述情绪类别中的中性情绪指标,搭建第二虚拟情境;基于所述多模态感知数据,与所述情绪类别中的反向情绪指标,搭建第三虚拟情境;第一情感反馈集合得到模块,用于在所述第一虚拟情境中,结合所述目标用户的人格类型框架所限定的人格类型,通过所述多模态感知数据的变化趋势,进行情绪调节与情绪变化分析,得到第一情感反馈集合;第二情感反馈集合得到模块,用于在所述第二虚拟情境中,结合所述目标用户的人格类型框架所限定的人格类型,通过所述多模态感知数据的变化趋势,进行情绪调节与情绪变化分析,得到第二情感反馈集合;第三情感反馈集合得到模块,用于在所述第三虚拟情境中,结合所述目标用户的人格类型框架所限定的人格类型,通过所述多模态感知数据的变化趋势,进行情绪调节与情绪变化分析,得到第三情感反馈集合;适应情感反馈结果获取模块,用于基于所述目标用户的历史对话内容,通过自然语言处理技术,对用户的语言使用、表达方式和情感词汇进行深度情绪体验挖掘,获取深度情绪指标,所述深度情绪指标反映用户深层次、持久的情绪体验,并对所述第一情感反馈集合、第二情感反馈集合、第三情感反馈集合进行矛盾自适应同化,获取适应情感反馈结果,实现了精准情感识别与个性化情感反馈的技术目标,达到了提升用户互动满意度和情感体验的技术效果。
6、上述说明仅是本申请技术方案的概述,为了能够更清楚了解本申请的技术手段,而可依照说明书的内容予以实施,并且为了让本申请的上述和其他目的、特征和优点能够更明显易懂,以下特举本申请的具体实施方式。应当理解,本部分所描述的内容并非旨在标识本申请的实施例的关键或重要特征,也不用于限制本申请的范围。本申请的其他特征将通过以下的说明书而变得容易理解。
1.基于多模态智能感知的机器人自适应情感反馈系统,其特征在于,包括:
2.如权利要求1所述的基于多模态智能感知的机器人自适应情感反馈系统,其特征在于,所述虚拟适配情境包括n个虚拟情境以最优引入时机与最优持续时间所形成的组合情境,还包括:
3.如权利要求2所述的基于多模态智能感知的机器人自适应情感反馈系统,其特征在于,基于所述第一虚拟情境对应的交互信息、所述第一情绪变化轨迹,遍历所述n个虚拟情境,包括:
4.如权利要求3所述的基于多模态智能感知的机器人自适应情感反馈系统,其特征在于,包括:
