本申请涉及图像处理,且更为具体地,涉及基于图像处理的中控显示内容定制方法和系统。
背景技术:
1、随着智能车辆和车联网技术的快速发展,车辆中控系统已经成为现代汽车不可或缺的一部分。中控系统不仅提供了导航、娱乐、通信等功能,还能够根据用户的个性化需求提供定制化的服务。然而,现有的中控系统在内容显示方面存在一些局限性,尤其是在根据用户的行为特征来定制显示内容方面。由于缺乏对用户行为的深入理解,中控系统提供的内容可能与用户的实际需求不匹配,导致用户体验不佳。例如,用户可能对某个地点感兴趣,但系统并未提供相关的信息;或者系统提供的信息过多,造成信息过载。而过多或不相关的信息显示可能会分散驾驶员的注意力,影响行车安全。
2、因此,需要一种新的技术方案,能够智能化感知车辆内用户的意图,从而通过中控系统展示符合用户需求的内容。
技术实现思路
1、为了解决上述技术问题,提出了本申请,以提供一种基于图像处理的中控显示内容定制方法和系统,能够智能化感知车辆内用户的意图,从而通过中控系统展示符合用户需求的内容。
2、第一方面,本申请提供了一种基于图像处理的中控显示内容定制方法,包括:获取车辆的行驶路线,获取所述车辆的当前位置;根据所述车辆的行驶路线和当前位置,预测所述车辆将要途经的多个地点;拍摄所述车辆内的用户的图像;根据所述用户的图像,识别所述用户的行为特征;根据所述用户的行为特征,计算所述用户对所述多个地点的兴趣程度;根据所述用户对所述多个地点的兴趣程度高低,从所述多个地点中选出目标地点;获取所述目标地点有关的内容,通过车辆的中控系统进行显示。
3、可选地,前述的基于图像处理的中控显示内容定制方法,根据所述用户的图像,识别所述用户的行为特征,包括:在所述车辆内有多个用户时,从已拍摄的包含所述多个用户的图像中,识别所述多个用户的身份;根据所述多个用户的身份,分析所述多个用户之间的关系;根据所述多个用户之间的关系,从所述多个用户选择一个用户,并分析所选用户的行为特征。
4、可选地,前述的基于图像处理的中控显示内容定制方法,根据所述用户的图像,识别所述用户的行为特征,包括:从所述用户的图像中,识别所述用户的头部;从所述用户的头部位置,检测所述用户的眼球中心位置和瞳孔中心位置,以及分析所述用户的头部在水平方向和垂直方向的偏转角度;计算所述用户的视线方向,作为所述用户的行为特征。
5、可选地,前述的基于图像处理的中控显示内容定制方法,所述分析所述用户的头部在水平方向和垂直方向的偏转角度,包括:从所述用户的头部,检测所述用户的面部关键点,其中第i个面部关键点的坐标为;建立投影误差函数,其中,函数为三维空间到二维平面的投影函数,为预设的标准面部模型上的第i个面部关键点,、分别为旋转矩阵、平移矩阵,求解投影误差函数取最小值时所述旋转矩阵、所述平移矩阵的值;对所述旋转矩阵进行分解,得到所述用户的头部在水平方向和垂直方向的偏转角度。
6、可选地,前述的基于图像处理的中控显示内容定制方法,根据所述用户的图像,识别所述用户的行为特征,包括:从所述用户的图像中,识别所述用户的手部区域;按预设方式对所述用户的手部区域进行光照补偿;根据光照补偿后的所述用户的手部区域,识别用户的手势动作,作为所述用户的行为特征。
7、可选地,前述的基于图像处理的中控显示内容定制方法,按预设方式对所述用户的手部区域进行光照补偿,包括:检测所述用户的手部区域的每个像素的光照强度;计算所述用户的手部区域的平均光照强度;对所述用户的手部区域的每个像素进行光照补偿,其中第j个像素光照补偿后的像素值,其中为预设的目标光照亮度,为所述第j个像素光照补偿前的像素值,为所述第j个像素的光照亮度,k为预设的权重系数,为所述用户的手部区域的平均光照强度。
8、可选地,前述的基于图像处理的中控显示内容定制方法,在根据所述用户的行为特征,计算所述用户对所述多个地点的兴趣程度之前,还包括:采集所述用户的语音,并转换为文本进行分词;计算所述文本中每个词语的词频、文档频率、上下文嵌入向量;计算所述每个词语的情感倾向,其中第m个词语的情感倾向,其中为预设的权重值,为所述第m个词语的上下文嵌入向量,为偏移值;计算所述每个词语的综合评分,其中为所述第m个词语的词频,n为预设的文档集合中所有文档的数量,为所述第m个词语的文档频率,表示所述文档集合中包含所述第m个词语的文档数量;根据所述每个词语的综合评分,从所述文本中挑选关键词;使用所述关键词补充所述用户的行为特征。
9、可选地,前述的基于图像处理的中控显示内容定制方法,获取所述目标地点有关的内容,通过车辆的中控系统进行显示,包括:获取所述目标地点有关的多项内容;计算所述多项内容的信息容量;根据所述多项内容的信息内容,设置所述多个内容在所述中控系统上的显示区域;通过所述中控系统上设置的显示区域,显示所述多项内容。
10、第二方面,本申请提供了一种基于图像处理的中控显示内容定制系统,包括:路线位置模块,获取车辆的行驶路线,获取所述车辆的当前位置;地点预测模块,根据所述车辆的行驶路线和当前位置,预测所述车辆将要途经的多个地点;图像拍摄模块,拍摄所述车辆内的用户的图像;特征识别模块,根据所述用户的图像,识别所述用户的行为特征;兴趣计算模块,根据所述用户的行为特征,计算所述用户对所述多个地点的兴趣程度;地点选择模块,根据所述用户对所述多个地点的兴趣程度高低,从所述多个地点中选出目标地点;显示模块,获取所述目标地点有关的内容,通过车辆的中控系统进行显示。
11、本申请的上述一个或多个技术方案至少具有如下一种或多种有益效果:
12、根据本发明的技术方案,能够根据用户的面部表情、视线方向、手势类型等行为特征,推断出用户的兴趣和意图,从而可以提供更加个性化的中控系统显示服务,满足用户的个性化需求。例如,如果用户在驾驶过程中表现出对某个景点的兴趣(如频繁注视或指向某个方向),系统可以自动显示该景点的相关信息,包括地图、图片、文字描述等。
1.基于图像处理的中控显示内容定制方法,其特征在于,包括:
2.根据权利要求1所述的基于图像处理的中控显示内容定制方法,其特征在于,根据所述用户的图像,识别所述用户的行为特征,包括:
3.根据权利要求1所述的基于图像处理的中控显示内容定制方法,其特征在于,根据所述用户的图像,识别所述用户的行为特征,包括:
4.根据权利要求3所述的基于图像处理的中控显示内容定制方法,其特征在于,分析所述用户的头部在水平方向和垂直方向的偏转角度,包括:
5.根据权利要求1所述的基于图像处理的中控显示内容定制方法,其特征在于,根据所述用户的图像,识别所述用户的行为特征,包括:
6.根据权利要求5所述的基于图像处理的中控显示内容定制方法,其特征在于,按预设方式对所述用户的手部区域进行光照补偿,包括:
7.根据权利要求1所述的基于图像处理的中控显示内容定制方法,其特征在于,在根据所述用户的行为特征,计算所述用户对所述多个地点的兴趣程度之前,还包括:
8.根据权利要求1所述的基于图像处理的中控显示内容定制方法,其特征在于,获取所述目标地点有关的内容,通过车辆的中控系统进行显示,包括:
9.基于图像处理的中控显示内容定制系统,其特征在于,包括:
