所属的技术人员能够理解,本公开的各个方面可以实现为系统、方法或程序产品。因此,本公开的各个方面可以具体实现为以下形式,即:完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等),或硬件和软件方面结合的实施方式,这里可以统称为“电路”、“模块”或“系统”。在一些可能的实施方式中,根据本公开的电子设备可以至少包括至少一个处理器、以及至少一个计算机存储介质。其中,计算机存储介质存储有程序代码,当程序代码被处理器执行时,使得处理器执行本说明书上述描述的根据本公开各种示例性实施方式的机场中特定人员的识别方法中的步骤。例如,处理器可以执行如图3中所示的步骤301-303。下面参照图12来描述根据本公开的这种实施方式的电子设备1200。图12显示的电子设备1200仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。如图12所示,电子设备1200以通用电子设备的形式表现。电子设备1200的组件可以包括但不限于:上述至少一个处理器1201、上述至少一个计算机存储介质1202、连接不同系统组件(包括计算机存储介质1202和处理器1201)的总线1203。总线1203表示几类总线结构中的一种或多种,包括计算机存储介质总线或者计算机存储介质控制器、外围总线、处理器或者使用多种总线结构中的任意总线结构的局域总线。计算机存储介质1202可以包括易失性计算机存储介质形式的可读介质,例如随机存取计算机存储介质(ram)1221和/或高速缓存存储介质1222,还可以进一步包括只读计算机存储介质(rom)1223。计算机存储介质1202还可以包括具有一组(至少一个)程序模块1224的程序/实用工具1225,这样的程序模块1224包括但不限于:操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。电子设备1200也可以与一个或多个外部设备1204(例如键盘、指向设备等)通信,还可与一个或者多个使得用户能与电子设备1200交互的设备通信,和/或与使得该电子设备1200能与一个或多个其它电子设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(i/o)接口1205进行。并且,电子设备1200还可以通过网络适配器1206与一个或者多个网络(例如局域网(lan),广域网(wan)和/或公共网络,例如因特网)通信。如图所示,网络适配器1206通过总线1203与用于电子设备1200的其它模块通信。应当理解,尽管图中未示出,可以结合电子设备1200使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理器、外部磁盘驱动阵列、raid系统、磁带驱动器以及数据备份存储系统等。在一些可能的实施方式中,本公开提供的一种机场中特定人员的识别方法的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当程序产品在计算机设备上运行时,程序代码用于使计算机设备执行本说明书上述描述的根据本公开各种示例性实施方式的机场中特定人员的识别方法中的步骤。程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以是但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取计算机存储介质(ram)、只读计算机存储介质(rom)、可擦式可编程只读计算机存储介质(eprom或闪存)、光纤、便携式紧凑盘只读计算机存储介质(cd-rom)、光计算机存储介质件、磁计算机存储介质件、或者上述的任意合适的组合。本公开的实施方式的机场中特定人员的识别的程序产品可以采用便携式紧凑盘只读计算机存储介质(cd-rom)并包括程序代码,并可以在电子设备上运行。然而,本公开的程序产品不限于此,在本文件中,可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了可读程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质,该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于无线、有线、光缆、rf等等,或者上述的任意合适的组合。可以以一种或多种程序设计语言的任意组合来编写用于执行本公开操作的程序代码,程序设计语言包括面向对象的程序设计语言—诸如java、c++等,还包括常规的过程式程序设计语言—诸如“c”语言或类似的程序设计语言。程序代码可以完全地在用户电子设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户电子设备上部分在远程电子设备上执行、或者完全在远程电子设备或服务器上执行。在涉及远程电子设备的情形中,远程电子设备可以通过任意种类的网络包括局域网(lan)或广域网(wan)连接到用户电子设备,或者,可以连接到外部电子设备(例如利用因特网服务提供商来通过因特网连接)。应当注意,尽管在上文详细描述中提及了装置的若干模块,但是这种划分仅仅是示例性的并非强制性的。实际上,根据本公开的实施方式,上文描述的两个或更多模块的特征和功能可以在一个模块中具体化。反之,上文描述的一个模块的特征和功能可以进一步划分为由多个模块来具体化。此外,尽管在附图中以特定顺序描述了本公开方法的操作,但是,这并非要求或者暗示必须按照该特定顺序来执行这些操作,或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地,可以省略某些步骤,将多个步骤合并为一个步骤执行,和/或将一个步骤分解为多个步骤执行。本领域内的技术人员应明白,本公开的实施例可提供为方法、系统、或计算机程序产品。因此,本公开可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本公开可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘计算机存储介质、cd-rom、光学计算机存储介质等)上实施的计算机程序产品的形式。本公开是参照根据本公开的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读计算机存储介质中,使得存储在该计算机可读计算机存储介质中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。显然,本领域的技术人员可以对本公开进行各种改动和变型而不脱离本公开的精神和范围。这样,倘若本公开的这些修改和变型属于本公开权利要求及其等同技术的范围之内,则本公开也意图包含这些改动和变型在内。
背景技术:
1、在机场枢纽运行管理的应用场景中,特定人员(例如,黄牛或黑车司机等)已经成为普遍现象,且已形成成熟的违法利益链。这种非法营运的行为安全隐患极大,易侵害乘客财产,损害客运市场经营秩序,恶劣的可引发社会治安案件等。
2、现有技术中,识别机场中特定人员的方式主要包括两种:一种是通过机场安保及秩序维护人员通过视频监控或现场人工的方式进行干预管理,该方式缺少有效技术辅助管理手段,并且效率以及准确率较低。另一种是基于人脸比对分析将长时间逗留在机场中的人作为特定人员进行上报。但是,近几年,出行的用户普遍都佩戴口罩,基于传统人脸识别的手段进行特定人员比对分析存在技术实现的局限性,难以有效检测人脸。并且,只是将长时间逗留的人就确定为特定人员,会导致正常的大量的旅客会被识别成特定人员进行上报,所以,机场中特定人员识别的准确较低。
技术实现思路
1、本公开示例性的实施方式中提供一种机场中特定人员的识别方法及电子设备,用于提高机场中特定人员的识别准确率。
2、本公开的第一方面提供一种机场中特定人员的识别方法,所述方法包括:
3、每隔指定时长,获取机场中多个目标区域在所述指定时长内的监控视频;
4、利用目标检测算法对获取到的监控视频中的目标视频图像进行目标检测,得到所述目标视频图像中各第一目标对象的检测参数,其中,所述检测参数包括所述第一目标对象在所述目标视频图像中包围盒的位置坐标以及所述第一目标对象的目标特征向量,且所述目标特征向量包括身高特征、胖瘦特征、人体姿态特征以及人脸特征;以及,
5、针对任意一个第一目标对象,若根据所述第一目标对象在所述目标视频图像中包围盒的位置坐标以及所述目标特征向量,在预先存储的机场特定人员数据库中查找到与所述第一目标对象的相似度满足第一预设条件的目标特定人员,则确定所述第一目标对象为机场特征人员;其中,通过以下方式得到所述机场特定人员数据库:
6、利用所述目标检测算法对所述多个目标区域分别在指定历史时间段内的历史监控视频中的各目标历史视频图像分别进行目标检测,得到各目标历史视频图像中各第二目标对象的检测参数,并基于所述各目标历史视频图像中各第二目标对象的检测参数,分别得到任意两个目标历史视频图像中各第二目标对象之间相似度,根据任意两个目标历史视频图像中各第二目标对象之间的相似度,得到所述各第二目标对象在指定历史时间段内的机场出行信息,将所述机场出行信息满足第二预设条件的各第二目标对象的目标检测参数进行存储,得到所述机场特征人员数据库,其中,所述目标检测参数为拍摄时间与当前时间的差值最小的目标历史监控视频得到的检测参数。
7、本实施例中通过获取机场中多个目标区域在指定时长内的监控视频,然后利用目标检测算法对获取到的监控视频中的任意一个目标视频图像进行目标检测,得到视频图像中各第一目标对象中包围盒的位置坐标以及第一目标对象的目标特征向量针对任意一个第一目标对象,根据第一目标对象在目标视频图像中包围盒的位置坐标以及目标特征向量,在预先存储的机场中特定人员数据库中查找是否存在与第一目标对象的相似度满足预设条件的目标特定人员;若存在,则确定第一目标对象为特定人员。由此,本技术实施例中是第一目标对象的包围盒的位置、身高特征、胖瘦特征、人体姿态特征以及人脸特征来与预先建立的特定人员数据库中的特定人员进行时空跟踪关联,以此来识别出特定人员。提高了机场中特定人员识别的准确率。并且,本技术实施例中根据通过对历史监控视频进行目标检测得到的检测参数来确定出各第二目标对象的机场出行信息,并通过各目标对象的机场出行信息来建立机场特定人员数据库,保证了机场特征人员数据库的准确性,进一步提高了机场中特定人员识别的准确率。
8、在一个实施例中,所述确定所述第一目标对象为机场特定人员之后,所述方法还包括:
9、针对任意一个为机场特定人员的第一目标对象,利用预先设置好的各目标区域之间的层级关系,确定与识别出所述第一目标对象的监控视频所在的目标区域相对应的相邻目标区域;其中,所述相邻目标区域包括在所述层级关系中位于所述目标区域上一层级的目标区域和位于所述目标区域下一层级的目标区域;并,
10、针对任意一个相邻目标区域,将所述相邻目标区域在所述指定时长内的监控视频确定为所述获取到的监控视频后,返回利用目标检测算法对获取到的监控视频中的目标视频图像进行目标检测的步骤,其中,在所述相邻目标区域内获取的监控视频的时长与在所述目标区域内获取的监控视频的时长相同,且在所述相邻目标区域内获取到的监控视频的时间段与在所述目标区域内获取到的监控视频的时间段不同;
11、若所述相邻目标区域在所述指定时长内的监控视频中存在所述第一目标对象,则将所述相邻目标区域确定为所述目标区域后,返回利用预先设置好的各目标区域之间的层级关系,确定与识别出所述目标对象的监控视频所在的目标区域相对应的相邻目标区域的步骤,直至不存在对应的相邻目标区域或所述相邻目标区域中不存在所述第一目标对象;并,
12、基于各目标区域之间的层级关系,得到所述第一目标对象的轨迹;
13、根据所述第一目标对象的轨迹以及所述第一目标对象在监控视频中的图像进行机场特定人员预警。
14、本实施例通过在确定第一目标对象为特定人员之后来确定出该第一目标对象的轨迹再进行特定人员预警,实现了对特定人员的过程取证,并且将第一目标对象的轨迹以及其图像发送给管理人员进行预警,以便于管理人员进行实施布控。
15、在一个实施例中,通过以下方式确定所述机场特定人员数据库中是否存在与所述第一目标对象的相似度满足第一预设条件的目标特定人员:
16、根据所述机场特定人员数据库中各机场特定人员的检测参数以及所述第一目标对象的检测参数,得到所述各机场特定人员分别与所述第一目标对象之间的相似度;
17、若所述相似度满足所述第一预设条件,则确定所述机场特定人员为所述第一目标对象对应的所述目标特定人员。
18、在一个实施例中,通过以下方式得到任意一个机场特定人员与所述第一目标对象之间的相似度:
19、根据所述机场特定人员的包围盒的位置坐标以及所述第一目标对象的包围盒的位置坐标,得到第一相似度指标;以及,
20、通过所述机场特定人员的目标特征向量以及所述第一目标对象的目标特征向量,得到第二相似度指标;
21、基于所述第一相似度指标和所述第二相似度指标,得到所述机场特定人员与所述第一目标对象之间的相似度。
22、本技术实施例中通过包围盒的位置以及目标特征向量两个维度的参数来确定出第一目标对象与特定人员数据库中的特定人员的相似度,由此,保证了确定出的相似度的准确率。
23、在一个实施例中,所述根据所述机场特定人员的包围盒的位置坐标以及所述第一目标对象的包围盒的位置坐标,得到第一相似度指标,包括:
24、根据所述机场特定人员的包围盒的位置坐标以及所述第一目标对象的包围盒的位置坐标,得到所述机场特定人员与所述第一目标对象之间的余弦距离,并基于所述余弦距离确定所述第一相似度指标;
25、所述通过所述机场特定人员的目标特征向量以及所述第一目标对象的目标特征向量,得到第二相似度指标,包括:
26、根据所述机场特定人员的目标特征向量以及所述第一目标对象的目标特征向量,确定所述机场特定人员与所述第一目标对象之间的马哈拉诺比斯距离,并基于所述马哈拉诺比斯距离确定所述第二相似度指标。
27、在一个实施例中,所述根据任意两个目标历史视频图像中各第二目标对象之间的相似度,得到所述各第二目标对象在指定历史时间段内的机场出行信息,包括:
28、基于任意两个目标历史视频图像中所述各第二目标对象之间的相似度,得到同一第二目标对象所在的各目标历史视频图像;
29、根据同一第二目标对象所在的各目标历史视频图像,确定所述第二目标对象在各指定时间段内出现的频次以及出行时间段,其中,所述历史时间段包含所述各指定时间段;
30、利用所述各第二目标对象分别在各指定时间段内出现的频次以及出行时间段,得到所述各第二目标对象各自的机场出行信息。
31、本技术实施例中通过各第二目标对象在各指定历史时间段内出现的频次以及出现时对应的目标时间段来确定出第二目标对象的机场出行信息,保证了机场特定人员数据库的准确率。
32、本公开第二方面提供一种电子设备,包括处理器和存储器,所述处理器和所述存储器通过总线连接;
33、所述存储器中存储有计算机程序,所述处理器被配置为基于所述计算机程序执行以下操作:
34、每隔指定时长,获取机场中多个目标区域在所述指定时长内的监控视频;
35、利用目标检测算法对获取到的监控视频中的目标视频图像进行目标检测,得到所述目标视频图像中各第一目标对象的检测参数,其中,所述检测参数包括所述第一目标对象在所述目标视频图像中包围盒的位置坐标以及所述第一目标对象的目标特征向量,且所述目标特征向量包括身高特征、胖瘦特征、人体姿态特征以及人脸特征;以及,
36、针对任意一个第一目标对象,若根据所述第一目标对象在所述目标视频图像中包围盒的位置坐标以及所述目标特征向量,在预先存储的机场特定人员数据库中查找到与所述第一目标对象的相似度满足第一预设条件的目标特定人员,则确定所述第一目标对象为机场特征人员;其中,通过以下方式得到所述机场特定人员数据库:
37、利用所述目标检测算法对所述多个目标区域分别在指定历史时间段内的历史监控视频中的各目标历史视频图像分别进行目标检测,得到各目标历史视频图像中各第二目标对象的检测参数,并基于所述各目标历史视频图像中各第二目标对象的检测参数,分别得到任意两个目标历史视频图像中各第二目标对象之间相似度,根据任意两个目标历史视频图像中各第二目标对象之间的相似度,得到所述各第二目标对象在指定历史时间段内的机场出行信息,将所述机场出行信息满足第二预设条件的各第二目标对象的目标检测参数进行存储,得到所述机场特征人员数据库,其中,所述目标检测参数为拍摄时间与当前时间的差值最小的目标历史监控视频得到的检测参数。
38、在一个实施例中,所述处理器,还被配置为:
39、所述确定所述第一目标对象为机场特定人员之后,针对任意一个为机场特定人员的第一目标对象,利用预先设置好的各目标区域之间的层级关系,确定与识别出所述第一目标对象的监控视频所在的目标区域相对应的相邻目标区域;其中,所述相邻目标区域包括在所述层级关系中位于所述目标区域上一层级的目标区域和位于所述目标区域下一层级的目标区域;并,
40、针对任意一个相邻目标区域,将所述相邻目标区域在所述指定时长内的监控视频确定为所述获取到的监控视频后,返回利用目标检测算法对获取到的监控视频中的目标视频图像进行目标检测的步骤,其中,在所述相邻目标区域内获取的监控视频的时长与在所述目标区域内获取的监控视频的时长相同,且在所述相邻目标区域内获取到的监控视频的时间段与在所述目标区域内获取到的监控视频的时间段不同;
41、若所述相邻目标区域在所述指定时长内的监控视频中存在所述第一目标对象,则将所述相邻目标区域确定为所述目标区域后,返回利用预先设置好的各目标区域之间的层级关系,确定与识别出所述目标对象的监控视频所在的目标区域相对应的相邻目标区域的步骤,直至不存在对应的相邻目标区域或所述相邻目标区域中不存在所述第一目标对象;并,
42、基于各目标区域之间的层级关系,得到所述第一目标对象的轨迹;
43、根据所述第一目标对象的轨迹以及所述第一目标对象在监控视频中的图像进行机场特定人员预警。
44、在一个实施例中,所述处理器,还被配置为:
45、通过以下方式确定所述机场特定人员数据库中是否存在与所述第一目标对象的相似度满足第一预设条件的目标特定人员:
46、根据所述机场特定人员数据库中各机场特定人员的检测参数以及所述第一目标对象的检测参数,得到所述各机场特定人员分别与所述第一目标对象之间的相似度;
47、若所述相似度满足所述第一预设条件,则确定所述机场特定人员为所述第一目标对象对应的所述目标特定人员。
48、在一个实施例中,所述处理器,还被配置为:
49、通过以下方式得到任意一个机场特定人员与所述第一目标对象之间的相似度:
50、根据所述机场特定人员的包围盒的位置坐标以及所述第一目标对象的包围盒的位置坐标,得到第一相似度指标;以及,
51、通过所述机场特定人员的目标特征向量以及所述第一目标对象的目标特征向量,得到第二相似度指标;
52、基于所述第一相似度指标和所述第二相似度指标,得到所述机场特定人员与所述第一目标对象之间的相似度。
53、在一个实施例中,所述处理器执行所述根据所述机场特定人员的包围盒的位置坐标以及所述第一目标对象的包围盒的位置坐标,得到第一相似度指标,具体被配置为:
54、根据所述机场特定人员的包围盒的位置坐标以及所述第一目标对象的包围盒的位置坐标,得到所述机场特定人员与所述第一目标对象之间的余弦距离,并基于所述余弦距离确定所述第一相似度指标;
55、所述处理器执行所述通过所述机场特定人员的目标特征向量以及所述第一目标对象的目标特征向量,得到第二相似度指标,具体被配置为:
56、根据所述机场特定人员的目标特征向量以及所述第一目标对象的目标特征向量,确定所述机场特定人员与所述第一目标对象之间的马哈拉诺比斯距离,并基于所述马哈拉诺比斯距离确定所述第二相似度指标。
57、在一个实施例中,所述处理器执行所述根据任意两个目标历史视频图像中各第二目标对象之间的相似度,得到所述各第二目标对象在指定历史时间段内的机场出行信息,具体被配置为:
58、基于任意两个目标历史视频图像中所述各第二目标对象之间的相似度,得到同一第二目标对象所在的各目标历史视频图像;
59、根据同一第二目标对象所在的各目标历史视频图像,确定所述第二目标对象在各指定时间段内出现的频次以及出行时间段,其中,所述历史时间段包含所述各指定时间段;
60、利用所述各第二目标对象分别在各指定时间段内出现的频次以及出行时间段,得到所述各第二目标对象各自的机场出行信息。
61、根据本公开实施例提供的第三方面,提供一种计算机存储介质,所述计算机存储介质存储有计算机程序,所述计算机程序用于执行如第一方面所述的方法。
1.一种机场中特定人员的识别方法,其特征在于,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述确定所述第一目标对象为机场特定人员之后,所述方法还包括:
3.根据权利要求1所述的方法,其特征在于,通过以下方式确定所述机场特定人员数据库中是否存在与所述第一目标对象的相似度满足第一预设条件的目标特定人员:
4.根据权利要求1或3所述的方法,其特征在于,通过以下方式得到任意一个机场特定人员与所述第一目标对象之间的相似度:
5.根据权利要求4所述的方法,其特征在于,所述根据所述机场特定人员的包围盒的位置坐标以及所述第一目标对象的包围盒的位置坐标,得到第一相似度指标,包括:
6.根据权利要求1所述的方法,其特征在于,所述根据任意两个目标历史视频图像中各第二目标对象之间的相似度,得到所述各第二目标对象在指定历史时间段内的机场出行信息,包括:
7.一种电子设备,其特征在于,包括处理器和存储器,所述处理器和所述存储器通过总线连接;
8.根据权利要求7所述的电子设备,其特征在于,所述处理器,还被配置为:
9.根据权利要求7所述的电子设备,其特征在于,所述处理器,还被配置为:
10.根据权利要求7或9所述的电子设备,其特征在于,所述处理器,还被配置为:
