具体实施方式

下面结合实施例对本发明作进一步地详细说明，但本发明的实施方式不限于此。

一种基于人脸识别和RFID的机场旅客手提行李追踪检查方法，其通过人脸识别和RFID将安检通道内旅客手提行李安检图像数据自动与旅客信息实现对应，方便开包时旅客查找和事后回查。具体地，包括以下步骤：

步骤S1：安检验证旅客信息，采集并注册人脸照片到数据库；

步骤S2：在手提行李放到行李框的情况下，RFID射频读码器读取行李框的RFID标签，读取成功后启用人脸识别；

步骤S3：拍摄旅客现场照片与旅客过安检验证时注册的人脸照片数据库进行比对，获取最匹配的旅客信息并与所述RFID标签关联；

步骤S4：在手提行李进入X光机前，读取所述RFID标签，并对进入X光机的手提行李进行判图，将所述RFID标签和X光机图片进行关联，从而实现旅客信息与手提行李的X光机图片和判图结果关联；

步骤S5：对手提行李判图后，如果行李图像正常，行李传送到安全行李通道，如果行李图像异常，则将行李传送到可疑行李通道进行安全检查。

为了实现上述方法，一种基于人脸识别和RFID的机场旅客手提行李追踪检查系统，其主要可包括：

安检验证子系统：

用于采集旅客现场照片，可按照一定的规则验证旅客航班状态、行李状态、身份信息的合法性，从而进行放行或拦截。如果验证旅客安检正常，则记录旅客放行状态、安检时间、安检通道、安检人员等信息，将采集的人脸照片和旅客信息按照安检通道注册到人脸识别子系统的人脸识别数据库中，并放行旅客，进入安检通道内；如果旅客安检异常，记录旅客拦截状态、安检时间、安检通道、安检人员等信息，并拦截旅客。

对于放行的旅客，安检验证子系统可在每放行一个旅客时，对外发送一个放行消息。放行消息包括旅客标识、安检通道号和旅客现场照片。旅客标识可采用由旅客航班号、航班日期、始发站和登机号组成的唯一标识，旅客标识要求能够唯一确认一个旅客，在本系统中，能够根据旅客标识查找旅客姓名、身份证件号码等敏感信息，但同时在外部其它系统中没有泄漏旅客敏感身份信息。消息可以通过MQ如RabbitMQ或者ActiveMQ发送，这样可以无需修改代码即可将消息发送给多个系统，包括外部系统，从而实现系统的解耦。安检通道号用于在注册人脸识别服务时进行隔离，即从通道A过的旅客只能注册到通道A分区对应的人脸识别数据库，通道A的旅客在进行1比N人脸识别时只需在通道A分区对应的人脸识别数据库中进行比对。此种实现，杜绝了通道A旅客在1比N人脸识别时，识别到其它通道旅客的可能，同时由于无需查找所有通道的旅客，仅需查找比对当前通道旅客，可大幅减少计算工程量，提高效率。旅客现场照片用于注册到人脸识别子系统中，人脸识别子系统提取照片中的人脸特征并保存，用于通道内行李工作台处的人脸比对。安检要求旅客现场照片清晰无遮挡，因此安检验证子系统需集成人脸检测SDK，通过人脸检测算法获取清晰可靠、无遮挡的人脸照片。

人脸识别子系统：

用于旅客现场人脸的检测和人脸图像的采集，例如按照1比N的方式进行人脸识别；以及负责维护人脸识别数据库，可按照一定的超时时间将注册的人脸从数据库注销，该超时时间一般可优选20分钟，除此之外也还可以是其他时间。

人脸识别服务厂商可选择虹软科技或者百度科技等公司提供的成熟解决方案。人脸检测应能够检测人脸遮挡、是否正面人脸，并在合理的时间范围(通常3-7秒)内返回评价最高的一张人脸照片。在一张照片包含多个人脸时，由于安检时要求排队，通常选择尺寸最大的一个，即位置最靠前的一个。人脸检测通常以离线SDK的方式集成到客户端中，在旅客侧通常按照10英寸左右的竖屏，屏幕上集成摄像头，屏幕画面应反馈摄像头实时图像和人脸检测的相关提示，用于提示旅客拍照。当人脸识别子系统接收到旅客过安检消息时，从旅客过检照片中提取人脸特征，并将旅客标识和人脸特征按照旅客通道号注册到人脸识别数据库中。当旅客进入安检通道后，取行李框放到行李工作台上(如图2和图3所示)，行李工作台上的RFID射频读卡器读取到行李框上的RFID编号，并通过RS2312串口通知前端设备，在通道中前端设备可选择研华工控机，每个行李工作台前安装一个人脸识别屏幕，此时前端设备驱动人脸识别屏幕获取当前工作台前的人脸照片，并在该通道注册的人脸识别数据库中进行1对N人脸比对，选取比对得分最高的一个，此时实现了将旅客标识(即旅客信息)和行李框的RFID编号进行匹配。人脸识别数据库负责按通道号维护各通道的人脸特征数据，包括注册人脸和注销人脸。当旅客通过安检验证时，安检验证子系统会发送过安检消息到MQ，人脸识别子系统从MQ的队列中接收过安检消息获取旅客过检照片进行人脸注册。人脸注销发生在出X光机处，在此处RFID射频器读取RFID编号，根据RFID编号获取对应的旅客标识，通过旅客标识将旅客人脸照片从人脸识别数据库中注销。注销后，该RFID电子标签对应的行李框可重复使用，即可再次在行李工作台出循环使用。人脸注销同时还有多种补偿措施，如补偿方案一，在注册人脸时，安排适当的过期时间，如20分钟后从人脸识别数据库中注销，即考虑在20分钟内可以保证完成旅客人身安检过程。补偿方案二，考虑通道内的旅客人数，当注册人脸时对通道人数加1，注销人脸时对通道人数减1，当通道内旅客人数超过15人时，对最初注册的旅客进行注销，即正常通道内旅客人数不可能超过15人。

RFID电子标签子系统：

用于读取行李框上的RFID标签；本实施例将每个行李框设置一个RFID电子标签，每个RFID电子标签上设置一个唯一标识，例如可设置唯一的5位数字编号等。

本实施例可将RFID电子标签在通道不同的位置设置为不同的作用。具体地，可将RFID射频读码器安装在通道四个位置，通过在不同位置读取RFID电子标签，以实现不同功能，具体地：

1)将RFID射频读码器设置在旅客放框工位处，当旅客取行李框放到工位时，读取RFID标签，从而获取行李框编号。以及可在放框工位前放置一个人脸识别摄像头，当该工位的RFID射频读码器读取到RFID编号后，通知人脸识别子系统进行通道内旅客人脸图像采集，并与该通道安检验证子系统注册的人脸识别数据库进行1比N人脸识别，获取旅客信息，此时完成RFID编号和旅客信息的匹配。具体地，可按照通道的长度和旅客的人流量安装1-4个工作台，每个工作台配置一个RFID射频读码器和一个带有摄像头的屏幕，1个工控机可以管理1个或者多个工作台，每个工作台可独立工作。RFID读码器读取RFID编号通过RS2312串口传递给工控机，工控机控制摄像头使用人脸检测算法获取旅客在工作台前的照片，工控机使用1比N人脸识别算法将获取的照片在该通道对应的人脸识别数据库中进行比对，获取得分满足要求，并且得分最高的一个旅客，将旅客标识与RFID编号匹配。

2)在进入X光机之前设置一个RFID射频读码器，在行李框进入X光机之前读取RFID编号并通知外部的X光机系统，此时X光机扫描行李框的X光照片并将X光照片和RFID编号进行匹配。X光机系统将X光照片、判读结果和RFID编号以通知的形式发出，从而可根据RFID编号可将X光照片、判读结果和旅客信息进行匹配。具体地，当行李框通过时，获取到RFID编号将其通过RS2312串口传递给外部系统X光机系统，X光机系统扫描行李X光照片，进行判图后，将判图结果、通道号、X光机照片和RFID编号通过MQ传回，然后根据事件发生的通道号和RFID编号将X光机照片和旅客信息进行匹配，供系统查询使用。

3)在出X光机处设置一个RFID射频读码器，当行李框出X光机时读取RFID编号，通知人脸识别子系统，人脸识别子系统可将该RFID编号对应的旅客人脸从人脸识别数据库注销。本实施例中，可先注销正常的行李包对应的人脸识别数据库，即不需要开包的手提行李，对于需要开包的手提行李可等到开包再做处理，其注销的方式可以是手提行李出X光机时进行注销，或者在本通道超时的时间，再或者进入本通道的数量等。

4)在手提开包工作台设置一个RFID射频读码器，当开检行李运到开包工作台时，用于读取行李框RFID编号，并通知手提行李开包子系统，手提行李开包子系统根据RFID编号，将匹配的X光照片和旅客信息展示给开包员，以用于开包处理。具体地，根据判图员的判图结果，如果行李需要开包，通道会将行李传送到可疑行李通道，开包员将行李框放到开包台上，开包台上的RFID射频读码器读取行李框RFID编号通过RS2312串口传送给开包台上的工作电脑，开包台手提行李开包系统会展示从X光机系统接收的该通道的待开检行李X光机照片的列表，此时手提行李开包系统根据RFID编号从待开检行李列表中选取对应的X光机照片，并将旅客姓名、身份证件号码、航班号、航班日期、始发站、登机号等信息展示给开包员，此时开包员可以直接根据旅客姓名要求旅客现场开包，并在手提行李开包系统中记录违禁物品，而不需要像原来不知道行李是哪个旅客的，需要通过现场喊话查找旅客，并扫描旅客登机牌或者旅客身份证件在系统中录入旅客信息，手动在待开检X光机照片列表中选择对应图像进行匹配来实现开包追踪查询。

上述RFID电子标签可选用富士通RFID超高频防水洗标签，但并不局限于此。可在同一行李框的两侧贴上相同编号的RFID电子标签，即行李框可不区分正反方向进行读取。RFID射频读码器可通过RS2312串口连接工控机，当行李框经过射频读码器时，工控机即可从串口获取行李框上的5位数字编号。

手提行李开包子系统：

旅客验证完毕后，对进入安检通道进行人身和手提行李的安检；当X光机判图员发现旅客手提行李图像异常时，发出开包指令，X光机系统将该X光照片、判图结论和RFID编号发送到手提行李开包子系统。开包检察员将行李框放到RFID射频读码器前，系统自动进行RFID读码，获取RFID号码，将其关联的X光照片和旅客信息自动调出。此时开包员可直接找到旅客进行开包，标记可疑物品的位置和处理结果，并将开包结果及可疑图片和旅客信息一并存储。具体地，如图3所示，如果行李正常，行李传送到安全行李通道，旅客取行李后，可进入该通道内。如果行李异常，需要开包检查，行李传送到可疑行李通道内。手提行李开包子系统会展示待开包行李X光机图片列表，当用户从开包列表中选择一个X光机图片时，会自动带出其关联的包含旅客姓名、身份证件号码、航班号、航班日期、始发站、登机号等旅客信息。当待开包行李传送到开包台时，开包台上的RFID读码器读取行李框上的RFID编号，自动从待开包行李X光机图片列表中选中其对应的X光机图片，并带出关联的旅客信息。此时开包员可直接进行开包，标记可疑物品的名称、位置和处理结果，并将开包处理结果、处理后的可疑图片和旅客信息进行保存，供查询检索使用。

综合管理子系统：主要用于后台查询管理，如查询旅客安检记录、查询旅客手提行李开包记录、管理各通道和设备的对应关系、编码管理RFID标签等。

综上而言，通过本发明实现了旅客手提行李和旅客信息的自动匹配，使安检的过程更加流畅，提高了开包员的工作体验和工作效率，减少了工作人员的工作量，增加了安检通道的运行流畅度和效率，有效的提升了安保能力。在此之前，手提行李开检时需手动扫描登机牌或者身份证关联旅客信息，存在操作耗时易出错的现象，对开检员和旅客的体验有一定影响。同时在旅客手提行李反查时，对于未开检的行李需要根据旅客过安检的时间点和现场视频记录进行查找匹配。而本发明在不改变安检流程的基础上，通过人脸识别和RFID实现了包括开检和未开检的所有的旅客信息和手提行李X光图片的自动匹配，达到了旅客行李安检过程中追踪匹配的目的，方便安检人员现场快速开包和以后的查询检索。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同相似部分相互参见即可。

在本说明书中所谈到的“一个实施例”、“另一个实施例”、“实施例”、等，指的是结合该实施例描述的具体特征、结构或者特点包括在本申请概括性描述的至少一个实施例中。在说明书中多个地方出现同种表述不是一定指的是同一个实施例。进一步来说，结合任一实施例描述一个具体特征、结构或者特点时，所要主张的是结合其他实施例来实现这种特征、结构或者特点也落在本发明的范围内。

尽管这里参照本发明的多个解释性实施例对本发明进行了描述，但是，应该理解，本领域技术人员可以设计出很多其他的修改和实施方式，这些修改和实施方式将落在本申请公开的原则范围和精神之内。更具体地说，在本申请公开、附图和权利要求的范围内，可以对主题组合布局的组成部件和/或布局进行多种变型和改进。除了对组成部件和/或布局进行的变型和改进外，对于本领域技术人员来说，其他的用途也将是明显的。