适用于安全存储设备的安全监控方法及系统与流程

1.本发明涉及安全设备领域，可应用于金融领域和其他领域，尤指一种适用于安全存储设备的安全监控方法及系统。


背景技术：

2.各个商业银行都为银行客户提供了保险柜业务，目前银行的保险柜业务由于银行保险柜的安全验证方式单一，因此仅支持客户在银行网点营业时间内使用该业务，并且需要银行工作人员值守。在客户取件过程中，需要由银行工作人员首先对客户的真实身份进行技术上的核实验证，并在客户身份验证通过后，银行工作人员还必须携带密钥与客户一起入库全程陪同才能打开箱门，帮助客户取件。该取件过程，不仅人力成本投入较高，且对于客户而言，客户的自主操作性不强，取件不便捷。由于需要工作人员陪同，客户的隐私也得不到保证。
3.如果让客户自助式操作，保险柜服务现场的安全和监控需要进行更加细致监控和管理。由于银行提供的营业场所限制，当客户太多时，客户的保险箱无法全部放在银行的营业网点，必须要集中存储在银行大型保险库中，由于大型保险库与银行营业网点一般不在同一地点，在客户寄存物品搬运时存在安全隐患。此外，由于银行保险柜占地面积大，保险柜多，由于焦距和角度，监控常常无法清晰准确拍摄到具体某个物品箱子的情况，如果发生案件，事后调查人员想溯源查看涉案保险箱的监控视频，很难找到角度最好的摄像视频，而且还需要观看全程的监控录像，无法快速找到关键视频段，不能跳跃观看视频，否则容易漏掉录像关键视频，查看过程很耗时间，溯源调查工作效率较低。
4.因此，目前的银行保险柜业务存在人力成本高、效率低、安全性及私密性不好的问题。


技术实现要素：

5.本发明目的在于提供一种适用于安全存储设备的安全监控方法及系统，解决目前的银行保险柜业务存在人力成本高、效率低、安全性及私密性不好的问题，不但可以为贵重物品提供存放，而且还通过物联网技术将保险箱与金融机构的安防系统有机结合，充分发挥金融机构安防系统的作用，提高机构应对突发紧急严重安全事件的能力。
6.为达上述目的，本发明所提供了一种适用于安全存储设备的安全监控方法，所述方法包含：获取保险箱使用请求，根据所述保险箱使用请求将对应保险箱放置于保险柜后生成预约成功信息，将所述预约成功信息反馈至所述保险箱使用请求发起方；采集用户对所述保险箱的操作信息，将所述操作信息与预设异常规则进行比较，根据比较结果构建预定周期后触发的报警提示任务；根据所述比较结果采集所述保险箱的位置信息，根据所述位置信息采集对应区域的视频数据和音频数据，根据所述视频数据和所述音频数据通过风险识别算法分析获得第一风险系数；根据所述第一风险系数与预设第一风险阈值的比较结果终止或维持所述报警提示任务。
7.在上述适用于安全存储设备的安全监控方法中，优选的，采集用户对所述保险箱的操作信息之前还包含：获取用户提供的身份认证信息，根据所述身份认证信息开启放置所述保险箱的对应保险柜。
8.在上述适用于安全存储设备的安全监控方法中，优选的，采集用户对所述保险箱的操作信息还包含：采集预定区域的视频数据和音频数据，根据所述视频数据和所述音频数据通过风险识别算法分析获得第二风险系数；当所述第二风险系数高于预设第二风险阈值时，生成告警提示信号。
9.在上述适用于安全存储设备的安全监控方法中，优选的，所述方法还包含：根据所述第一风险系数与预设第一风险阈值的比较结果，通过所述视频数据和所述音频数据的采集时间与采集设备的编号信息将所述视频数据和所述音频数据按预设路径归档存储至预定位置。
10.在上述适用于安全存储设备的安全监控方法中，优选的，根据所述比较结果采集所述保险箱的位置信息包含：根据所述比较结果通过超宽带脉冲信号将所述保险箱的设备标识广播至预定区域内的定位基站；通过所述定位基站根据tdoa和aoa定位算法计算获得位置信息。
11.在上述适用于安全存储设备的安全监控方法中，优选的，预设异常规则包含多个异常事件比较项，所述异常事件比较项包含保险箱移动距离、保险箱盖体被异常打开距离、输入密码错误次数、保险箱受碰撞情况和保险箱内物品变动情况一个或多个的组合。
12.在上述适用于安全存储设备的安全监控方法中，优选的，根据所述视频数据和所述音频数据通过风险识别算法分析获得第一风险系数包含：通过人脸识别算法抓取所述视频数据中的人脸数据；将所述人脸数据与预设人脸数据比较获得人脸相似度值，根据所述人脸相似度值和预设相似度阈值的比较结果获得目标身份信息；通过深度视觉算法分析获得所述视频数据中目标人员的深度三维信息；通过预设行为类别定义和所述深度三维信息分析所述视频数据获得目标人员的行为数据；根据所述目标身份信息和所述行为数据通过预设风险识别模型计算获得第一风险系数。
13.在上述适用于安全存储设备的安全监控方法中，优选的，通过预设行为类别定义和所述深度三维信息分析所述视频数据获得目标人员的行为数据包含：根据预设行为类别定义对所述视频数据提取采集获得源视频数据，根据所述源视频数据按行为区间分类提取图像帧数据；通过全变分1范式算法对图像帧数据进行计算获得光流图像帧数据，根据所述光流图像帧数据采用交叉熵为损失函数进行训练获得光流分支模型；根据光流分支预定的权重参数建立光流分支与图像帧分支的桥接关系，根据所述桥接关系通过图像帧数据训练预设图像分类模型获得图像分支模型；根据所述图像帧数据、所述光流图像帧数据、所述光流分支模型和所述图像分支模型获得目标人员的行为数据。
14.在上述适用于安全存储设备的安全监控方法中，优选的，根据所述视频数据和所述音频数据通过风险识别算法分析获得第一风险系数包含：将所述音频数据转换为文字文本数据；通过预设异常关键字和预设语义识别算法对所述文字文本数据进行异常语义识别获得异常语义识别结果；根据所述异常语义识别结果获得第一风险系数。
15.本发明还提供一种安全监控系统，所述系统包含保险箱、控制终端、提示模块、分析模块和多个作业模块；所述作业模块包含保险柜、验证模块和安全门；所述保险柜用于放
置保险箱；所述验证模块用于验证用户提供的身份认证信息，根据验证结果开启对应的保险柜；所述安全门用于开启和关闭所述作业模块的进出通道；所述控制终端用于获取保险箱使用请求，根据所述保险箱使用请求将对应保险箱放置于保险柜后生成预约成功信息，将所述预约成功信息反馈至所述保险箱使用请求发起方；所述提示模块用于采集用户对所述保险箱的操作信息，将所述操作信息与预设异常规则进行比较，根据比较结果构建预定周期后触发的报警提示任务；所述分析模块用于根据所述比较结果采集所述保险箱的位置信息，根据所述位置信息采集对应区域的视频数据和音频数据，根据所述视频数据和所述音频数据通过风险识别算法分析获得第一风险系数；以及，根据所述第一风险系数与预设第一风险阈值的比较结果终止或维持所述报警提示任务。
16.在上述安全监控系统中，优选的，所述分析模块包含定位基站，所述定位基站用于接收所述保险箱上定位标签通过超宽带脉冲信号广播的所述保险箱的设备标识，利用tdoa和aoa定位算法计算获得位置信息。
17.本发明还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述方法。
18.本发明还提供一种计算机可读存储介质，所述计算机可读存储介质存储有由计算机执行上述方法的计算机程序。
19.本发明的有益技术效果在于：不但可以为贵重物品提供存放，而且还通过物联网技术将保险箱与金融机构的安防系统有机结合，充分发挥金融机构安防系统的作用，提高机构应对突发紧急严重安全事件的能力。同时图像识别技术、物联网技术进行自动甄别，防止设备误报造成的“假警”情况，保险箱被打开、被移动、出现异常情况时，监控系统能迅速进行记录，形成短视频，系统将短视频文件按照保险箱编号进行分类保存。由于本系统能对异常情况进行准确判断，并只记录和保存异常情况的监控视频，并且按照保险箱编号和以及异常情况日期时间进行编号归档，事后调查人员能够根据保险箱编号和异常事件发生时间快速调阅保险箱被移动、被打开的短视频，而保险箱静止不动的无效视频被系统自动过滤跳过不用专门保存，从而大大减小了视频监控系统的存储压力，提高了调查效率。
附图说明
20.此处所说明的附图用来提供对本发明的进一步理解，构成本技术的一部分，并不构成对本发明的限定。在附图中：
21.图1为本发明一实施例所提供的适用于安全存储设备的安全监控方法的流程示意图；
22.图2为本发明一实施例所提供的位置定位原理示意图；
23.图3为本发明一实施例所提供的利用视频数据获得第一风险系数的流程示意图；
24.图4为本发明一实施例所提供的利用视频数据获取行为数据流程示意图；
25.图5为本发明一实施例所提供的光流分支的训练流程示意图；
26.图6为本发明一实施例所提供的光流分支与rgb分支的桥接的原理示意图；
27.图7为本发明一实施例所提供的利用音频数据获得第一风险系数的流程示意图；
28.图8为本发明一实施例所提供的安全监控系统的结构示意图；
29.图9为本发明一实施例所提供的安全监控系统的应用流程示意图；
30.图10a至图10c为本发明一实施例所提供的保险箱装置的结构示意图；
31.图11为本发明一实施例所提供的保险箱装置的电路逻辑示意图；
32.图12为本发明一实施例所提供的保险柜的结构示意图；
33.图13为本发明一实施例所提供的保险柜的电路逻辑示意图。
具体实施方式
34.以下将结合附图及实施例来详细说明本发明的实施方式，借此对本发明如何应用技术手段来解决技术问题，并达成技术效果的实现过程能充分理解并据以实施。需要说明的是，只要不构成冲突，本发明中的各个实施例及各实施例中的各个特征可以相互结合，所形成的技术方案均在本发明的保护范围之内。
35.另外，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
36.请参考图1所示，本发明所提供了一种适用于安全存储设备的安全监控方法，所述方法包含：
37.s101获取保险箱使用请求，根据所述保险箱使用请求将对应保险箱放置于保险柜后生成预约成功信息，将所述预约成功信息反馈至所述保险箱使用请求发起方；
38.s102采集用户对所述保险箱的操作信息，将所述操作信息与预设异常规则进行比较，根据比较结果构建预定周期后触发的报警提示任务；
39.s103根据所述比较结果采集所述保险箱的位置信息，根据所述位置信息采集对应区域的视频数据和音频数据，根据所述视频数据和所述音频数据通过风险识别算法分析获得第一风险系数；
40.s104根据所述第一风险系数与预设第一风险阈值的比较结果终止或维持所述报警提示任务。
41.由此，本发明所提供的适用于安全存储设备的安全监控方法不但可以为贵重物品提供存放，而且还通过物联网技术将保险箱与金融机构的安防系统有机结合，充分发挥金融机构安防系统的作用，提高机构应对突发紧急严重安全事件的能力；同时图像识别技术、物联网技术进行自动甄别，防止设备误报造成的“假警”情况，保险箱被打开、被移动、出现异常情况时，监控系统能迅速进行记录，形成短视频，系统将短视频文件按照保险箱编号进行分类保存。
42.在本发明一实施例中，采集用户对所述保险箱的操作信息之前还包含：获取用户提供的身份认证信息，根据所述身份认证信息开启放置所述保险箱的对应保险柜。进一步的，采集用户对所述保险箱的操作信息还包含：采集预定区域的视频数据和音频数据，根据所述视频数据和所述音频数据通过风险识别算法分析获得第二风险系数；当所述第二风险系数高于预设第二风险阈值时，生成告警提示信号。在实际工作中，该风险识别算法可采用简单的比对算法，例如用户在预约的服务时间期限内来到指定网点，找到指定的保险柜，并通过身份校验(输密、指纹、身份证、银行卡校验等)，当校验通过后才打开保险柜使用户可提取保险箱；此时需确认用户提取保险箱过程是否被胁迫或多人在场，操作人员并非目标用户，为此则可根据所述视频数据和所述音频数据予以确认，从而判断是否存在风险；当风
险即第二风险系数高于第二风险阈值则代表存在危险；针对该危险本发明采用告警提示信号的方式，提示相关工作人员介入予以保障用户的操作安全和财产安全。当然，关于风险识别算法的方式和种类较多，本领域相关技术人员可根据实际需要选择合适的方式予以根据视频和音频数据确认用户是否存在危险，本发明并不做进一步限定。
43.在上述实施例中，所述方法还可包含：根据所述第一风险系数与预设第一风险阈值的比较结果，通过所述视频数据和所述音频数据的采集时间与采集设备的编号信息将所述视频数据和所述音频数据按预设路径归档存储至预定位置。由此，完成对异常音视频数据的分类存储，为后续责任认定提供有效的证据；具体分类保存方法，将在后续实施例中详细说明，在此就不再详述。
44.在本发明一实施例中，根据所述比较结果采集所述保险箱的位置信息包含：根据所述比较结果通过超宽带脉冲信号将所述保险箱的设备标识广播至预定区域内的定位基站；通过所述定位基站根据tdoa和aoa定位算法计算获得位置信息。实际工作中，可在保险箱的箱体夹层中设置定位标签，利用定位标签发出定位数据信号，以便不同方位的定位基站扑捉该信号，并能准确定位标签的三维空间坐标，准确判断定位标签位置。该定位标签技术与传统rfid、蓝牙、wifi数据定位方式完全不同，以上几种传统的方式只能定位在某个区域范围内，在三维空间上也无法给出精确位子，例如wifi在室内定位的精度只能到达2米左右，无法做到精准定位。而本发明采用uwb(超宽带)脉冲信号，可参考图2所示，超宽带定位技术是一种全新的、与传统通讯定位技术有极大差异的新技术。它运用事先布置好的已知方位的锚节点和桥节点，与新参加的盲节点进行通讯，并运用三角定位或许“指纹”定位方法来确认方位，由多个传感器选用tdoa和aoa定位算法对标签方位进行剖析，多径分辨才能强、精度高，定位精度可达厘米级。它能够准确获得三维空间坐标，协助银行安全系统准确调整摄像头获取监控图像和音频数据，大幅提供监控准确率，避免频繁出现误报情况。
45.在本发明一实施例中，预设异常规则包含多个异常事件比较项，所述异常事件比较项包含保险箱移动距离、保险箱盖体被异常打开距离、输入密码错误次数、保险箱受碰撞情况和保险箱内物品变动情况一个或多个的组合。在实际工作中，可利用异常事件比较项进行短视频数据分类存储，例如连续密码错误、箱盖被打开、保险箱剧烈碰撞或挤压导致碰撞传感器被触发等异常情况的短视频数据文件按照保险箱编号进行分区(块、或文件夹)进行存储，一个保险箱的视频文件统一被放在独立的一个区(块、或文件夹)中，区(块、或文件夹)以保险箱编号为命名，短视频数据文件按照以下规则进行命名，如表1所示：
46.表1
[0047][0048][0049]
由于本发明对异常情况进行准确判断，并只记录和保存异常情况的监控视频，并且按照保险箱编号和以及异常情况日期时间进行编号归档，事后调查人员能够根据保险箱编号和异常事件发生时间快速调阅保险箱被移动、被打开的短视频，而保险箱静止不动的无效视频被系统自动过滤跳过不用专门保存，从而大大减小了视频监控系统的存储压力，提高了调查效率。
[0050]
请参考图3所示，在本发明一实施例中，根据所述视频数据和所述音频数据通过风险识别算法分析获得第一风险系数包含：
[0051]
s301通过人脸识别算法抓取所述视频数据中的人脸数据；
[0052]
s302将所述人脸数据与预设人脸数据比较获得人脸相似度值，根据所述人脸相似度值和预设相似度阈值的比较结果获得目标身份信息；
[0053]
s303通过深度视觉算法分析获得所述视频数据中目标人员的深度三维信息，通过预设行为类别定义和所述深度三维信息分析所述视频数据获得目标人员的行为数据；
[0054]
s304根据所述目标身份信息和所述行为数据通过预设风险识别模型计算获得第一风险系数。
[0055]
在上述实施例中，主要是从图像数据中抓取人脸图像，根据预存的人脸图像和抓取的人脸图像的相似度进行人脸识别，并基于深度视觉算法，从所述图像中获取目标人员的深度三维信息，根据所述目标人员的深度三维信息进行异常行为分析。具体地，图像分析模块计算抓取的人脸图像与预存的人脸图像的相似度，如果抓取的人脸图像与预存的某一图像的相似度达到预设相似度阈值，判断人脸识别成功，根据预存的图像信息确定抓取的人脸图像的信息。再基于深度视觉算法，从上述图像中获取目标人员的深度三维信息(目标
[0067]
β1||feature2
rgb-feature2
flow
||2[0068]
γ1crossentropy(p，y).
[0069]
在上式中，损失函数包括三项，第一项代表第一条传递线路的部分，l1是这个阶段rgb特征和光流特征差异的2范数，α1是l1对应权重；第二项代表第二条传递线路部分，l2是这阶段两个特征差异的2范数，β1是l2对应权重；第三项l3是最终分类的交叉熵，γ1是l3对应权重；feature1
rgb
为第一条rgb信息；feature1
flow
为第一条光流信息；feature2
rgb
为第二条rgb信息，feature2
flow
为第二条光流信息。
[0070]
请参考图7所示，在本发明一实施例中，根据所述视频数据和所述音频数据通过风险识别算法分析获得第一风险系数包含：
[0071]
s701将所述音频数据转换为文字文本数据；
[0072]
s702通过预设异常关键字和预设语义识别算法对所述文字文本数据进行异常语义识别获得异常语义识别结果；
[0073]
s703根据所述异常语义识别结果获得第一风险系数。
[0074]
在实际工作中，所述异常关键字可为救命、抢劫等，所述语义识别算法可为现有的语音识别模型，本发明在此不再详细介绍。进一步的，基于视频数据和音频数据分别获得的第一风险系数可采用加权累加的方式获得综合风险系数；由此，利用综合风险系数予以准确分析当前预警是否为误报。进一步的，工作人员也可根据该计算结果开启安全防护措施，例如锁闭安全门，与执法机关联系报警等，本领域相关技术人员可根据实际需要选择设定，本发明在此并不做进一步限定。
[0075]
本发明还提供一种安全监控系统，所述系统包含保险箱、控制终端、提示模块、分析模块和多个作业模块；所述作业模块包含保险柜、验证模块和安全门；所述保险柜用于放置保险箱；所述验证模块用于验证用户提供的身份认证信息，根据验证结果开启对应的保险柜；所述安全门用于开启和关闭所述作业模块的进出通道；所述控制终端用于获取保险箱使用请求，根据所述保险箱使用请求将对应保险箱放置于保险柜后生成预约成功信息，将所述预约成功信息反馈至所述保险箱使用请求发起方；所述提示模块用于采集用户对所述保险箱的操作信息，将所述操作信息与预设异常规则进行比较，根据比较结果构建预定周期后触发的报警提示任务；所述分析模块用于根据所述比较结果采集所述保险箱的位置信息，根据所述位置信息采集对应区域的视频数据和音频数据，根据所述视频数据和所述音频数据通过风险识别算法分析获得第一风险系数；以及，根据所述第一风险系数与预设第一风险阈值的比较结果终止或维持所述报警提示任务。其中，所述分析模块可包含定位基站，所述定位基站用于接收所述保险箱上定位标签通过超宽带脉冲信号广播的所述保险箱的设备标识，利用tdoa和aoa定位算法计算获得位置信息。
[0076]
具体请参考图8所示，在实际工作中本发明所提供的安全监控系统通过物联网技术将该保险箱装置与金融机构的安防系统有机结合，同时通过图像识别技术进行自动甄别，防止设备误报造成的“假警”情况，充分发挥金融机构安防系统的作用，提高银行保险柜运营金融场所应对突发紧急严重安全事件的能力；具体可包含：保险箱装置100、定位基站200、高清监控摄像头300、银行安全系统服务器400(该银行安全系统服务器予以集成控制终端、提示模块、分析模块)、远程安防监控坐席设备500和安全门600。
[0077]
所述的保险箱装置100放在银行保险柜中，每个保险柜设置在保险箱运营网点，独
立的小操作房间，房间设有可以上锁安全门，用户打开保险柜前，系统自动检查操作间安全门是否上锁，以保护客户隐私和操作安全。
[0078]
所述的定位基站200，是安全防护系统重要组成部分，它负责和保险箱装置100进行数据通讯，它与保险箱装置100上的无线通讯模块和定位标签进行“双通道”数据交互。本发明所述的安全防护系统是采用超宽带技术的室内定位技术，它和所述的保险箱装置100上的定位标签进行配合，能准确判断保险箱装置所处的空间位置。如图6所示，本发明所述的安全防护系统运用事先布置好的已知方位的锚节点和桥节点，与新参加的盲节点进行通讯，并运用三角定位或许“指纹”定位方法来确认定位标签所在方位，其中所述定位系统采用n个定位基站(n》＝3)，使用tdoa和aoa定位算法对标签方位进行剖析，多径分辨才能强、精度高，定位精度可达厘米级。所述的tdoa定位算法是一种利用到达时间差来来进行定位的方法。所述的定位标签会不停地向四周发送信息，这个信息包含了标签自己的id值。当安全防护系统部署在附近至少有三个基站收到这一信息时，这时就可以根据信息到达三个基站的时间差计算出标签当时的位置。安全防护系统获取到保险箱设备的x、y、z三维坐标，在安装定位基站时，需要特别拉开z轴的高度差，以确保在z轴上的精确度。
[0079]
所述的高清监控摄像头300根据银行安全系统服务器400计算的x、y、z三维坐标，精准调整摄像头的方向和焦距，更清晰准确的扑捉到所述保险箱所在位置以及周边环境图像信息。高清监控摄像头可以包括双目云台摄像机和智能视觉分析模块。双目云台具备可见光和红外热成像两种摄像头，可全天候运行。智能视觉分析模块基于深度视觉算法，能够实时对摄像头采集到的图像信息进行分析，可完成人脸识别，异常行为分析，其中，异常行为包括越界、进入/离开区域、区域入侵、徘徊、人员聚焦、快速移动、物品遗留/拿取等，并将分析结果传递给主控分析单元，深度学习是指多层神经网络上运用各种机器学习算法解决图像，文本等各种问题的算法集合。深度学习的核心是特征学习，旨在通过分层网络获取分层次的特征信息，从而解决以往需要人工设计特征的重要难题。深度学习是一个框架，包含多个重要算法，例如convolutional neural networks(cnn)卷积神经网络，deep belief networks(dbn)深信度网络，recurrent neural network(rnn)多层反馈循环神经网络等，对于不同问题(图像，语音，文本)，需要选用不同网络模型才能达到更好效果。摄像头还包括麦克风和喇叭，麦克风能收集现场室内声音，喇叭用于与室内人员进行语音沟通或则发出警报声。
[0080]
所述的银行安全系统服务器400，通过定位基站200和高清监控摄像头300准确监控和分析金融机构室内的安保环境情况，服务器判断发生安全事件后，通知远程安防监控坐席设备500。
[0081]
所述远程安防监控坐席设备，根据银行安全系统服务器400报告的安全提示，通过远程控制银行安全系统服务器，调动高清监控摄像头300监控现场情况，如果发生紧急安全事件，可以采取报警或者控制关闭安全门600、启动室内警铃等一系列的安全措施。
[0082]
本发明所述的系统可以避免传统的rfid、蓝牙、wifi等技术只能识别监控对象在监控范围内，但无法准确识别监控对象具体方位、定位不准、当突发事件发生时无法快速指挥摄像头准确定位突发事件发生位置，无法通过系统智能自动识别，自动排除误报情况，减少人工参与，提高紧急事务应对效率等问题。
[0083]
为便于理解本发明所提供的上述安全监控系统的实际应用流程，请参考图9所示，
对上述系统整体使用流程做进一步说明，本领域相关技术人员当可知，该实施例并不对其做任何技术限定。
[0084]
步骤s901：客户通过手机银行、电话银行等渠道提前预约保险箱业务，并选择服务网点。银行工作人员将客户的保险箱放入保险柜，保险柜的保险箱信息读取单元401用于读取保险箱上的rfid芯片上的电子标签内的数据，并通过app信息或短信向客户发送预约成功信息，通知客户来指定的网点来领取保险箱服务，通知信息数据包括，网点地址、保险柜编号、服务时间期限等。
[0085]
步骤s902：客户在预约的服务时间期限内来到指定网点，找到指定的保险柜，并通过身份校验(输密、指纹、身份证、银行卡校验等)，系统检测操作房间环境安全后打开柜门。
[0086]
可选的，银行系统接收到客户数字键盘或触摸屏指令输入信息后，保险柜系统首先自动检查操作间安全门是否上锁，如未上锁，即进行锁闭处理以保护客户隐私和操作安全。进一步，银行系统接收到客户数字键盘或触摸屏指令输入信息后，保险柜系统启动银行安全系统采集现场视频和音频数据，通过像分析模块和语音分析模块自动智能分析操作客户是否异常，例如有多人在场，操作人员非客户本人等，如系统判断异常，可通过通知远程坐席自动介入，保证客户操作现场安全。
[0087]
步骤s903：客户取出保险箱，并通过保险箱的身份校验(输密或指纹等)打开箱盖进行操作。从客户开始保险箱操作开始，控制模块通过无线通讯模块向外部发送启动信号，启动信号包括定位标签数据。部署在该室内周边的n个(n》＝3)定位基站采集保险箱装置上的无线通讯模块和定位标签发送数据。同时，定位计算模块利用不同定位基站采集的数据进行分析和计算，根据信息到达n个基站的时间差计算出标签当时的位置，获取到保险箱设备的x、y、z三维坐标。
[0088]
步骤s904：摄像控制模块根据定位计算模块计算获得的保险箱设备的三维坐标，摄像控制模块调整摄像头的方向和焦距，清晰准确的扑捉到所述保险箱装置所在位置以及周边环境图像信息，主控模块控制摄像机收集现场视频图像和语音数据。主控模块一直采集图像数据直至保险箱恢复静止状态或异常状态被解除后一段时间(例如5分钟)，将短视频数据文件按照要求进行命名和编号并存储在视频存储模块。
[0089]
步骤s905：图像分析模块从所述图像中抓取人脸图像，根据预存的人脸图像和抓取的人脸图像的相似度进行人脸识别，并基于深度视觉算法，从所述图像中获取目标人员的深度三维信息，根据所述目标人员的深度三维信息进行异常行为分析。
[0090]
步骤s906：语音分析模块分析由麦克风采集到的所述安防巡检区域的语音，根据所述语音进行异常语义分析，并将异常语义分析结果发送至所述主控模块。
[0091]
步骤s907：主控模块根据图像分析模块和语音分析模块的分析结果，判断是否是误报，如果是误报，主控模块发送关闭指令给保险箱的电源开关关闭警报；如果是可疑情况，则通知远程安防监控坐席进行跟进确认处理。远程安防监控坐席通过监控摄像头观看现场情况，或者与使用者进行语音沟通，如果有异常可以采取报警或者控制关闭安全门等一系列的安全措施。进一步的，为了避免远程坐席由于脱岗或其他原因，无法及时处理此异常情况，本方法允许在一定周期内，远程坐席无反馈确认信息，主控模块自动启动采取报警或者控制关闭安全门等一系列的安全措施。
[0092]
步骤s908：如果主控模块判断现场情况正常，客户属于白名单操作人员，则仅向摄
像控制模块发出指令控制摄像头和麦克风采集图像和声音数据，一直采集图像数据直至保险箱恢复静止状态或异常状态被解除后一段时间(例如5分钟)，将短视频数据文件按照要求进行命名和编号并存储在视频存储模块。所述的视频存储模块，负责对发生异常情况(例如连续密码错误、盖被打开、保险箱剧烈碰撞或挤压导致碰撞传感器被触发)的短视频数据文件进行分类存储，文件按照保险箱编号进行分区(块、或文件夹)进行存储，一个保险箱的视频文件统一被放在独立的一个区(块、或文件夹)中，区(块、或文件夹)以保险箱编号为命名，短视频数据文件按照“表1”规则进行命名。
[0093]
客户操作完毕后，盖好保险箱，并将保险箱放回保险柜，系统检查无误后，解锁安全门，服务结束。
[0094]
在本发明一实施例中，上述保险箱装置可包含主控芯片、报警模块、输入模块、保险箱箱体、定位标签、碰撞传感器和延时器；所述保险箱箱体包含箱体结构、箱盖结构和电子锁扣；所述箱体结构为单面开口的中空方形箱体，用于放置寄存物品；所述箱盖结构与方形箱体的开口位置对应设置，用于通过所述电子锁扣闭合中空方形箱体；所述输入模块设置于中空方形箱体一侧，用于接收用户提供的输入信息；所述碰撞传感器设置于中空方形箱体内夹层，用于采集所述保险箱箱体受到的碰撞信息；所述主控芯片分别与所述碰撞传感器、所述输入模块、所述报警模块、所述定位标签、所述电子锁扣、所述输入模块和所述延时器相连，用于根据所述碰撞信息向所述延时器和所述定位标签输出一电信号；根据所述延时器反馈的电信号向所述报警模块输出一电信号；以及，根据所述输入信息控制所述电子锁扣开启中空方形箱体；所述延时器用于根据接收到的电信号建立延时触发任务，根据所述延时触发任务在预定周期后反馈一电信号；所述报警模块用于根据接收到的电信号发出报警提示信息；所述定位标签用于根据接收到的电信号将预存的标签信息广播至预设区域。
[0095]
在上述实施例中，所述装置还可包含显示屏、rfid芯片和rfid天线，所述显示屏与所述主控芯片相连，用于显示主控芯片输出的交互信息；所述rfid芯片设置于箱盖结构的夹层内，分别与所述主控芯片和所述rfid天线相连，用于预存所述保险箱装置的关联信息；以及，通过所述rfid天线与外部rfid读写装置进行数据交互。具体的，请参考图10a至图10c所示，在实际工作中，所述保险箱装置可包含主控芯片，电源供电模块、显示器101、电子锁扣102、蜂鸣报警喇叭、保险箱箱体108和箱盖103、定位标签、碰撞传感器、rfid芯片104以及rfid天线。其中箱盖与箱体通过电子锁扣进行紧密连接，箱体左右两侧上设有拉环把手105，以方便保险箱搬运移动，箱盖夹层中设置有rfid电子标签的芯片，箱体夹层中设有定位标签和分散分布的多个碰撞传感器，箱盖上设有显示屏和按键。
[0096]
在本发明另一实施例中，所述输入模块包含按键单元106和指纹采集器107；所述按键单元106用于接收用户输入的按键信息；所述指纹采集器107用于获取用户输入的指纹信息。进一步的，所述装置还包含通讯模块，所述通讯模块与所述主控芯片相连，用于通过wifi、zigbee、lorawan、蓝牙中一种或多种组合的方式构建所述主控芯片与外部系统的通讯通道。由此，用户输入的按键信息和指纹信息可通过通讯模块传输至远端服务器进行身份验证，从而确定用户是否可开启保险箱装置；具体的，请参考图11所示，在实际工作中，本发明所提供的保险箱装置可包含主控芯片，电源供电模块、显示屏、按键、电子锁扣、蜂鸣报警喇叭、保险箱箱体和箱盖、定位标签、碰撞传感器、延时器、无线通讯模块、rfid芯片以及
rfid天线。
[0097]
其中，所述的主控芯片，与箱盖上的按键通过电路连接，负责收集按键输入的信息；通过电路与显示屏连接，负责在显示屏上显示相关信息；通过电路与电子锁扣连接，负责打开和关闭电子锁扣；通过电路与rfid芯片连接，负责与rfid芯片进行数据交互；通过电路与定位标签、碰撞传感器进行连接；通过电路与蜂鸣报警喇叭连接，负责与蜂鸣报警喇叭进行数据交互。
[0098]
所述的按键，负责收集银行客户或者银行人员的输入信息，通过电路与主控芯片连接。所述的显示屏，负责向户或者银行人员显示信息，通过电路与主控芯片连接。所述的蜂鸣报警喇叭，负责在接收到密码连续错误或接收到碰撞传感器激发电子信号时发声警报。
[0099]
所述的电子锁扣，负责将箱盖与箱体进行紧密连接，数量在4个以上，均匀散布在箱盖与箱体连接处，锁扣通过电路与主控芯片连接，接收主控芯片的指令信号进行打开和闭合，但任意一个锁扣被外力破坏时，传送遭破坏信号给主控芯片。
[0100]
所述rfid芯片，设置箱盖夹层中，它通过电路与主控芯片以及rfid天线连接，它可以通过rfid天线与外部的rfid读写装置进行数据交互，芯片内记入着具体保险箱编号、存入的时间、保险柜所属客户信息(含客户身高、指纹)等数据。通过无线通讯模块将保险箱编号、存入的时间、保险柜所属客户信息等数据与在外部的银行监控服务器上数据进行同步更新；所述的rfid天线，通过电路与rfid芯片连接，接收和发送无线信号，实现外部的rfid读写装置与rfid芯片进行数据交互。所述的保险箱箱体，是一种坚固、抗破坏材料做成的方形箱体，负责存储银行用户的寄存物品，大小可以机动的有银行根据银行用户的购买保险柜服务及空间大小进行设置和分配。箱体夹层中分散分布设置一个或多个碰撞传感器。
[0101]
所述的无线通讯模块负责与外界的银行监控系统进行无线数据交互。进一步的，所述无线通讯模块可以使用wifi、zigbee、lorawan、蓝牙等技术的通讯模块。所述的指纹采集器，用于在客户打开保险箱的时候，采集客户的指纹，对客户进行身份认证。所述碰撞传感器,可以设置一个或多个，分散分布在箱体夹层中，用于在保险箱剧烈碰撞或挤压时，碰撞传感器发出激发电子信号，箱体上蜂鸣报警喇叭立即发生警示，银行监控系统接收到电子信号后立刻响应信号，调用摄像头和监控报警系统予以响应。所述的延时器，用于碰撞传感器碰撞或挤压、电子锁扣被强行破坏、密码连续错误等情况，不会立即启动警报系统发出警报，而是通过延时器进行计时，在计时期间，银行监控系统通过视频、音频分析判断是否误报，如是误报，系统在延时器计时结束前就通过控制器取消警报，避免误报。
[0102]
所述的定位标签，设置在箱体夹层中，可以发出定位数据信号，以便不同方位的定位基站扑捉该信号，并能准确定位标签的三维空间坐标，准确判断定位标签位置。该定位标签技术与传统rfid、蓝牙、wifi数据定位方式完全不同，以上几种传统的方式只能定位在某个区域范围内，在三维空间上也无法给出精确位子，例如wifi在室内定位的精度只能到达2米左右，无法做到精准定位。而本发明采用uwb(超宽带)脉冲信号，超宽带定位技术是一种全新的、与传统通讯定位技术有极大差异的新技术。它运用事先布置好的已知方位的锚节点和桥节点，与新参加的盲节点进行通讯，并运用三角定位或许“指纹”定位方法来确认方位，由多个传感器选用tdoa和aoa定位算法对标签方位进行剖析，多径分辨才能强、精度高，定位精度可达厘米级。它能够准确获得三维空间坐标，协助银行安全系统准确调整摄像头
获取监控图像和音频数据，大幅提供监控准确率，避免频繁出现误报情况。
[0103]
如图12所示，本发明提供的保险柜包括：若干个子柜301(每个子柜上有电子锁308)、凭条打印出口302、显示屏、银行卡读写器303、指纹采集器304、数字密码键盘305、rfid电子标签读写装置306、射频ic卡读写装置307。
[0104]
其中，电子锁用于控制每个子储物柜的开关；子储物柜用于储存大小不同的保险箱，保险箱的大小可以根据客户购买的服务进行自由选择；柜体夹层中分散分布设置一个或多个碰撞传感器。散列分布的若干个摄像头保证可以监控每个子储物柜操作情况；指纹采集器用于银行人员或者客户的指纹；rfid电子标签读写装置可以设置有多个，分布在钱柜不同位子(例如柜体外或者子储物柜内)，可以准确读取放置在保险箱中rfid芯片的信息；射频ic卡读写装置可以读写银行人员的工作射频ic卡或者是客户的身份证信息。
[0105]
为便于更清楚的理解本发明所提供的保险柜的结构，以下请参考图13所示，保险柜在功能逻辑上包括保险箱信息读取单元401、身份信息读取单元402、银行卡信息读写单元403、显示单元404、通讯单元405、子储物柜阵列控制单元406、子储物柜阵列407、打印单元408。
[0106]
保险箱信息读取单元401与通讯单元405相连，保险箱信息读取单元401获取保险箱rfid芯片上的信息后发送给通讯单元405进行处理。保险箱信息读取单元401用于读取保险箱上的rfid芯片上的电子标签，可以是rfid电子标签读写装置，也可以是其他无线数据交互技术。本发明中保险箱信息读取单元401是rfid电子标签读写装置，rfid(radio frequency identification无线射频识别)是一种非接触式自动识别技术，它通过射频信号自动识别目标对象并获取相关数据，具有防水防磁、读取距离大，标签可存储信息量大等优点。
[0107]
身份信息读取单元402与通讯单元405相连，身份信息读取单元402获取身份信息后发送给通讯单元405进行处理。身份信息读取单元402用于采集保险箱所属的客户和银行工作人员的身份信息。本发明中身份信息读取单元402包括射频ic卡读写器、指纹采集器、数字密码键盘，其中射频ic卡读写器用于采集保险箱所属的客户身份证中存取的信息，也可以采集银行工作人员的工作ic卡信息，指纹采集器用于采集保险箱所属的客户或银行工作人员的指纹，数字密码键盘用于采集保险箱所属的客户银行卡密码或则银行工作人员取箱密码。
[0108]
银行卡信息读写单元403与通讯单元405相连银行卡信息读写单元403获取银行卡信息后发送给通讯单元405进行处理。银行卡信息读写单元403包括银行卡读写装置和数字密码键盘。银行卡读写装置可以用于读取银行卡卡片信息，数字密码键盘用于采集客户银行卡密码。
[0109]
显示单元404与通讯单元405相连，用于显示人机交互界面。
[0110]
通讯单元405与保险箱信息读取单元401、身份信息读取单元402、银行卡信息读写单元403、显示单元404、子储物柜阵列控制单元406相连，用于将保险箱信息读取单元401、身份信息读取单元402、银行卡信息读写单元403收集到的信息上送银行服务器系统进行处理，并将银行服务器系统返回的处理结果发送到子储物柜阵列控制单元406，并在显示单元404进行内容显示。
[0111]
子储物柜阵列控制单元406与通讯单元405相连，子储物柜阵列控制单元406接收
到银行服务器系统返回的处理结果，开启子储物柜阵列中对应的子储物柜中的电子锁和摄像头。当子储物柜的门关闭后，子储物柜阵列控制单元406关闭子储物柜中的电子锁和摄像头，并将子储物柜状态和视频文件通过通讯单元405发送给银行服务器系统进行更新和存储。子储物柜阵列控制单元包括延时器，所述的延时器，用于碰撞传感器碰撞或挤压、电子锁扣被强行破坏、密码连续错误等情况，不会立即启动警报系统发出警报，而是通过延时器进行计时，在计时期间，银行监控系统通过视频、音频分析判断是否误报，如是误报，系统在延时器计时结束前就通过控制器取消警报，避免误报。
[0112]
子储物柜阵列407由若干个独立隔开的子储物柜组成，每个子储物柜大小可以不同，以适应不同体积的保险箱，每个储物箱在银行系统中有唯一的编号。每个子储物柜有一个电子锁，子储物柜阵列407散列分布若干个摄像头，保证可以监控每个子储物柜操作情况。子储物柜阵列407所有的电子锁和摄像头由子储物柜阵列控制单元406进行控制。
[0113]
打印单元408用于打印客户的存储凭证。
[0114]
本发明的有益技术效果在于：不但可以为贵重物品提供存放，而且还通过物联网技术将保险箱与金融机构的安防系统有机结合，充分发挥金融机构安防系统的作用，提高机构应对突发紧急严重安全事件的能力。同时图像识别技术、物联网技术进行自动甄别，防止设备误报造成的“假警”情况，保险箱被打开、被移动、出现异常情况时，监控系统能迅速进行记录，形成短视频，系统将短视频文件按照保险箱编号进行分类保存。由于本系统能对异常情况进行准确判断，并只记录和保存异常情况的监控视频，并且按照保险箱编号和以及异常情况日期时间进行编号归档，事后调查人员能够根据保险箱编号和异常事件发生时间快速调阅保险箱被移动、被打开的短视频，而保险箱静止不动的无效视频被系统自动过滤跳过不用专门保存，从而大大减小了视频监控系统的存储压力，提高了调查效率。
[0115]
本发明还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述方法。
[0116]
本发明还提供一种计算机可读存储介质，所述计算机可读存储介质存储有由计算机执行上述方法的计算机程序。
[0117]
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd-rom、光学存储器等)上实施的计算机程序产品的形式。
[0118]
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
[0119]
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或
多个方框中指定的功能。
[0120]
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
[0121]
以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。