具体实施方式

下面将参照附图详细描述本发明的一个实施方式。

(1)第一实施方式

在图1中，100作为整体表示根据第一实施方式的遗留物检测系统。

图1是示出与遗留物检测系统100相关的结构的一个例子的图。

在遗留物检测系统100中，业务管理中心110和与检测遗留物的对象(监控对象)相关的设备101经由路由器102和/或无线基站103连接到网络104可进行通信。

业务管理中心110包括至少一个显示装置111、至少一个NVR(Network VideoRecorder)112、至少一个安全管理服务器113、至少一个中央业务服务器114、至少一个用户终端115以及至少一个工作站116。

显示装置111是能够显示与遗留物相关的信息的显示装置。NVR112是能够存储由设置在被监控设备101中的摄像机121、131、141、151、161拍摄的视频数据(被拍摄的拍摄图像)的存储装置。安全管理服务器113分析视频数据或接收设置在被监控设备101中的分析服务器123、153、163的分析结果，并执行与安全相关的处理。中央业务服务器114是用于管理被监控设备101中的业务的计算机。用户终端115是人机界面。工作站116是专用于规定用途并执行高速处理的计算机。

作为被监控设备101可列举物流中心120、变电站130、隧道140、车站150、飞机160等。另外，被监控设备101不限于这些，可以将任意的区域(设施)作为监控对象。例如，也可以将诸如沿道、疏散通道、机场、港口、公交总站、主题公园、购物中心、酒店和游戏厅等可能发生拥挤的设施作为监控对象。

物流中心120包括至少一个摄像机121、至少一个NVR122、至少一个分析服务器123、至少一个业务服务器124以及至少一个用户终端125。

摄像机121是能够拍摄物流中心120内部的摄像机。NVR122存储(记录)由摄像机121拍摄的视频数据。分析服务器123分析由摄像机121拍摄的视频数据。业务服务器124是用于执行与物流相关的业务的计算机。用户终端125是人机界面。另外，分析服务器123可以具有用于分析由摄像机131、141拍摄的视频数据的结构。

变电站130包括一个或多个能够拍摄变电站130内部的摄像机131。由摄像机131拍摄的视频数据被发送并存储在规定的NVR(例如，预先指定的NVR、连接到网络104并且具有最低通信成本的NVR等)中。

隧道140包括一个或多个能够拍摄隧道140内部的摄像机141。由摄像机141拍摄的视频数据被发送并存储在规定的NVR中。

车站150包括至少一个摄像机151、NVR152、至少一个分析服务器153、至少一个业务服务器154以及至少一个用户终端155。

摄像机151是能够拍摄车站150内部的摄像机。NVR152存储由摄像机151拍摄的视频数据。分析服务器153分析由摄像机151拍摄的视频数据。业务服务器154是用于执行与旅客、货物等相关的业务的计算机。用户终端155是人机界面。另外，分析服务器153可以具有用于分析由摄像机131、141拍摄的视频数据的结构。

飞机160包括至少一个能够拍摄飞机160内部的摄像机161、至少一个用于存储由摄像机161拍摄的视频数据的NVR162、至少一个用于分析视频数据的分析服务器163以及至少一个能够显示各种信息的显示装置164。

另外，关于遗留物的检测，可以由设置在被监控设备101中的分析服务器123、153、163执行，在能够充分保证网络104的通信带宽的情况下，也可以由安全管理服务器113集中执行。此外，关于遗留物的检测，在被监控设备101中设有设置分析服务器的情况下，即可以由安全管理服务器113执行，也可以由预先指定的分析服务器执行。

图2是示出遗留物检测系统100中的功能结构的一个例子的图。

如图2所示，在遗留物检测系统100中，摄像装置201将拍摄的视频数据发送到存储装置202和遗留物检测装置203。存储装置202存储视频数据，并将存储的视频数据发送到遗留物检测装置203。遗留物检测装置203利用从摄像装置201发送的视频数据(实时视频数据)、从存储装置202发送的视频数据(过去的视频数据)和从外部系统204发送的数据检测遗留物，并将与检测到的遗留物相关的信息发送到显示装置205。

摄像装置201是数码相机、摄像机、网络相机等，例如是摄像机121、131、141、151、161。摄像装置201拍摄被设置场所的区域(监控区域)，并将拍摄的视频数据发送到存储装置202的同时将拍摄的视频数据发送到遗留物检测装置203。另外，只要是能用于识别被拍摄的物体的视频数据，视频数据也可以是任何形式的数据。例如，视频数据即可以是由摄像机拍摄的运动图像数据，也可以是由静态照相机以规定间隔拍摄的一系列静止图像数据。

存储装置202是内置HDD(Hard Disk Drive)的计算机、NAS(Network AttachedStorage)、SAN(Storage Area Network)等通过网络连接的存储系统等的存储部。存储装置202，例如，是NVR112、122、152、162。存储装置202具备图像存储部210。图像存储部210将摄像装置201发送的视频数据存储在HDD等(未示出)中。还有，例如，图像存储部210按照来自遗留物检测装置203的请求发送存储的视频数据。

另外，存储装置202的功能(在本例中为图像存储部210)，例如，可以通过CPU(Central Processing Unit)将存储在ROM(Read Only Memory)中的程序读入RAM(RandomAccess Memory)中并执行(软件)来实现，也可以通过专用电路等硬件来实现，也可以通过软件和硬件的结合来实现。

遗留物检测装置203是具有诸如CPU等控制装置、诸如ROM、RAM、HDD等存储装置、以及与外部进行通信的通信装置等的计算机。遗留物检测装置203，例如，是安全管理服务器113和分析服务器123、153、163。遗留物检测装置203具备获取部220、处理部230、图像特征量提取部240以及输出部250。

获取部220获取(例如，接收)由摄像装置201拍摄的视频数据。获取部220将从摄像装置201获取的视频数据转换为遗留物检测装置203内部使用的数据格式。例如，获取部220执行将视频数据(运动图像数据格式)分解成帧(静止图像数据格式)的处理，并将分解的帧(拍摄图像)通知给处理部230。

处理部230包括物体检测部231、物体特征量获取部232、人物特征量获取部233、确定部234、设定部235、判定部236、生成部237以及计时器部238。

物体检测部231，例如，检测在拍摄图像中预定的矩形尺寸的出现物体，并按每个出现物体在拍摄图像之间追踪物体。

物体特征量获取部232，例如，当在物体检测部231的处理中所检测到的物体之中存在超过预定的时间(例如，大约5到10秒)而没有移位(移位一段时间)的物体时，将物体的拍摄图像和物体的位置信息发送到物体特征量提取部241。物体特征量获取部232从物体特征量提取部241接收物体的特征量，并判定它是否为监控物体。

人物特征量获取部233，例如，针对由物体特征量获取部232判定为监控物体的物体(监控物)从图像存储部210获取过去的拍摄图像，并追踪监控物的轨迹将监控物被遗留时的拍摄图像和监控物的位置信息发送到人物特征量提取部242。人物特征量获取部233从人物特征量提取部242接收在监控物出现于监控区域的时刻在监控物附近的人物的特征量。

确定部234，例如，从拍摄图像装置201发送的拍摄图像中截取监控区域中的靠近监控物附近的人物的图像，并将其发送到人物特征量提取部242。确定部234从人物特征量提取部242获取监控区域中的靠近监控物附近的人物的特征量，并对从人物特征量提取部242获取的特征量(在物体附近的人物的特征量)和从人物特征量获取部233获取的特征量(遗留者的特征量)进行核对。

设定部235，例如，从外部系统204获取信息、设定与判定遗留物相关的时间的阈值、抑制系统运转等。

例如，当监控区域的监控物经过了由设定部235设定的阈值的时间、并在拍摄图像之间没有移位、以及没有出现具有遗留者的特征量的人物时，判定部236将监控物判定为遗留物，并设定报警标志。

生成部237根据判定部236的判定结果，生成遗留在监控区域内的遗留物出现之后的遗留物的经过信息(表示遗留物位置的位置信息、表示出现遗留物之后所经过的时间的时间信息)。

计时器部238设定(启动或停止)用于对监控物被遗留的时间进行计数的计时器，或解除由判定部236设定的报警标志。

图像特征量提取部240包括物体特征量提取部241和人物特征量提取部242。

物体特征量提取部241提取(获取)摄像图像中的物体的特征量。关于物体的特征量，例如，可以采用表示颜色的数值、表示浓淡的数值、表示轮廓的数值、对摄像图像进行傅立叶变换得到的频谱中的一个或多个组合。此外，只要是能够从拍摄图像中提取的，可以采用任何特征量，也可以采用与例示的特征量不同的其他已知的特征量。

人物特征量提取部242提取(获取)拍摄图像中的人物的特征量。关于人物的特征量，将上半身、头部、面部、肩部等作为特征部位，可以采用表示颜色的数值和表示轮廓的数值中的一种或多种组合。此外，只要是能够从拍摄图像中提取的，可以采用任何人物的特征量，也可以采用与例示的特征量不同的其他已知的人物的特征量。

输出部250生成用于在由生成部237生成的经过信息中显示与由判定部236获取的人物的特征量相关的信息的屏幕信息，并将该屏幕信息发送到显示装置205。

遗留物检测装置203的功能(获取部220、处理部230、图像特征量提取部240、输出部250等)，例如，可以通过CPU(处理器部的一个例子)将存储在ROM中的程序读入RAM中并执行(软件)来实现，也可以通过专用电路等硬件来实现，也可以通过软件和硬件的结合来实现。还有，遗留物检测装置203的全部或部分功能可以通过摄像装置201来实现，也可以通过存储装置202来实现，也可以通过显示装置205来实现，也可以由其他能够与遗留物检测装置203通信的计算机来实现。

外部系统204是一个或多个能够与遗留物检测系统100通信的外部系统。作为外部系统204，例如，可列举交通工具运行管理信息分发装置261、现场作业设施运营信息分发装置262、中央指挥所运营信息分发装置263、气象信息分发装置264以及统计信息分发装置265。

显示装置205是阴极射线管、液晶显示器、等离子显示器、有机EL(ElectronicLuminescent)显示器等，例如，是显示装置111、164和用户终端115、125、155。

图3是示出从外部系统204发送的信息的一个例子(分发信息300)的图。

交通工具运行管理信息分发装置261分发交通工具运行管理信息。交通工具运行管理信息是交通工具运行计划信息、交通工具运行实绩信息和交通工具内的拥挤信息等。

交通工具运行计划信息，例如，是时间表。交通工具运行实绩信息是基于交通工具的各种定位技术的实时位置信息。例如，是GPS(Global Positioning System)、中远距离无线通信(几米以上)、短距离无线电通信(几厘米以上)的信息。

交通工具内的拥挤信息是表示交通工具内的拥挤程度的信息。例如，交通工具内的拥挤信息是在交通工具入口处对人数进行计数的信息。人数可以通过人工手工计数，也可以通过红外激光计数，也可以通过摄像头传感器计数。还有，例如，交通工具内的拥挤信息是表示交通工具内部的乘车率的信息。乘车率可以通过摄像头传感器测量在交通工具内部空间里人所占的比率，也可以通过负载传感器测量乘车率，也可以基于公共无线分发装置中的连接会话数进行测量。

现场作业设施运营信息分发装置262分发现场作业设施运营信息。现场作业设施运营信息是客票预订购买信息、乘客检入(check-in)信息、乘客检出(check-out)信息和现场作业设施内的拥挤信息等。

客票预订购买信息是乘客预订的票或座位信息、乘客购买的票或座位信息。乘客检入信息，例如，包括表示乘客已通过机场、港口或车站的检票口(搭乘手续)的信息、表示乘客已乘上公交车等交通工具的信息、以及表示酒店等的入住手续的信息。乘客检出信息，例如，是表示乘客已通过机场、港口或车站的出口的信息、表示乘客已从公交车等交通工具下车的信息、表示酒店等的退房手续的信息。现场作业设施内的拥挤信息是表示现场作业设施内的拥挤程度的信息，与交通工具内的拥挤信息一样。

中央指挥所运营信息分发装置263分发中央指挥所运营信息。中央指挥所运营信息，例如，是保安警戒级别信息。保安警戒级别信息是当举办本地活动等时表示对恐怖分子等犯罪行为的警戒级别的设定信息，

气象信息分发装置264分发气象信息。另外，气象信息是每个现场作业设施所在地区的气象信息(被监控地区的气象信息)。

统计信息分发装置265分发统计信息。统计信息，例如，是过去几年存储下来的交通工具运行管理信息、现场作业设施运营信息等的存储信息。

图4是示出遗留物检测系统100中的装置之间的数据流的一个例子的图。

如图4所示，外部系统204在规定定时(例如，每天一次在预先指定的时间)将统计信息发送到遗留物检测装置203(SQ400)。

还有，摄像装置201将拍摄的视频数据依次(实时)发送到存储装置202(SQ401)的同时发送到遗留物检测装置203(SQ402)。

遗留物检测装置203在遗留物检测处理410中根据需要请求存储在存储装置202中的视频数据(SQ403)。存储装置202将被请求的视频数据发送给遗留物检测装置203(SQ404)。另外，关于遗留物检测处理410将参考图5在下文中进行描述。

还有，外部系统204将现场作业设施运营信息定期发送给遗留物检测装置203(SQ405)。

另一方面，在遗留物检测处理410中，遗留物检测装置203根据需要向外部系统204请求交通工具运行管理信息(SQ406)。外部系统204将被请求的信息发送给遗留物检测装置203(SQ407)。

还有，当在遗留物检测处理410中检测到遗留物时，遗留物检测装置203将与遗留物相关的信息(通知屏幕、报警标志的设定信息等)发送给显示装置205(SQ408)。显示装置205按照用户的操作将报警标志的解除信息发送给遗留物检测装置203(SQ409)。

图5是表示与遗留物检测装置203执行的遗留物检测处理相关的流程图的一个例子的图。

在步骤S501中，获取部220从拍摄装置201获取视频数据(拍摄图像)。

在步骤S502中，物体检测部231通过背景差分法判定是否存在出现的物体。当物体检测部231判定存在物体时，将处理转移到步骤S503，当判定不存在物体时，将处理转移到步骤S501。当物体检测部231判定出现了新的物体(动态物体)时，将每一个帧中的动态物体的位置信息(坐标信息)与唯一地赋予每个追踪的标识符(追踪标识符)对应起来，生成新出现的动态物体的追踪信息。

另外，所出现的物体的检测方法不限于背景差分法。例如，当从待处理的帧中检测到的移动物体与从上一时刻的帧中检测到的任何一个移动物体均不对应时，物体检测部231可以判定出现了新的移动物体。此外，动态物体的检测和追踪可以通过，例如，在SIMONBAKER AND IAIN MATTHEWS“Lucas-kanade 20years on:A unifying framework”，International Journal of Computer Vision，vol.53，no.3，221-255，2004中记载的方法等任何方法来实现。

在步骤S503中，物体检测部231提取物体的大小(例如，矩形尺寸)，并判定物体的大小是否为追踪对象的大小(例如，是否为小于或等于预先规定的物体尺寸)。当判定物体的大小是追踪对象的大小时，物体检测部231将处理转移到步骤S504，当判定物体的大小不是追踪对象的大小时，将处理转移到步骤S501。

在此，物体检测部231保持基于摄像装置201的校准信息计算的图像中的三维位置信息。物体检测部231基于所保持的三维位置信息，根据图像上的位置来估计物体映出的大小。

另外，当人物拿着物体移动时，物体检测部231将该人物和物体识别为一个物体。之后，当人物放下物体离开时(例如，当判定第一物体(人物)和第二物体(物体)分开了一定距离时)，物体检测部231将每一个识别为物体，并针对每个物体进行追踪。

在步骤S504中，物体特征量获取部232判定物体是否在没有移位的情况下经过了一段时间(物体是否静止了一段时间)。当判定经过了一段时间时，物体特征量获取部232将该物体作为监控物体并将处理转移到步骤S505，当判定没有经过一段时间时，将处理转移到步骤S501。

在步骤S505中，物体特征量获取部232获取监控物体的特征量并判定监控物体是否为物体。当判定监控物体是物体时，物体特征量获取部232将处理转移到步骤S506，当判定监控物体不是物体时，将处理转移到步骤S501。另外，在此判定中，去除了由于光等引起的噪声。

此外，物体特征量获取部232将监控物体的拍摄图像和监控物体的位置信息通知给物体特征量提取部241。物体特征量提取部241从接收到的拍摄图像和位置信息中提取监控物体的特征量，并将提取的特征量通知给物体特征量获取部232。通过这样的处理，物体特征量获取部232获取监控物体的特征量。另外，物体特征量提取部241，例如，针对多个不同的像素特征(颜色、浓淡、轮廓等)，分别计算1以上的值(特征量)。另外，物体的特征量的计算(提取)不限于上述内容，可以通过公知的方法进行计算。

在步骤S506中，计时器部238启动计时器来对判定为物体的监控物体(监控物)被遗留的时间进行计数。

在步骤S507中，人物特征量获取部233向图像存储部210请求获取一段时间内的拍摄图像(过去的拍摄图像)。

在步骤S508中，人物特征量获取部233判定是否确认到监控物的轨迹。当判定为确认到监控物的轨迹时，人物特征量获取部233将处理转移到步骤S509，当判定为没有确认到监控物的轨迹时，将处理转移到步骤S516。

例如，人物特征量获取部233通过背景差分法追踪监控物。另外，人物特征量获取部233也可以通过，例如，将帧划分为小区域，在帧之间计算每个小区域的运动向量，并将在运动向量中进行相同运动的小区域汇集在一起来追踪监控物。此外，可以采用上述方法以外的任何方法来实现对被监控物的追踪。

在步骤S509中，人物特征量获取部233获取在出现监控物的时刻在监控物附近的人物的特征量。

此外，人物特征量获取部233将监控物的拍摄图像和监控物的位置信息通知给人物特征量提取部242。人物特征量提取部242从接收到的拍摄图像和位置信息中提取在监控物附近的人物的特征量，并将提取的特征量通知给人物特征量获取部233。通过这样的处理，人物特征量获取部233获取人物的特征量。例如，人物特征量提取部242从拍摄图像中针对人物特征(头部、面部等)检测特征区域(头部区域、面部区域等)，并计算特征区域的特征量。另外，人物的特征量的计算(提取)不限于上述内容，可以通过公知的方法进行计算。

在步骤S510中，确定部234将获取的特征量的人物确定为遗留者，并获取遗留者的拍摄图像、监控物的尺寸信息以及监控物的位置信息。

在步骤S511中，确定部234从摄像装置201依次发送的拍摄图像(实时视频数据)中获取在监控物附近的人物的特征量，并对获取的特征量和遗留者的特征量进行核对，判定是否一致。当判定为一致时，确定部234将处理转移到步骤S517，当判定为不一致时，将处理转移到步骤S512。

例如，确定部234对监控物附近的人物的特征量与遗留者的特征量之间的距离进行计算，当计算出的距离小于规定的距离时，判定为一致。

另外，确定部234可以将在距监控物规定范围内(距离内)的物体作为监控物附近的人物，也可将靠近监控物并进入规定范围内的物体作为监控物附近的人物。

在步骤S512中，判定部236判定计时器是否超过规定阈值。当判定计时器超过规定阈值时，判定部236判定监控物为遗留物，并将处理转移到步骤S513，当判定计时器没有超过规定阈值时，将处理转移到步骤S511。

在步骤S513中，判定部236设定报警标志。

在步骤S514中，生成部237基于判定部236的判定结果生成经过信息，并将生成的经过信息通知给输出部250。输出部250生成在生成部237生成的经过信息中显示与由判定部236获取的人物的特征量有关的信息(例如，表示人物的属性的属性信息)的屏幕信息(例如，报警屏幕)，并将该屏幕信息发送给显示装置205。在显示装置205上显示报警屏幕。另外，关于报警屏幕将参考图7在下文中进行描述。

在步骤S515中，计时器部238判定是否已经从显示装置205接收到用户(例如，指挥员)发出的用于公开报警的指令(解除指令)。当计时器部238判定接收到解除指令时，结束遗留物检测处理，当判定没有接收到解除指令时，将处理转移到步骤S514。

在步骤S516中，生成部237生成错误消息，并将生成的错误消息通知给输出部250。输出部250生成表示错误消息的屏幕信息(错误屏幕)并将其发送到显示装置205。在显示装置205上显示接收到的错误屏幕。

在此，还可以考虑将在监控区域内超过规定时间而没有移位的所有物体都检测为遗留物的处理方法，然而在该处理方法中，存在报警次数过多的问题。

针对这一问题，在本实施方式中，如上所述，追溯到过去的拍摄图像追踪监控物并确定遗留者，或判定在监控物附近是否存在遗留者，当不存在遗留者的情况下经过了规定时间时判定为遗留物，提高了检测遗留者和遗留物的准确度，由此可减少过多的报警次数。

在步骤S517中，计时器部238停止(也可以初始化)计时器，并将处理转移到步骤S501。

在步骤S518中，设定部235根据从外部系统204定期或根据请求发送的信息，动态设定规定阈值，该规定阈值表示从确定遗留物至发出报警的时间。

更具体地，当从交通工具运行管理信息分发装置261接收到运行实绩信息时，设定部235根据运行实绩信息计算出发和到达搭乘处的交通工具的运行间隔，根据从每个交通工具位置信息计算出的运行间隔设定规定阈值。

例如，设定部235在每个搭乘处将交通工具的运行间隔的规定倍数的值设定为阈值(例如，当运行间隔为3分钟时，给阈值设定为2倍的6分钟)。

还有，例如，当运行间隔为第一值(例如，10分钟)时，设定部235设定与第一值对应的阈值(例如，10分钟)。当运行间隔为小于第一值的第二值(例如，5分钟)时，设定部235设定与第二值对应的阈值(例如，5分钟)。当运行间隔为大于第一值的第三值(例如，15分钟)时，设定部235设定与第三值对应的阈值(例如，15分钟)。另外，阈值可以与运行间隔的值相同，也可以比运行间隔的值大。

根据这种规定阈值的设定，例如，能够根据遗留者乘坐交通工具后遗留的情况来检测遗留物。

还有，当从现场作业设施运营信息分发装置262接收到现场作业设施内的拥挤信息时，设定部235根据拥挤信息的拥挤程度设定规定阈值。

例如，当拥挤程度在第一范围内(例如，小于30％)时，设定部235设定第一阈值(例如，10分钟)。当拥挤程度在高于第一范围的第二范围(例如，等于或大于30％且小于60％)内时，设定部235设定第二阈值(例如，5分钟)。另外，当拥挤程度超过上限值(例如90％以上)时，判断为无法检测遗留物，可以通知停止了对监控物的监控，并结束处理。

这样，当从外部系统204获取到表示监控对象的拥挤程度的拥挤信息时，设定部235将阈值设定为接收到的拥挤信息的拥挤程度越小，阈值越高(规定时间越长)。

根据这种规定阈值的设定，例如，当拥挤程度相对较低时，将较长的时间设定为规定阈值，当拥挤程度相对较高时，将较短的时间设定为规定阈值，因此能够根据因遗留物产生的影响(诸如遗留物阻碍通道等的影响，遗留物为危险物时对周围产生的影响等)的大小来检测遗留物。

图6是示出与设定规定阈值的处理(阈值设定处理)相关的流程图的一个例子的图。

在步骤S601中，设定部235基于以规定定时(例如，一天一次在预先指定的时间)从外部系统204发送的信息来设定规定阈值。

更具体地，当从统计信息分发装置265接收到交通工具运行管理信息时，设定部235基于交通工具运行管理信息，按照每个星期、每个时间段、每个搭乘处预测一天的运行间隔，并根据预测的运行间隔设定规定阈值。例如，在所有搭乘处，周六、周日和节假日的运行间隔比平日长，规定阈值设定为较长的值，或者在通勤时间段运行间隔相对较短，规定阈值设定为较短的值，或者对于在白天的时间段不停车的搭乘处因为运行间隔相对较长，所以规定阈值设定为较长的值。

根据这种规定阈值的设定，按照每个星期、每个时间段、每个搭乘处以及它们的任意组合来设定符合运行间隔的阈值，因此，与阈值设定为固定值的情况相比，能够在更合适的定时检测遗留物。

还有，例如，当从统计信息分发装置265获取表示监控对象的拥挤程度的统计信息时，设定部235按照每个星期、每个时间段、每个搭乘处以及它们的任意组合来计算拥挤程度，并且将阈值设定为计算出的拥挤程度越小，阈值变得越高(规定时间越长)。

根据这种规定阈值的设定，按照每个星期、每个时间段、每个搭乘处以及它们的任意组合来设定符合拥挤程度的阈值，因此，与阈值设定为固定值的情况相比，能够在更合适的定时检测遗留物。

还有，例如，当从中央指挥所运营信息分发装置263接收到保安警戒级别信息时，设定部235根据保安警戒级别为规定阈值设定初始值。例如，当警戒级别为第一级别时，设定部235设定第一阈值(例如，10分钟)。当警戒级别为比第一级别高的第二级别时，设定部235设定第二阈值(例如，5分钟)。当警戒级别为低于第一级别的第三级别时，设定部235设定第三阈值(例如，15分钟)。

根据这种规定阈值的设定，例如，可以根据举办活动等的情况来检测遗留物。

图7是示出报警屏幕的一个例子(屏幕700)的图。

屏幕700包括用于实时显示图像的区域701、对应遗留物702设置的区域703、用于显示遗留者的图像的区域704、以及用于显示遗留者的属性的区域705。

在区域703中，遗留物702是通过显示边框线、使边框线和/或区域闪烁、改变边框线和/或区域的颜色、点亮区域、显示文字等来突出显示的。区域703中也可以显示有遗留物被遗留的时间、遗留物被遗留后所经过的时间等。

根据区域703，例如，指挥员能够快速准确地掌握存在遗留物702。还有，屏幕700上显示有实时图像，因此指挥员可以容易地掌握遗留物702和遗留物702被遗留的地点。

在区域705中显示有表示遗留者的属性的内容，例如戴着红色帽子和穿着黑色衣服等。

根据区域703，例如，因为指挥员可以确认遗留者的属性，所以能够容易地掌握遗留者。

根据本实施方式，能够降低遗留物检测过程中的漏报概率和多报概率，并提高检测遗留物的准确度。

(2)其他实施方式

另外，在上述实施方式中，描述了将本发明应用于遗留物检测装置的情况，但本发明不限于此，可广泛应用于其他各种系统、装置、方法、程序以及可以读写程序的记录介质中。

还有，在上述实施方式中，作为用于输出存在遗留物之信息的方法，对在显示装置205上显示报警屏幕的情况进行了描述，但是本发明不限于此，可以启动报警装置(例如灯、喇叭)、也可以通过投影装置(未图示)进行投影、也可以使用打印装置(未图示)进行打印、也可以打预先指定的电话、也可以通过其他方法输出。

还有，在上述实施方式中，描述了将一段时间没有移位的物体检测为监控物体的情况，但是本发明不限于此，也可以是出现的物体分为第一物体和第二物体，判定第一物体和第二物体是否相距规定距离，当判定为相距规定距离时，处理部230将第一物体和第二物体中没有移动的物体检测为监控物体。在这种情况下，处理部230也可以将分为第一物体和第二物体时的时间与监控物体相关联起来进行管理。另外，处理部230也可以利用这样的时间来获取过去的拍摄图像。

还有，在上述实施方式中，描述了向图像存储部210请求一段时间内的拍摄图像的情况，但是本发明不限于此，也可以追溯拍摄图像至监控物出现在监控区域来获取。

还有，在上述实施方式中，描述了拍摄装置对拍摄了被设置区域的视频数据进行发送的情况，但是本发明不限于此，也可以是拍摄装置被设置在诸如无人机或机器人等移动体上，移动体一边移动一边发送由摄像装置拍摄的视频数据。

还有，在上述实施方式中，“存储部”至少是存储器部和PDEV部的至少一部分中的至少一个(通常至少一个存储器部)。

“存储器部”是一个或多个存储器，通常可以是主存储装置。存储器部中的至少一个存储器可以是易失性存储器，也可以是非易失性存储器。

“PDEV部”是一个或多个PDEV，通常可以是辅助存储设备。“PDEV”是指物理存储设备(Physical storage Device)，通常是非易失性存储设备，例如HDD(Hard Disk Drive)或SSD(Solid State Drive)。

还有，在上述实施方式中，“处理器部”是一个或多个处理器。至少一个处理器通常是如CPU的微处理器，但也可以是如GPU(Graphics Processing Unit)的另一种类型的处理器，例如GPU(Graphics Processing Unit)。至少一个处理器可以是单核或多核。至少一个处理器可以是诸如执行部分或全部处理的硬件电路(例如，FPGA(Field-ProgrammableGate Array)或ASIC(Application Specific Integrated Circuit))等广义上的处理器。

还有，在上述实施方式中，有时以“程序”作为主语来描述了处理，但是程序是由处理器部执行的，由此一边适当使用存储部(例如，存储器)和/或接口部(例如，通信端口)等一边执行规定的处理，因此处理的主语可以是处理器。以程序为主语描述的处理可以是由处理器部或具有处理器部的装置执行的处理。还有，处理器部还可以包括执行部分或全部处理的硬件电路(例如FPGA或ASIC)。程序可以从程序源安装到计算机等装置中。程序源可以是，例如，程序分发服务器或可以被计算机读取的记录介质(例如，非临时性记录介质)。还有，在以下描述中，也可以将两个以上的程序作为一个程序来实现，也可以将一个程序作为两个以上程序来实现。

还有，在上述描述中，实现各个功能的程序、表格、文件等信息可以存放到存储器、硬盘、SSD(Solid State Drive)等存储装置，或者IC卡、SD卡、DVD等的记录介质中。

本发明，例如，具有以下的特征结构。

(i)

一种遗留物检测装置(例如，遗留物检测装置203)或遗留物检测系统(遗留物检测系统100)，用于检测遗留在监控对象(例如，设备101)区域内的物体，所述遗留物检测装置的特征在于，具备：获取部(例如，获取部220)，其从对被监控区域进行拍摄的摄像装置(例如，摄像装置201)获取所述区域的图像；处理部(例如，处理部230)，其当从由所述获取部获取的图像中将一段时间没有移位的物体检测为物体时，启动用于对检测到所述物体之后的时间进行计数的计数器，并且判定持有过所述物体的人物与由所述获取部获取的图像中所包含的人物是否一致，如果判定为一致，则停止所述计时器，如果判定为不一致，则不停止所述计时器；以及输出部(例如，输出部250)，其根据所述处理部的结果进行输出，所述处理部判定所述计时器是否超过规定时间，当所述处理部判定所述计时器已超过所述规定时间时，所述输出部输出存在遗留物的信息。

根据上述结构，例如，当在监控物附近的人物不是持有过监控物的人物时，计时器不会停止，因此即使在拥挤的情况下也能够避免发生错过遗留物的情况，并能够减少漏报的发生。

(ii)

根据(i)所述的遗留物检测装置或遗留物检测系统，其特征在于，所述处理部判定持有过所述物体的人物与由所述获取部获取的图像中所包含的人物中位于距所述物体一定距离内的人物是否一致。

例如，在拥挤的情况下，如果对所有人物都进行核对，核对带来的负荷就会变大，但是根据上述结构，通过将范围缩小到位于一定距离内的人物进行核对，能够减少核对带来的负荷。

(iii)

根据(i)或(ii)所述的遗留物检测装置或遗留物检测系统，其特征在于，所述处理部在所述一段时间没有移位的物体中将规定大小的物体检测为物体。

例如，在拥挤的情况下，如果将所有物体都判定为物体，并监控一段时间的移位，监控带来的负荷就会变大，但是根据上述结构，通过将物体缩小到规定大小的物体的范围并进行监控，能够减少监控带来的负荷。

(iv)

根据(i)至(iii)的任一个所述的遗留物检测装置或遗留物检测系统，其特征在于，所述处理部通过从存储有由所述摄像装置拍摄的图像的存储部中获取所述一段时间的图像，并追溯所获取的图像追踪所述物体来确定持有过所述物体的人物。

根据上述结构，例如，通过追溯过去的图像并追踪监控物，可以准确地将监控物与持有过监控物的人物进行匹配(进行关联)，能够更准确地检测到遗留物。另外，即使在人物和物体彼此分离的情况下，也可以通过这种配对维持关联性。还有，例如，由于能够更准确地检测到遗留物，因此能够避免检测到多余的物体的事态，可减少过多的报警次数。

(v)

根据(i)至(iv)的任一个所述的遗留物检测装置或遗留物检测系统，其特征在于，所述处理部从外部系统(例如，外部系统204)定期接收与遗留相关的信息，并根据接收到的信息设定所述规定时间。

根据上述结构，例如，根据情况动态设定规定时间，因此能够更准确地检测到遗留物。

(vi)

根据(v)所述的遗留物检测装置或遗留物检测系统，其特征在于，当从外部系统接收到表示交通工具运行间隔的信息时，所述处理部将所述规定时间设定为接收到的信息的运行间隔越长所述规定时间越长。

根据上述结构，例如，根据当前的运行间隔设定规定时间，因此能够更确切地判定遗留物。

(vii)

根据(i)至(vii)的任一个所述的遗留物检测装置或遗留物检测系统，其特征在于，所述处理部在规定定时从外部系统接收与遗留相关的统计信息，并根据接收到的统计信息设定所述规定时间。

根据上述结构，例如，根据数量特征设定规定时间，因此能够更准确地检测到遗留物。

(viii)

根据(vii)所述的遗留物检测装置或遗留物检测系统，其特征在于，当从外部系统接收到表示交通工具运行间隔的统计信息时，所述处理部按照每个星期、每个时间段、每个搭乘处、以及它们的任意组合计算运行间隔，并将所述规定时间设定为计算出的运行间隔越长所述规定时间越长。

根据上述结构，例如，按照每个星期、每个时间段、每个搭乘处以及它们的任意组合来设定符合运行间隔的阈值，因此能够更准确地检测到遗留物。

(ix)

根据(i)至(viii)的任一个所述的遗留物检测装置或遗留物检测系统，其特征在于，所述输出部生成突出显示由所述获取部获取的图像中的遗留物的屏幕信息并将其发送到显示装置(例如，显示装置205)。

根据上述结构，例如，在显示装置中突出显示遗留物，因此指挥员能够快速且准确地掌握遗留物。

还有，在不超出本发明的主旨的范围内，对上述结构可以适当地进行更改、重组、组合或省略。

根据上述结构，可以实现高可靠性的遗留物检测系统。

符号说明

100……遗留物检测系统。