速度检测装置

文档序号:1920003 发布日期:2021-12-03 浏览:20次 >En<

阅读说明:本技术 速度检测装置 (Speed detection device ) 是由 陈建安 于 2021-02-09 设计创作,主要内容包括:速度检测装置包括事件感知器,距离感知器及控制器。事件感知器可以在第一时间点检测物体沿平面的第一图像帧,并且在第二时间点检测物体的第二图像帧。距离感知器可以在第一时间点检测物体沿深度方向的第一深度,其中深度方向基本上垂直于平面,并且在第二时间点检测物体沿深度方向的第二深度。控制器可以依据第一图像帧、第二图像帧、第一深度及第二深度取得沿平面的一维速度及二维速度,并依据第一深度或第二深度取得沿深度方向的三维速度。(The speed detection device comprises an event sensor, a distance sensor and a controller. The event sensor may detect a first image frame of the object along the plane at a first point in time and a second image frame of the object at a second point in time. The distance sensor may detect a first depth of the object in a depth direction at a first point in time, wherein the depth direction is substantially perpendicular to the plane, and detect a second depth of the object in the depth direction at a second point in time. The controller may obtain a one-dimensional velocity and a two-dimensional velocity along a plane according to the first image frame, the second image frame, the first depth, and the second depth, and obtain a three-dimensional velocity along the depth direction according to the first depth or the second depth.)

速度检测装置

技术领域

本发明是有关于一种检测装置,且特别是有关于一种速度检测装置。

背景技术

有许多公知用于测量物体速度的测量装置。依据公知测量方法,公知测量设备包括多普勒雷达(Doppler Radar)及激光测速仪(Laser Velocimetry)。然,多普雷达只能测量一维速度,而激光测速仪在测量时仅限于针对单个物体,且需高功率来发射激光。

发明内容

因此,本发明提出一种速度检测装置,可改善前述公知问题。

本发明实施例提出一种速度检测装置。速度检测装置用以检测物体的三维速度。速度检测装置包括事件感知器、距离感知器及控制器。事件感知器用以:在第一时间点检测物体沿平面的第一图像帧;以及在第二时间点检测物体沿平面的第二图像帧。距离感知器用以:在第一时间点检测物体沿深度方向的第一深度,其中深度方向实质上垂直于平面;以及在第二时间点检测物体沿深度方向的第二深度。控制器用以:依据第一图像帧及第二图像帧,取得物体沿平面的第一运动向量及第二运动向量;依据第一深度及第二深度,取得物体沿深度方向的第三维度速度;以及根据第一深度或第二深度,取得第一运动向量的第一维度速度及第二运动向量的第二维度速度。

本发明另实施例提出一种速度检测装置。速度检测装置用以检测物体的三维速度。速度检测装置包括第一事件感知器、第二事件感知器及控制器。第一事件感知器用以:在第一时间点沿平面检测物体的第一图像帧;以及在第二时间点沿平面检测物体的第二图像帧。第二事件感知器用以:在第三时间点沿平面检测物体的第三图像帧;以及在第四时间点沿平面检测物体的第四图像帧。控制器,用以:依据第一图像帧及第二图像帧,取得物体沿平面的第一运动向量及第二运动向量;使用立体视觉方法,依据第一图像帧、第二图像帧、第三图像帧及第四图像帧,取得物体沿深度方向的第三维度速度,以及使用立体视觉方法,依据第一图像帧、第二图像帧、第三图像帧及第四图像帧,取得物体沿深度方向的第三维度速度依据第一图像帧、第二图像帧、第三图像帧及第四图像帧,取得第一运动向量的第一维度速度及第二运动向量的第二维度速度。

本发明另实施例提出一种速度检测装置。速度检测装置用以检测物体的三维速度。速度检测装置包括第一事件感知器、第二事件感知器及控制器。第一事件感知器用以:在第一时间点检测物体沿平面的第一图像帧;以及在第二时间点检测物体沿平面的第二图像帧。第二事件感知器用以:在第一时间点检测物体沿平面的第三图像帧;以及在第二时间点检测物体沿平面的第四图像帧。控制器,用以:依据第一图像帧及第三图像帧,取得事件特征沿深度方向的第一个第三维度坐标;依据第一图像帧与第二图像帧至少一者及第一个第三维度坐标,取得事件特征沿平面的第一个第一维度坐标及第一个第二维度坐标;依据第二图像帧及第四图像帧,取得事件特征沿深度方向的第二个第三维度坐标;依据第三图像帧与第四图像帧至少一者及第二个第三维度坐标,取得事件特征沿平面的第二个第一维度坐标及第二个第二维度坐标;以以及依据第一个第一维度坐标、第一个第二维度坐标、第一个第三维度坐标、第二个第一维度坐标、第二个第二维度坐标及第二个第三维度坐标,取得事件特征的三维速度。

附图说明

为了对本发明的上述及其他方面有更佳的了解,下文特举实施例,并配合所附图式详细说明如下:

图1A示出了依据本发明实施例的速度检测装置100的功能块示意图。

图1B示出了图1A的速度检测装置100的检测物体的事件特征的示意图。

图1C示出了在时间轴上由图1A的速度检测装置100检测的多个图像帧的示意图。

图1D示出了图1A的事件感知器110的取样时间与距离感知器120的取样时间是相异的示意图。

图2A示出了由速度检测装置100检测到的第一图像帧F1中的多个第一事件特征E1,t1至E5,t1的示意图。

图2B示出了由速度检测装置100检测到的第二图像帧F2中的多个第二事件特征E1,t2至E5,t2的示意图。

图2C示出了图2B的第二事件特征E1,t1至E5,t1的多个第三维度速度V1z,t2至V5z,t2的示意图。

图3A示出了依据另一实施例的速度检测装置200的功能块示意图。

图3B示出了由图3A的速度检测装置200检测到的沿时间轴的多个图像帧的示意图。

具体实施方式

以下公开用于阐述本发明的几个实施例。这些实施例仅出于详细说明的目的,而非用以限制本发明保护范围。

请参照图1A~图1D,图1A示出了依据本发明实施例的速度检测装置100的功能块示意图,图1B示出了图1A的速度检测装置100的检测物体的事件特征(event feature)的示意图,图1C示出了在时间轴上由图1A的速度检测装置100检测的多个图像帧的示意图,而图1D示出了图1A的事件感知器110的取样时间与距离感知器120的取样时间是相异的示意图。

速度检测装置100可以设置在可移动设备上,例如运输工具(例如,车辆、飞机、无人机等)等上,且速度检测装置100可以检测(或测量)相对于可移动设备的相对速度。在另一个实施例中,速度检测装置100可以设置在固定装置上,且速度检测装置100可检测相对于固定装置的绝对速度。

速度检测装置100包括事件感知器110、距离感知器120及控制器130。事件感知器110、距离感知器120与控制器130中至少二者可以整合为单一组件,或件事件感知器110与距离感知器120的至少一个可整合到控制器130中。另外,事件感知器110、距离感知器120及控制器130可以是采用半导体工艺所形成的实体电路结构(例如,芯片)。

事件感知器110可感知物体的运动。物体是例如车辆、生物体或任何待检测物。事件感知器110例如是成像感知器,且包括多个像素(pixel)(未示出了),其中仅感测亮度的变化(称为“事件(event)”)的像素向控制器130输出信号,而其它传感器110未检测到亮度变化的像素则不向控制器130输出任何信号,如此使事件感知器110产生省电优点。另外,事件感知器110的取样时间属于微秒(microsecond)级,因此事件感知器110可以以高的时间分辨率(temporal resolution)感测对象的运动轨迹(motion trajectory)。

如图1B及图1C所示,事件感知器110用以在多个不同时间沿着平面P(例如,x-y平面)检测物体的多个图像帧。以其中二图像帧为例,事件感知器110用以:(1)在第一时间点(时间点)t1检测物体沿平面P的第一图像帧F1;(2)在第二时间点t2检测物体沿平面P的第二图像帧F2。第一图像帧F1包括至少一个事件特征,例如事件特征E,t1,第二图像帧F2包括至少一个事件特征,例如事件特征E,t2

另外,事件特征E,t1与事件特征E,t2可具有相同或相似的特征或局部事件分布。详细来说,“事件特征”例如是对多幅图像帧各别的多个事件进行统计分布后所获得的相同或相似的特征。

为了减少噪声(noise)及获得更稳健(robust)的事件信息,当事件感知器110的每个像素在一短时间区间(例如,微秒级)内累积多个事件特征时,再生成一(或一个)图像帧。

控制器130用于依据第一图像帧F1及第二图像帧F2,取得物体沿平面P的第一运动向量Mx和第二运动向量My。例如,控制器130可以依据事件特征从第一时间点t1至第二时间点t2的运动来取得平面P中沿x轴的第一运动向量Mx及沿y轴的第二运动向量My。在实施例中,第一运动向量Mx大致垂直于第二运动向量My

距离感知器120可以采用飞时技术(Time of Fly,ToF)、立体视觉技术(stereovision technology)、机器学习技术(例如,深度学习网(Deep Learning Network,DNN))沿深度方向(例如,z轴向)感测速度检测装置100与物体之间的距离。在另一实施例中,距离感知器120是例如ToF感知器(或,摄像器)、立体视觉感知器(或,摄像器)、DNN感知器(或,摄像器)或激光雷达(Lidar)设备。

如图1B所示,距离感知器120用以:(1)在第一时间点t1'沿着深度方向(例如,z轴向)检测物体的第一深度D1,其中,深度方向大致垂直于平面P;(2)在第二时间点t2'检测物体沿深度方向的第二深度D2。距离感知器120的取样频率与事件感知器110的取样频率不同。例如,距离感知器120的取样时间(例如,时间间隔)大于事件感知器110的取样时间(例如,时间间隔),因此第一时间点t1'与第一时间点t1不是同一时间点,第二时间点t2'与第二时间点t2不是同一时间点,第一时间点t1与第二时间点t2之间的时间差Δt(如图1D所示)小于第一时间t1'与第二时间t2'之间的时间差Δt'(如图1D所示)。

控制器130,用于:(1)依据第一图像帧F1及第二图像帧F2,取得物体沿平面的第一运动向量Mx及第二运动向量My;(2)依据第一深度D1及第二深度D2,取得物体沿深度方向的三维速度Vz;(3)依据第一深度D1或第二深度D2取得第一运动向量Mx的一维速度Vx及第二运动向量My的二维速度Vy。如图1C所示,第一运动向量Mx及第二运动向量My被组合为合成向量M,E

此外,如图1D所示,控制器130可用以:(1)依据距离感知器120所取得的数个深度值,使用外插法(extrapolation method)取得在第一时间点t1的第一深度D1';(2)依据距离感知器120所取得的数个深度值,使用外插法取得在第二时间点t2的第二深度D2';(3)依据第一深度D1'与第二深度D2'之间的深度差ΔD'及第一时间点t1与第二时间点t1之间的时间差Δt,取得在深度方向的三维速度Vz(即,Vz=ΔD'/Δt)。在实施例中,时间差Δt(对于事件感知器110)是微秒、更大或更小,而时间差Δt'(对于距离感知器120)是毫秒、更大或更小。速度检测装置100可以融合第一维度速度Vx,第二维度速度Vy与第三维度速度Vz,取得物体的三维速度V,E

尽管在上述实施例中以二帧为例描述了图像帧的数量,但是本发明实施例不限于此。在另一实施例中,图像帧的数量可以大于二个。速度检测装置100可依据多个图像帧在多个时间点,取得物体的多个三维速度V,E

尽管在上面的实施例的事件特征的数量系以一个为例说明,然本发明实施例不限于此。在另一实施例中,任何图像帧中的事件特征的数量可大于一个。

请参照图2A~2C,图2A示出了由速度检测装置100检测到的第一图像帧F1中的多个第一事件特征E1,t1至E5,t1的示意图。图2B示出了由速度检测装置100检测到的第二图像帧F2中的多个第二事件特征E1,t2至E5,t2的示意图,而图2C示出了图2B的第二事件特征E1,t1至E5,t1的多个第三维度速度V1z,t2至V5z,t2的示意图。

第一图像帧F1包括多个第一事件特征E1,t1~E5,t1,第二图像帧F2包括多个第二事件特征E1,t2~E5,t2。控制器130还用以:(1)取得第一事件特征E1,t1~E5,t1的第一几何中心G,t1;(2)取得第二事件特征E1,t2~E5,t2的第二几何中心G,t2;及(3)依据第一几何中心G,t1及第二几何中心G,t2,取得物体沿平面的第一运动向量Mx及第二运动向量My。在实施例中,第一几何中心G,t1及第二几何中心G,t2例如是质心(centroids)或形心。

另外,控制器130用以使用类似前述的计算方法,取得第二几何中心G,t2的第一维度速度Vx、第二维度速度Vy及第三维度速度Vz

在另一实施例中,控制器130还用以:(1)使用类似前述时施例的计算方法,取得事件特征E1,t2~E5,t2中各个的第一维度速度Vx及第二维度速度Vy;(2)使用类似上述实施例的计算方法,取得事件特征E1,t2~E5,t2中各个的第三维度速度Vz;(3)平均第一事件特征E1,t2~E5,t2的数个第一维度速度Vx;(4)平均事件特征E1,t2~E5,t2的数个第二维度速度Vy;(5)平均事件特征E1,t2~E5,t2的数个第三维度速度件Vz

另外,尽管前述实施例中的物体数量系以一个为例说明,然本发明实施例不限于此。在另一实施例中,控制器130可依据每个帧中的事件来识别/确定多个物体中各个的轨迹。换句话说,速度检测装置100可以采用类似前述计算方法,同时检测(或,测量)多个物体的各个的三维速度。

请参照图3A及3B,图3A示出了依据另一实施例的速度检测装置200的功能块示意图,而图3B示出了由图3A的速度检测装置200检测到的沿时间轴的多个图像帧的示意图。

速度检测装置200可配置在可移动装置上,例如,运输工具(例如,车辆、飞机、无人机等)等,且速度检测装置200可测量相对于可移动装置的相对速度。在另一实施例中,速度检测装置200可设置在固定装置上,且速度检测装置200可测量相对于固定装置的绝对速度。

速度检测装置200包括第一事件感知器210、第二事件感知器220及控制器230。第一事件感知器210、第二事件感知器220与控制器230中至少二者可整合成单一组件。或者,第一事件感知器210与第二事件感知器220中至少一个可整合至控制器230中。另外,第一事件感知器210、第二事件感知器220与控制器230可以采用例如是使用半导体工艺形成的实体电路结构(例如,芯片)。

第一事件感知器210及/或第二事件感知器220具有与事件感知器110相同或相似的特征,在此不再赘述。另外,第一事件感知器210具有与第二事件感知器220相同或相似的结构,或者第一事件感知器210与第二事件感知器220例如是相同种类/类型的组件。

第一事件感知器210用以在多个不同时间点检测物体沿平面P(例如,x-y平面)的多个图像帧。以相邻二图像帧为例,第一事件感知器210可在第一时间点t1检测物体沿平面P的第一图像帧F11,且在第二时间点t2检测物体沿平面P的第二图像帧F12。第一图像帧F11包括至少一个事件特征,例如事件特征E,t1,第二图像帧F12包括至少一个事件特征,例如事件特征E,t2

第二事件感知器220用以在多个不同时间检测物体沿平面P的多个图像帧。以相邻二图像帧为例,第二事件感知器220可在第一时间点t1检测物体沿平面P的第三图像帧F21,且在第二时间点t检测物体沿平面P的第四图像帧F22。第三图像帧F21包括至少一个事件特征,例如事件特征E,t1,且第四图像帧F22包括至少一个事件特征,例如事件特征E,t2

控制器230用以:(1)依据第一图像帧F11及第二图像帧F12或依据第三图像帧F21及第四图像帧F22,取得物体沿平面P的第一运动向量Mx及第二运动向量My;(2)采用立体视觉方法,依据第一图像帧F11、第二图像帧F12、第三图像帧F21及第四图像帧F22,取得物体沿深度方向的第三维度速度Vz;以及(3)依据第一图像帧F11、第二图像帧F12、第三图像帧F21及第四图像帧F22,取得第一运动向量Mx的第一维度速度Vx及第二运动向量My的第二维度速度Vy

例如,控制器230用以:(1)使用立体视觉方法,依据第一图像帧F11及第三图像帧F21,取得物体的第一深度D1(图3B中未示出了);(2)利用立体视觉方法,依据第二图像帧F12及第四图像帧F22,取得物体的第二深度D2(图3B中未示出了);(3)依据第一深度D1与第二深度D2之间的深度差ΔD及第一时间点t1与第二时间点t2之间的时间差Δt,取得深度方向上的第三维度速度Vz(即,Vz=ΔD/Δt的值);(4)依据深度,例如是第一深度D1、第二深度D2或第一深度D1与第二深度D2的平均值,取得第一运动向量Mx的第一维度速度Vx;(5)依据深度差ΔD,取得第二运动向量My的第二维度速度Vy。在实施例中,时间差Δt为微秒等级或更小。另外,第一事件感知器210及第二事件感知器220在校正后,第一图像帧F11与第三图像帧F21共面配置,且第二图像帧F12与第四图像帧F22也是共面配置。

在另一实施例中,如图3B所示,第一事件感知器210用以:(1)在第一时间点t1检测物体沿平面P的第一图像帧F11;及(2)在第二时间点t2检测物体沿平面P的第二图像帧F12。第二事件感知器220用以:(1)在第一时间点t1检测物体沿平面P的第三图像帧F21;及(2)在第二时间点t2检测物体沿平面P的第四图像帧F22。控制器230用以:(1)依据第一图像帧F11及第三图像帧F21,取得事件特征沿深度方向的第一个第三维度坐标z1,t1;(2)依据第一图像帧F11与第一图像帧F12至少一个及第一个第三维度坐标z1,t1,取得事件特征沿平面P的第一个第一维度坐标x1,t1及第一个第二维度坐标第二特征y1,t1;(3)依据第二图像帧F12及第四图像帧F22,取得事件特征沿深度方向的第二个第三维度坐标z2,t2;(4)依据第三图像帧F21与第四图像帧F22至少一个及第二个第三维度坐标z2,t2,取得事件特征沿平面P的第二个第一维度坐标x2,t2及第二个第二维度坐标y2,t2;及(5)依据第一个第一维度坐标x1,t1、第一个第二维度坐标y1,t1、第一个第三维度坐标z1,t1、第二个第一维度坐标x2,t2、第二个第二维度坐标y2,t2及第二个第三维度坐标z2,t2,取得事件特征的三维速度V,E

例如,控制器230用以:(1)依据Vx=(x2,t2-x1,t1)/Δt,取得第一维度速度Vx;(2)依据Vy=(y2,t2-y1,t1)/Δt,取得第二维度速度Vy;(3)依据Vz=(z2,t2-z1,t1)/Δt,取得第三维度速度Vz;及(4)融合第一维度速度Vx、第二维度速度Vy与第三维度速度Vz,取得物体的三维速度V,E

综上所述,虽然本发明已以实施例公开如上,然其并非用以限定本发明。本发明所属技术领域中具有通常知识者,在不脱离本发明的精神和范围内,当可作各种的更动与润饰。因此,本发明的保护范围当视后附的权利要求书所界定者为准。

[符号说明]

100:速度检测装置

110:事件感知器

120:距离感知器

130:控制器

D1:第一深度

D2:第二深度

ΔD、ΔD':深度差

E,t1、E,t2、E1,t1~E5,t1、E1,t2~E5,t2:事件特征

F1:第一图像帧

F2:第二图像帧

G,t1:第一几何中心

G,t2:第二几何中心

P:平面

θ:角度

t1、t1':第一时间点

t2、t2':第二时间点

Vx:第一维度速度

Vy:第二维度速度

Vz:第三维度速度

V,E:三维速度

x1,t1:第一个第一维度坐标

y1,t1:第一个第二维度坐标

z1,t1:第一个第三维度坐标

x2,t2:第二个第一维度坐标

y2,t2:第二个第二维度坐标

z2,t2:第二个第三维度坐标

Δt、Δt':时间差

15页详细技术资料下载
上一篇:一种医用注射器针头装配设备
下一篇:测风系统、风力发电机组及测风方法

网友询问留言

已有0条留言

还没有人留言评论。精彩留言会获得点赞!

精彩留言,会给你点赞!