视频裁剪方法、装置、终端设备以及可读存储介质

文档序号:439951 发布日期:2021-12-24 浏览:19次 >En<

阅读说明:本技术 视频裁剪方法、装置、终端设备以及可读存储介质 (Video clipping method and device, terminal equipment and readable storage medium ) 是由 刘思阳 于 2021-09-28 设计创作,主要内容包括:本发明提供了一种视频裁剪方法、装置、终端设备以及可读存储介质。该方法包括:获取待裁剪视频的每帧图片所对应的裁剪框,然后按照预设数量和每帧图片的时间顺序,对裁剪框进行分组,得到多组裁剪框,再剔除每一组裁剪框中的异常裁剪框,对剔除异常裁剪框后的每一组裁剪框进行均值计算,得到每一组裁剪框对应的多帧图片中第一帧图片的裁剪框,进而根据每一组中的第一帧图片的裁剪框,对相邻两组中的第一帧图片之间的每一帧图片的裁剪框进行差值计算,得到相邻两组中的第一帧图片之间的每一帧图片的裁剪框,最后根据每一帧图片的裁剪框,对待裁剪视频进行裁剪。所述方法能够避免连续多帧图片的裁剪框发生突变而造成的视频存在抖动的问题。(The invention provides a video clipping method, a video clipping device, terminal equipment and a readable storage medium. The method comprises the following steps: the method comprises the steps of obtaining cutting frames corresponding to each frame of picture of a video to be cut, grouping the cutting frames according to the preset number and the time sequence of each frame of picture to obtain multiple groups of cutting frames, then eliminating abnormal cutting frames in each group of cutting frames, carrying out mean value calculation on each group of cutting frames after the abnormal cutting frames are eliminated to obtain the cutting frame of a first frame of picture in multiple frames of pictures corresponding to each group of cutting frames, further carrying out difference value calculation on the cutting frame of each frame of picture between the first frames of pictures in two adjacent groups according to the cutting frame of the first frame of picture in each group to obtain the cutting frame of each frame of picture between the first frames of pictures in two adjacent groups, and finally cutting the video to be cut according to the cutting frame of each frame of picture. The method can avoid the problem of video jitter caused by abrupt change of the cropping frame of continuous multi-frame pictures.)

视频裁剪方法、装置、终端设备以及可读存储介质

技术领域

本发明涉及数据处理技术领域,特别是涉及一种视频裁剪方法、装置、终端设备以及可读存储介质。

背景技术

在视频中截取部分区域的视频帧,以形成新的视频的业务场景中。需要计算每一帧的裁剪框,然后将裁剪框内的内容进行提取,以便重新合成新的视频。然而,由于裁剪框是每一帧独立进行计算,会存在计算出的裁剪框一会儿大一会儿小,一会儿上一会儿下的问题,最终导致合成的视频存在抖动,视频质量极差。

发明内容

本发明实施例的目的在于提供一种视频裁剪方法、装置、终端设备以及可读存储介质,该方法通过对裁剪框进行分组,再剔除每组裁剪框中的异常裁剪框,并计算得到每组裁剪框在剔除异常裁剪框之后的均值裁剪框,然后在两组均值裁剪框对之间对裁剪框进行差值计算,以便得到每一帧图片的裁剪框,从而避免了连续多帧图片的裁剪框发生突变而造成的视频存在抖动的问题。具体技术方案如下:

在本发明实施例的第一方面,首先提供了一种视频裁剪方法,所述方法包括:

获取待裁剪视频的每帧图片所对应的原始裁剪框;

按照预设数量和每帧图片的时间顺序,对所述原始裁剪框进行分组,得到多组原始裁剪框;

剔除每一组原始裁剪框中的异常裁剪框;

对剔除异常裁剪框后的每一组原始裁剪框进行均值计算,得到每一组原始裁剪框对应的多帧图片中第一帧图片的更新裁剪框;

根据每一组中的第一帧图片的更新裁剪框,对相邻两组中的第一帧图片之间的每一帧图片的裁剪框进行差值计算,得到相邻两组中的第一帧图片之间的每一帧图片的更新裁剪框;

根据每一帧图片的更新裁剪框,对所述待裁剪视频进行裁剪。

可选地,剔除每一组原始裁剪框中的异常裁剪框,包括:

对每一组原始裁剪框进行均值计算,得到每一组原始裁剪框所对应的第一平均裁剪框;

根据预设剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的异常裁剪框。

可选地,所述预设剔除条件包括中心剔除条件、宽度剔除条件和高度剔除条件,所述异常裁剪框包括中心异常裁剪框、宽度异常裁剪框和高度异常裁剪框;

根据预设剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的异常裁剪框,包括:

根据所述中心剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的所述中心异常裁剪框;

根据所述宽度剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的所述宽度异常裁剪框;

根据所述高度剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的所述高度异常裁剪框。

可选地,根据所述中心剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的所述中心异常裁剪框,包括:

针对每一组原始裁剪框中的任意一个原始裁剪框,确定该原始裁剪框的裁剪中心与该组原始裁剪框所对应的第一平均裁剪框的裁剪中心的第一距离值;

确定该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度和裁剪高度之和,得到第一剔除值;

当所述第一距离值大于第一剔除值与第一预设参数的乘积时,确定该原始裁剪框为所述中心异常裁剪框;

剔除每一组原始裁剪框中的所述中心异常裁剪框。

可选地,根据所述宽度剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的所述宽度异常裁剪框,包括:

针对每一组原始裁剪框中的任意一个原始裁剪框,确定该原始裁剪框的裁剪宽度与该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度的第一绝对距离值;

当所述第一绝对距离值大于该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度与第二预设参数的乘积时,确定该原始裁剪框为所述宽度异常裁剪框;

剔除每一组原始裁剪框中的所述宽度异常裁剪框。

可选地,根据高度剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的高度异常裁剪框,包括:

针对每一组原始裁剪框中的任意一个原始裁剪框,确定该原始裁剪框的裁剪高度与该组原始裁剪框所对应的第一平均裁剪框的裁剪高度的第二绝对距离值;

当所述第二绝对距离值大于该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度与第三预设参数的乘积时,确定该原始裁剪框为所述高度异常裁剪框;

剔除每一组原始裁剪框中的所述高度异常裁剪框。

在本发明实施例的第二方面,还提供了一种视频裁剪装置,所述装置包括:

获取模块,用于获取待裁剪视频的每帧图片所对应的原始裁剪框;

分组模块,用于按照预设数量和每帧图片的时间顺序,对所述原始裁剪框进行分组,得到多组原始裁剪框;

剔除模块,用于剔除每一组原始裁剪框中的异常裁剪框;

第一获得模块,用于对剔除异常裁剪框后的每一组原始裁剪框进行均值计算,得到每一组原始裁剪框对应的多帧图片中第一帧图片的更新裁剪框;

第二获得模块,用于根据每一组中的第一帧图片的更新裁剪框,对相邻两组中的第一帧图片之间的每一帧图片的裁剪框进行差值计算,得到相邻两组中的第一帧图片之间的每一帧图片的更新裁剪框;

裁剪模块,用于根据每一帧图片的更新裁剪框,对所述待裁剪视频进行裁剪。

可选地,所述剔除模块包括:

第一获得子模块,用于对每一组原始裁剪框进行均值计算,得到每一组原始裁剪框所对应的第一平均裁剪框;

剔除子模块,用于根据预设剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的异常裁剪框。

可选地,所述预设剔除条件包括中心剔除条件、宽度剔除条件和高度剔除条件,所述异常裁剪框包括中心异常裁剪框、宽度异常裁剪框和高度异常裁剪框;

所述剔除子模块包括:

第一剔除单元,用于根据所述中心剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的所述中心异常裁剪框;

第二剔除单元,用于根据所述宽度剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的所述宽度异常裁剪框;

第三剔除单元,用于根据所述高度剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的所述高度异常裁剪框。

可选地,所述第一剔除单元包括:

第一确定子单元,用于针对每一组原始裁剪框中的任意一个原始裁剪框,确定该原始裁剪框的裁剪中心与该组原始裁剪框所对应的第一平均裁剪框的裁剪中心的第一距离值;

第一获得子单元,用于确定该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度和裁剪高度之和,得到第一剔除值;

第二确定子单元,用于当所述第一距离值大于第一剔除值与第一预设参数的乘积时,确定该原始裁剪框为所述中心异常裁剪框;

第一剔除子单元,用于剔除每一组原始裁剪框中的所述中心异常裁剪框。

可选地,所述第二剔除单元包括:

第三确定子单元,用于针对每一组原始裁剪框中的任意一个原始裁剪框,确定该原始裁剪框的裁剪宽度与该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度的第一绝对距离值;

第四确定子单元,用于当所述第一绝对距离值大于该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度与第二预设参数的乘积时,确定该原始裁剪框为所述宽度异常裁剪框;

第二剔除子单元,用于剔除每一组原始裁剪框中的所述宽度异常裁剪框。

可选地,所述第三剔除单元包括:

第五确定子单元,用于针对每一组原始裁剪框中的任意一个裁剪框,确定该原始裁剪框的裁剪高度与该组原始裁剪框所对应的第一平均裁剪框的裁剪高度的第二绝对距离值;

第六确定子单元,用于当所述第二绝对距离值大于该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度与第三预设参数的乘积时,确定该原始裁剪框为所述高度异常裁剪框;

第三剔除子单元,用于剔除每一组原始裁剪框中的所述高度异常裁剪框。

在本发明实施例的第三方面,还提供了一种终端设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;

存储器,用于存放计算机程序;

处理器,用于执行存储器上所存放的程序时,实现本发明实施例的第一方面所述的视频裁剪方法中的步骤。

在本发明实施例的又一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述任一所述的视频裁剪方法中的步骤。

在本发明实施的又一方面,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一所述的视频裁剪方法。

本发明实施例提供的视频裁剪方法,首先获取待裁剪视频的每帧图片所对应的裁剪框,然后按照预设数量和每帧图片的时间顺序,对裁剪框进行分组,得到多组裁剪框,再剔除每一组裁剪框中的异常裁剪框,对剔除异常裁剪框后的每一组裁剪框进行均值计算,得到每一组裁剪框对应的多帧图片中第一帧图片的裁剪框,进而根据每一组中的第一帧图片的裁剪框,对相邻两组中的第一帧图片之间的每一帧图片的裁剪框进行差值计算,得到相邻两组中的第一帧图片之间的每一帧图片的裁剪框,最后根据每一帧图片的裁剪框,对待裁剪视频进行裁剪。该方法具有如下技术效果:

一、按照预设数量和每帧图片的时间顺序,对裁剪框进行分组,得到多组裁剪框,并剔除每一组裁剪框中的异常裁剪框,并对剔除异常裁剪框后的每一组裁剪框进行均值计算,得到每一组裁剪框对应的多帧图片中第一帧图片的裁剪框,能够使每一组计算出来的裁剪框更加准确且均匀,避免少数情况下的极端裁剪框造成计算出来的裁剪框不准确的现象,以提高得到的每一组裁剪框对应的多帧图片中第一帧图片的裁剪框的准确性。

二、根据每一组中的第一帧图片的裁剪框,对相邻两组中的第一帧图片之间的每一帧图片的裁剪框进行差值计算,得到相邻两组中的第一帧图片之间的每一帧图片的裁剪框,从而能够使每一组内的裁剪框能够均匀变化,能够在保证视频裁剪的前提下,避免连续多帧图片的裁剪框发生突变而造成的视频存在抖动的问题,以提高裁剪后合成的视频的质量。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。

图1是本申请一实施例示出的一种视频裁剪方法的流程图;

图2是本申请一实施例示出的一种视频裁剪方法的过程示意图;

图3是本申请一实施例示出的一种剔除中心异常裁剪框的流程图;

图4是本申请一实施例示出的一种剔除宽度异常裁剪框的流程图;

图5是本发明一实施例示出的一种剔除高度异常裁剪框的流程图;

图6是本申请一实施例示出的一种视频裁剪装置的结构框图;

图7是本申请一实施例示出的一种终端设备的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行描述。

在视频合成的业务场景中,需要从不同的视频中截取部分区域的视频帧,以便合成新的视频。

相关技术中的一种解决方式为:计算每一帧的裁剪框,然后将裁剪框内的内容进行提取,以便重新合成新的视频。然而,由于裁剪框是每一帧独立进行计算,会存在计算出的裁剪框一会儿大一会儿小,一会儿上一会儿下的问题,最终导致合成的视频存在抖动,视频质量极差。

为解决相关技术中由于裁剪框的大小突变造成的合成的视频存在抖动的问题,本申请提供了一种技术构思:通过对裁剪框进行分组,再剔除每组裁剪框中的异常裁剪框,并计算得到每组裁剪框在剔除异常裁剪框之后的均值裁剪框,然后在两组均值裁剪框对之间对裁剪框进行差值计算,以便得到每一帧图片的裁剪框,从而避免了连续多帧图片的裁剪框发生突变而造成的视频存在抖动的问题。

下面将对本申请的图像处理方法进行详细说明。图1是本申请一实施例示出的一种视频裁剪方法的流程图。图2是本申请一实施例示出的一种视频裁剪方法的过程示意图,图2中的检测框即为裁剪框,参照图1和图2,本申请的视频裁剪方法可以包括如下步骤:

步骤S11:获取待裁剪视频的每帧图片所对应的原始裁剪框。

在本实施例中,待裁剪视频为需要对其进行裁剪以便合成新的视频的目标视频,需要对待裁剪视频的每帧图片进行裁剪,首先,可预先获取待裁剪视频的每帧图片所对应的原始裁剪框,此处的原始裁剪框为背景技术中所提到的通过现有的技术手段所计算得到的裁剪框,裁剪框包括裁剪中心、裁剪宽度和裁剪高度。

步骤S12:按照预设数量和每帧图片的时间顺序,对所述原始裁剪框进行分组,得到多组原始裁剪框。

在本实施例中,为了便于获取更为准确的平均裁剪框,需要先对多个原始裁剪框进行分组,具体地,可按照预设数量和每帧图片的时间顺序对多个原始裁剪框进行分组,由于视频是有时间顺序的,所以按照每帧图片的时间先后顺序进行分组,能够得到较为合理的裁剪框,其中,预设数量可为FPS值,例如,预设数量可为25或30。可将每n个裁剪框分为一组,分组表达式为:Si={b1,b2,...,bn},其中,n为预设数量,b为原始裁剪框,Si为分组,i为组号,例如,S1为第一组,S2为第二组,b1为该组内的第一个原始裁剪框,bn为该组内的第n个裁剪框。

步骤S13:剔除每一组原始裁剪框中的异常裁剪框。

在本实施例中,为了能够避免少数情况下的极端裁剪框造成计算出来的裁剪框不准确的现象,需要先对每一组原始裁剪框中的异常裁剪框进行剔除,以便提高得到的每一组裁剪框对应的多帧图片中第一帧图片的裁剪框的准确性。

综合以上实施例,在一种实施方式中,剔除每一组原始裁剪框中的异常裁剪框,可包括以下步骤:

步骤S131:对每一组原始裁剪框进行均值计算,得到每一组原始裁剪框所对应的第一平均裁剪框。

在本实施例中,每一组原始裁剪框计算得到一个第一平均裁剪框,具体地,对每一组原始裁剪框分别进行均值计算分别包括:对每一组原始裁剪框分别进行裁剪中心均值计算、裁剪宽度均值计算和裁剪高度均值计算,从而得到每一组原始裁剪框所对应的第一平均裁剪框。例如,第i组裁剪框的平均裁剪中心为ci,平均裁剪宽度为wi,平均裁剪高度为hi

步骤S132:根据预设剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的异常裁剪框。

在本实施例中,预设剔除条件为预先设置的用于判断每一组原始裁剪框中是否存在异常裁剪框的条件,当每一组原始裁剪框中的原始裁剪框和该组原始裁剪框所对应的第一平均裁剪框满足预设剔除条件时,则确定该原始裁剪框为异常裁剪框,需要将其剔除。

通过对每一组原始裁剪框进行均值计算,得到每一组原始裁剪框所对应的第一平均裁剪框,并根据预设剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的异常裁剪框,能够较好地剔除少数情况下的极端裁剪框,避免少数情况下的极端裁剪框造成计算出来的裁剪框不准确的现象,以提高得到的每一组裁剪框对应的多帧图片中第一帧图片的裁剪框的准确性。

具体地,预设剔除条件包括中心剔除条件、宽度剔除条件和高度剔除条件,所述异常裁剪框包括中心异常裁剪框、宽度异常裁剪框和高度异常裁剪框。

根据预设剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的异常裁剪框,包括:

根据所述中心剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的所述中心异常裁剪框;

根据所述宽度剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的所述宽度异常裁剪框;

根据所述高度剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的所述高度异常裁剪框。

在本实施例中,预设剔除条件包括中心剔除条件、宽度剔除条件和高度剔除条件,只要原始裁剪框满足其中任意一个剔除条件,便可确定其为异常裁剪框,从而将其剔除,以便能够得到更加准确的平均裁剪框。

具体地,中心剔除条件为:dst(cj,ci)>αc(wi+hi),即,对于Si内的一原始裁剪框bj,如果dst(cj,ci)>αc(wi+hi),则该原始裁剪框bj为异常裁剪框。

图3是本申请一实施例示出的一种剔除中心异常裁剪框的流程图,参照图3,综合以上实施例,在一种实施方式中,根据所述中心剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的所述中心异常裁剪框,包括以下步骤:

步骤S301:针对每一组原始裁剪框中的任意一个原始裁剪框,确定该原始裁剪框的裁剪中心与该组原始裁剪框所对应的第一平均裁剪框的裁剪中心的第一距离值。

在本实施例中,dst(cj,ci)即为该原始裁剪框的裁剪中心与该组原始裁剪框所对应的第一平均裁剪框的裁剪中心的第一距离值,dst为求两点之间的距离,cj为原始裁剪框bj的裁剪中心,ci为第i组原始裁剪框Si的裁剪中心。

步骤S302:确定该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度和裁剪高度之和,得到第一剔除值。

在本实施例中,先获取该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度和裁剪高度,然后将其相加,得到第一剔除值,即上述中心剔除条件中的wi+hi

步骤S303:当所述第一距离值大于第一剔除值与第一预设参数的乘积时,确定该原始裁剪框为所述中心异常裁剪框。

在本实施例中,第一预设参数αc的取值范围为0~1,当第一距离值大于第一剔除值与第一预设参数的乘积时,确定该原始裁剪框为中心异常裁剪框,即,该原始裁剪框满足上述中心剔除条件,即可确定该原始裁剪框为中心异常裁剪框。

步骤S304:剔除每一组原始裁剪框中的所述中心异常裁剪框。

在本实施例中,对每一组中的原始裁剪框均进行中心异常判断,当确定该原始裁剪框为异常裁剪框之后,便将该原始裁剪框从该组原始裁剪框中剔除,避免少数情况下的极端裁剪框造成计算出来的裁剪框不准确的现象。

宽度剔除条件为:abs(wj-wi)>αwwi,即,对于Si内的一原始裁剪框bj,如果abs(wj-wi)>αwwi,则该原始裁剪框bj为异常裁剪框。

图4是本申请一实施例示出的一种剔除宽度异常裁剪框的流程图,参照图4,综合以上实施例,在一种实施方式中,根据所述宽度剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的所述宽度异常裁剪框,包括以下步骤:

步骤S401:针对每一组原始裁剪框中的任意一个原始裁剪框,确定该原始裁剪框的裁剪宽度与该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度的第一绝对距离值。

在本实施例中,abs(wj-wi)即为该原始裁剪框的裁剪宽度与该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度的第一绝对距离值,abs为求两个值的差值的绝对值,abs(wj-wi)中,wj原始裁剪框bk的裁剪宽度,wi为第i组原始裁剪框Si的裁剪宽度,先计算wj与wi的差值,再将得到的差值取平均值,便可得到第一绝对距离值。

步骤S402:当所述第一绝对距离值大于该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度与第二预设参数的乘积时,确定该原始裁剪框为所述宽度异常裁剪框。

在本实施例中,第二预设参数αw的取值范围为0~1,当第一绝对距离值大于该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度与第二预设参数的乘积时,确定该原始裁剪框为宽度异常裁剪框,即,该原始裁剪框满足上述宽度剔除条件,即可确定该原始裁剪框为宽度异常裁剪框。

步骤S403:剔除每一组原始裁剪框中的所述宽度异常裁剪框。

在本实施例中,对每一组中的原始裁剪框均进行宽度异常判断,当确定该原始裁剪框为异常裁剪框之后,便将该原始裁剪框从该组原始裁剪框中剔除,避免少数情况下的极端裁剪框造成计算出来的裁剪框不准确的现象。

高度剔除条件为:abs(hj-hi)>αhhi,即,对于Si内的一原始裁剪框bj,如果abs(hj-hi)>αhhi,则该原始裁剪框为异常裁剪框。

图5是本发明一实施例示出的一种剔除高度异常裁剪框的流程图,参照图5,综合以上实施例,在一种实施方式中,根据高度剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的高度异常裁剪框,包括以下步骤:

步骤S501:针对每一组原始裁剪框中的任意一个裁剪框,确定该原始裁剪框的裁剪高度与该组原始裁剪框所对应的第一平均裁剪框的裁剪高度的第二绝对距离值。

在本实施例中,abs(hj-hi>即为该原始裁剪框的裁剪高度与该组原始裁剪框所对应的第一平均裁剪框的裁剪高度的第二绝对距离值,abs(hj-hi)中,hj为原始裁剪框bj的裁剪高度,hi为第i组原始裁剪框Si的裁剪高度,先计算hj与hi的差值,再将得到的差值取平均值,便可得到第二绝对距离值。

步骤S502:当所述第二绝对距离值大于该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度与第三预设参数的乘积时,确定该原始裁剪框为所述高度异常裁剪框。

在本实施例中,第三预设参数αh的取值范围为0~1,当第二绝对距离值大于该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度与第三预设参数的乘积时,确定该原始裁剪框为高度异常裁剪框,即,该原始裁剪框满足上述高度剔除条件,即可确定该原始裁剪框为高度异常裁剪框。

步骤S503:剔除每一组原始裁剪框中的所述高度异常裁剪框。

在本实施例中,对每一组中的原始裁剪框均进行高度异常判断,当确定该原始裁剪框为异常裁剪框之后,便将该原始裁剪框从该组原始裁剪框中剔除,避免少数情况下的极端裁剪框造成计算出来的裁剪框不准确的现象。

上述剔除每一组原始裁剪框中的异常裁剪框的具体方法,对于其中的部分原始裁剪框,可能同时满足中心异常裁剪框、宽度异常裁剪框和高度异常裁剪框中的两种或三种,为了精简判断流程,可按照一定顺序进行上述的判断过程和剔除过程,例如,执行顺序可为:先执行剔除中心异常裁剪框的步骤,再对剔除了中心异常裁剪框的每一组原始裁剪框进行剔除宽度异常裁剪框的步骤,最后再对剔除了宽度异常裁剪框的每一组原始裁剪框进行剔除高度异常裁剪框的步骤,从而得到最终的剔除结果。

步骤S14:对剔除异常裁剪框后的每一组原始裁剪框进行均值计算,得到每一组原始裁剪框对应的多帧图片中第一帧图片的更新裁剪框。

在本实施例中,对剔除异常裁剪框后的每一组原始裁剪框进行均值计算,包括进行裁剪中心均值计算、裁剪宽度均值计算和裁剪高度均值计算,具体地,将该组中的所有剩余的原始裁剪框的裁剪中心取平均值,得到平均裁剪中心;将该组中的所有剩余的原始裁剪框的裁剪宽度取平均值,得到平均裁剪宽度;将该组中的所有剩余的原始裁剪框的裁剪高度取平均值,得到平均裁剪高度;从而得到包含平均裁剪中心、平均裁剪宽度和平均裁剪高度的该组所对应的平均裁剪框,并将得到的平均裁剪框作为该组原始裁剪框对应的多帧图片中第一帧图片的更新裁剪框,每组中的裁剪框按照时间顺序进行排序,该组原始裁剪框对应的多帧图片中第一帧图片即为该组中时间戳最小所对应的图片。

步骤S15:根据每一组中的第一帧图片的更新裁剪框,对相邻两组中的第一帧图片之间的每一帧图片的裁剪框进行差值计算,得到相邻两组中的第一帧图片之间的每一帧图片的更新裁剪框。

根据上述步骤,已经对每一组中的第一帧图片所对应的裁剪框进行了更新,按照时间顺序进行排列,相邻两组中的第一帧图片之间还有多帧图片,为了使裁剪并合成后得到的视频更加流畅,需要对剩下的多帧图片所对应的裁剪框进行更新。

具体地,根据每一组中的第一帧图片的更新裁剪框,对相邻两组中的第一帧图片之间的每一帧图片的裁剪框进行差值计算,具体的计算包括裁剪中心的差值计算、裁剪宽度的差值计算和裁剪高度的差值计算,例如,对于裁剪宽度的差值计算,每一组有30帧图片,则相邻两组中的第一帧图片之间还有29帧图片,前一组中的第一帧图片所对应的更新裁剪框的裁剪宽度为200,后一组中的第一帧图片所对应的更新裁剪框的裁剪宽度为230,则先计算相邻两帧图片之间的平均差值,使该组内的相邻的更新裁剪框的裁剪宽度的差值相等,即,前一组中的每一帧图片所对应的更新后的裁剪框的裁剪宽度分别为200、201、202……229,对相邻两组中的第一帧图片之间的每一帧图片的裁剪框进行差值计算,能够使每一组内的裁剪框能够均匀变化,能够在保证视频裁剪的前提下,避免连续多帧图片的裁剪框发生突变而造成的视频存在抖动的问题,以提高裁剪后合成的视频的质量。

步骤S16:根据每一帧图片的更新裁剪框,对所述待裁剪视频进行裁剪。

在本实施例中,通过上述步骤,即可得到每一帧图片的更新后的更新裁剪框,然后可根据每一帧图片的更新裁剪框,对待裁剪视频进行裁剪,即可避免裁剪框一会儿大一会儿小,一会儿上一会儿下的问题,从而能够避免合成的视频抖动。

本申请的图像处理方法具备如下多个技术效果:

一、按照预设数量和每帧图片的时间顺序,对裁剪框进行分组,得到多组裁剪框,并剔除每一组裁剪框中的异常裁剪框,并对剔除异常裁剪框后的每一组裁剪框进行均值计算,得到每一组裁剪框对应的多帧图片中第一帧图片的裁剪框,能够使每一组计算出来的裁剪框更加准确且均匀,避免少数情况下的极端裁剪框造成计算出来的裁剪框不准确的现象,以提高得到的每一组裁剪框对应的多帧图片中第一帧图片的裁剪框的准确性。

二、根据每一组中的第一帧图片的裁剪框,对相邻两组中的第一帧图片之间的每一帧图片的裁剪框进行差值计算,得到相邻两组中的第一帧图片之间的每一帧图片的裁剪框,从而能够使每一组内的裁剪框能够均匀变化,能够在保证视频裁剪的前提下,避免连续多帧图片的裁剪框发生突变而造成的视频存在抖动的问题,以提高裁剪后合成的视频的质量。

需要说明的是,对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明实施例并不受所描述的动作顺序的限制,因为依据本发明实施例,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明实施例所必须的。

基于同一发明构思,本发明一实施例提供一种图像处理装置600。参考图6,图6是本申请一实施例示出的一种视频裁剪装置的结构框图。如图6所示,该装置600包括:

获取模块601,用于获取待裁剪视频的每帧图片所对应的原始裁剪框;

分组模块602,用于按照预设数量和每帧图片的时间顺序,对所述原始裁剪框进行分组,得到多组原始裁剪框;

剔除模块603,用于剔除每一组原始裁剪框中的异常裁剪框;

第一获得模块604,用于对剔除异常裁剪框后的每一组原始裁剪框进行均值计算,得到每一组原始裁剪框对应的多帧图片中第一帧图片的更新裁剪框;

第二获得模块605,用于根据每一组中的第一帧图片的更新裁剪框,对相邻两组中的第一帧图片之间的每一帧图片的裁剪框进行差值计算,得到相邻两组中的第一帧图片之间的每一帧图片的更新裁剪框;

裁剪模块606,用于根据每一帧图片的更新裁剪框,对所述待裁剪视频进行裁剪。

可选地,所述剔除模块包括:

第一获得子模块,用于对每一组原始裁剪框进行均值计算,得到每一组原始裁剪框所对应的第一平均裁剪框;

剔除子模块,用于根据预设剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的异常裁剪框。

可选地,所述预设剔除条件包括中心剔除条件、宽度剔除条件和高度剔除条件,所述异常裁剪框包括中心异常裁剪框、宽度异常裁剪框和高度异常裁剪框;

所述剔除子模块包括:

第一剔除单元,用于根据所述中心剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的所述中心异常裁剪框;

第二剔除单元,用于根据所述宽度剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的所述宽度异常裁剪框;

第三剔除单元,用于根据所述高度剔除条件和每一组原始裁剪框所对应的第一平均裁剪框,剔除每一组原始裁剪框中的所述高度异常裁剪框。

可选地,所述第一剔除单元包括:

第一确定子单元,用于针对每一组原始裁剪框中的任意一个原始裁剪框,确定该原始裁剪框的裁剪中心与该组原始裁剪框所对应的第一平均裁剪框的裁剪中心的第一距离值;

第一获得子单元,用于确定该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度和裁剪高度之和,得到第一剔除值;

第二确定子单元,用于当所述第一距离值大于第一剔除值与第一预设参数的乘积时,确定该原始裁剪框为所述中心异常裁剪框;

第一剔除子单元,用于剔除每一组原始裁剪框中的所述中心异常裁剪框。

可选地,所述第二剔除单元包括:

第三确定子单元,用于针对每一组原始裁剪框中的任意一个原始裁剪框,确定该原始裁剪框的裁剪宽度与该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度的第一绝对距离值;

第四确定子单元,用于当所述第一绝对距离值大于该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度与第二预设参数的乘积时,确定该原始裁剪框为所述宽度异常裁剪框;

第二剔除子单元,用于剔除每一组原始裁剪框中的所述宽度异常裁剪框。

可选地,所述第三剔除单元包括:

第五确定子单元,用于针对每一组原始裁剪框中的任意一个裁剪框,确定该原始裁剪框的裁剪高度与该组原始裁剪框所对应的第一平均裁剪框的裁剪高度的第二绝对距离值;

第六确定子单元,用于当所述第二绝对距离值大于该组原始裁剪框所对应的第一平均裁剪框的裁剪宽度与第三预设参数的乘积时,确定该原始裁剪框为所述高度异常裁剪框;

第三剔除子单元,用于剔除每一组原始裁剪框中的所述高度异常裁剪框。

本发明实施例还提供了一种终端设备,如图7所示。图7是本申请一实施例示出的一种终端设备的结构示意图。参照图7,终端设备包括处理器71、通信接口72、存储器73和通信总线74,其中,处理器71,通信接口72,存储器73通过通信总线74完成相互间的通信;

存储器73,用于存放计算机程序;

处理器71,用于执行存储器73上所存放的程序时,实现如下步骤:

获取待裁剪视频的每帧图片所对应的原始裁剪框;

按照预设数量和每帧图片的时间顺序,对所述原始裁剪框进行分组,得到多组原始裁剪框;

剔除每一组原始裁剪框中的异常裁剪框;

对剔除异常裁剪框后的每一组原始裁剪框进行均值计算,得到每一组原始裁剪框对应的多帧图片中第一帧图片的更新裁剪框;

根据每一组中的第一帧图片的更新裁剪框,对相邻两组中的第一帧图片之间的每一帧图片的裁剪框进行差值计算,得到相邻两组中的第一帧图片之间的每一帧图片的更新裁剪框;

根据每一帧图片的更新裁剪框,对所述待裁剪视频进行裁剪。

或者处理器71在执行存储器73上所存放的程序时,实现上述其他方法实施例中的步骤。

上述终端提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,简称PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,简称EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。

通信接口用于上述终端与其他设备之间的通信。

存储器可以包括随机存取存储器(Random Access Memory,简称RAM),也可以包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。

上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,简称CPU)、网络处理器(Network Processor,简称NP)等;还可以是数字信号处理器(Digital Signal Processing,简称DSP)、专用集成电路(Application SpecificIntegrated Circuit,简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。

在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的视频裁剪方法。

在本发明提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的视频裁剪方法。

在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。

需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。

以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

20页详细技术资料下载
上一篇:一种医用注射器针头装配设备
下一篇:网页视频播放方法、装置、设备、存储介质及程序产品

网友询问留言

已有0条留言

还没有人留言评论。精彩留言会获得点赞!

精彩留言,会给你点赞!

技术分类