具体实施方式

以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。

通过上述分析可知，模式决策是视频编码过程中耗时最多的步骤，而由于推流用户端需要同时对多种分辨率的视频进行编码，其中对每种分辨率的视频进行编码时均需要进行模式决策，这就导致了推流用户端进行视频编码时会耗费大量的时间来进行模式决策，且模式决策过程对推流用户端设备的CPU性能要求较高，因此需要一种能够提高编码速度，降低编码过程中CPU功耗的编码方法。

本申请为了提高图像编码速度，降低编码过程中CPU的功耗，提出一种图像编码方法，该方法中，获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率高于或者低于待处理的图像的分辨率，首先确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，再针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，由此，由于对于待处理的图像中的每个图像块，根据待处理的图像对应的参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，减少了确定待处理的图像中的各个图像块的模式决策结果时的计算量，从而提高了图像编码的速度，降低了编码过程中CPU的功耗。

下面参考附图描述本申请实施例的图像编码方法、装置、电子设备和存储介质。

图1为本申请实施例提供的一种图像编码方法的流程示意图。其中，需要说明的是，本实施例提供的图像编码方法，执行主体为图像编码装置，该图像编码装置可以为电子设备，也可以被配置在电子设备中，以提高图像编码的速度，降低编码过程中CPU的功耗。本公开实施例以图像编码装置被配置在电子设备中为例进行说明。

其中，电子设备，可以为前述推流客户端设备，其可以是任意能够进行数据处理的静止或者移动计算设备，例如笔记本电脑、智能手机、可穿戴设备等移动计算设备，或者台式计算机等静止的计算设备等，本公开对此不作限制。

如图1所示，该图像编码方法，可以包括以下步骤：

步骤101，获取待处理的图像以及对应的参考图像，其中，参考图像与图像内容相同，且参考图像的分辨率高于图像的分辨率。

其中，待处理的图像，可以为任意待进行编码的图像，比如可以为摄像装置拍摄的一帧图像，也可以为对待进行编码的视频中的各帧图像，本公开对待处理的图像的类型不作限制。

其中，参考图像，为已经预先确定了模式决策结果的图像，且参考图像的分辨率高于图像的分辨率。

需要说明的是，待处理的图像，可以为至少一种分辨率下的图像。另外，为了提高图像编码速度，降低编码过程中CPU的消耗，可以只确定一种分辨率下的参考图像的模式决策结果，从而对于不同分辨率下的待处理的图像，均可以根据该参考图像的模式决策结果来进行图像编码。即，待处理的图像为至少一种分辨率下的图像时，至少一种分辨率下的图像对应相同的参考图像。

步骤102，确定图像中图像块与参考图像中参考图像块之间的映射关系。

在示例性实施例中，可以按照预设的划分深度，将待处理的图像划分为多个图像块。

其中，划分深度，决定了对图像进行划分后每个图像块的尺寸，划分深度越大，划分后每个图像块的尺寸越小，其中划分深度可以根据需要设置，本公开对此不作限制。

比如，假设划分深度为0时，对应将图像划分为64像素*64像素的图像块；划分深度为1时，对应将图像划分为32像素*32像素的图像块；划分深度为2时，对应将图像划分为16像素*16像素的图像块。则假设按照划分深度为2，对待处理的图像进行划分，可以将待处理的图像划分为多个16像素*16像素的图像块。

在示例性实施例中，可以按照预设的划分深度，将参考图像划分为多个参考图像块。其中，划分深度可以根据需要设置。在示例性实施例中，对参考图像进行划分时，可以按照与划分待处理的图像时相同的划分深度，将参考图像划分为多个参考图像块，即，参考图像中参考图像块的尺寸与待处理的图像中图像块的尺寸可以相同。

需要说明的是，本公开各实施例中，以待处理的图像中图像块的尺寸及参考图像中参考图像块的尺寸均为16像素*16像素为例进行说明。

在示例性实施例中，可以根据待处理的图像中各图像块与参考图像块中各参考图像块的内容，确定图像中各图像块与参考图像中各参考图像块之间的映射关系，其中，内容相同的图像块与参考图像块之间具有映射关系。

举例来说，参考图2，假设图2中左侧的图像为分辨率为720p的参考图像，右侧的图像为分辨率为360p的待处理的图像，其中，待处理的图像中每个图像块以及参考图像中每个参考图像块的尺寸均为16*16像素。

参考图2可知，图2中右侧分辨率为360p的待处理的图像相对于左侧分辨率为720p的参考图像，相当于横向和纵向均整体缩小为原来的1/2，并且，图2中待处理的图像的内容和参考图像的内容相同，其中参考图像中第1行第1列的图像块a、第1行的第2列的图像块b、第2行第1列的图像块c、第2行第2列的图像块d的共4个图像块的内容，与待处理的图像中第1行第1列的图像块e的内容相同，参考图像中第1行第3列的图像块、第1行的第4列的图像块、第2行第3列的图像块、第2行第4列的图像块的共4个图像块的内容，与待处理的图像中第1行第2列的图像块的内容相同，参考图像中第3行第1列的图像块、第3行的第2列的图像块、第4行第1列的图像块、第4行第2列的图像块的共4个图像块的内容，与待处理的图像中第2行第1列的图像块的内容相同，参考图像中第3行第3列的图像块、第3行的第4列的图像块、第4行第3列的图像块、第4行第4列的图像块的共4个图像块的内容，与待处理的图像中第2行第2列的图像块的内容相同。

则可以确定参考图像中第1行第1列的图像块a、第1行的第2列的图像块b、第2行第1列的图像块c、第2行第2列的图像块d的共4个图像块，与待处理的图像中第1行第1列的图像块e具有映射关系；参考图像中第1行第3列的图像块、第1行的第4列的图像块、第2行第3列的图像块、第2行第4列的图像块的共4个图像块，与待处理的图像中第1行第2列的图像块具有映射关系；参考图像中第3行第1列的图像块、第3行的第2列的图像块、第4行第1列的图像块、第4行第2列的图像块的共4个图像块，与待处理的图像中第2行第1列的图像块具有映射关系，参考图像中第3行第3列的图像块、第3行的第4列的图像块、第4行第3列的图像块、第4行第4列的图像块的共4个图像块，与待处理的图像中第2行第2列的图像块具有映射关系。

步骤103，针对图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果。

步骤104，根据图像中各个图像块的模式决策结果，对图像进行编码处理。

其中，模式决策结果，可以包括帧内预测模式中的垂直预测、水平预测、均值预测、平面预测等，帧间预测模式中的P帧、B帧预测方法、采用不同大小的预测块进行运动估计等预测模式。

在示例性实施例中，针对待处理的图像中的每个图像块，由于参考图像中与图像块具有映射关系的至少一个参考图像块的内容，与图像块的内容相同，因此编码时的模式决策具有一定继承性，可以根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果。

可以理解的是，针对图像中的每个图像块，参考图像中与图像块具有映射关系的参考图像块的个数可以为一个，也可以为多个，而每个参考图像块均有其对应的模式决策结果，相应的，至少一个参考图像块对应了至少一个模式决策结果。在示例性实施例中，针对待处理的图像中的每个图像块，在参考图像中与图像块具有映射关系的参考图像块的个数为1个时，可以将该参考图像块的模式决策结果，确定为图像块的模式决策结果；在参考图像中与图像块具有映射关系的参考图像块的个数为多个时，可以从多个参考图像块分别对应的模式决策结果中，选出一种模式决策结果作为图像块的模式决策结果。

进而在确定待处理的图像中各个图像块的模式决策结果后，可以根据待处理的图像中各个图像块的模式决策结果，对待处理的图像进行编码处理。

举例来说，继续图2所示的示例，假设图2中左侧参考图像中，参考图像块a和b的模式决策结果均为水平预测、参考图像块c和d的模式决策结果均为垂直预测，则针对图2中右侧的待处理的图像中图像块e，由于参考图像中与图像块e具有映射关系的参考图像块为参考图像块a、b、c、d，则可以根据参考图像块a、b、c、d的模式决策结果，从水平预测和垂直预测这两种预测模式中选出一种预测模式作为图像块e的模式决策结果。具体进行模式决策结果选择时，可以计算图像块e分别采用水平预测和垂直预测时的RDCOST(RateDistortion Optimation，率失真优化)数值，进而将RDCOST数值最小的预测模式，确定为图像块e的模式决策结果。针对图2中待处理的图像中其它图像块，可以按照相同的方式，确定每个图像块的模式决策结果，进而根据待处理的图像中各个图像块的模式决策结果，对待处理的图像进行编码处理。

由于对于待处理的图像中的每个图像块，根据待处理的图像对应的参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，减少了确定待处理的图像中的各个图像块的模式决策结果时的计算量，比如上述示例中，以确定图像块e的模式决策结果为例，只需计算图像块e采用水平预测和垂直预测这两种预测模式时分别对应的RDCOST数值，无需再计算图像块e采用除水平预测和垂直预测之外的其它预测模式时的TDCOST数值，从而提高了图像编码的速度，降低了编码过程中CPU的功耗，且该图像编码方法不包含其它额外计算过程，简单易实现。

本实施例的图像编码方法中，获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率高于待处理的图像的分辨率，首先确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，再针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，由此，提高了图像编码的速度，降低了编码过程中CPU的功耗。

通过上述分析可知，在获取待处理的图像以及对应的参考图像后，可以确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，进而针对待处理的图像中每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，下面结合图3，对本公开实施例中确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系的过程进行详细说明。

图3为本申请实施例提供的另一种图像编码方法的流程示意图。

如图3所示，该图像编码方法包含以下步骤：

步骤301，获取待处理的图像以及对应的参考图像，其中，参考图像与图像内容相同，且参考图像的分辨率高于图像的分辨率。

其中，待处理的图像，为待进行编码的视频中的各帧图像。

步骤302，针对图像中的每个图像块，获取图像块的至少两个顶点坐标信息。

其中，至少两个顶点坐标信息至少可以包括：左上顶点坐标信息和右下顶点坐标信息；或者，至少两个顶点坐标信息至少可以包括；左下顶点坐标信息和右上顶点坐标信息。即，通过某个图像块的至少个顶点坐标信息，可以限定该图像块所在区域。

步骤303，确定参考图像中与顶点坐标信息对应的参考坐标信息。

在示例性实施例中，针对待处理的图像中的每个图像块，可以先确定从待处理的图像至参考图像的缩放比例，进而根据图像块的至少个顶点坐标信息以及缩放比例，确定参考图像中与各顶点坐标信息对应的参考坐标信息。

其中，缩放比例可以包括：横缩放比例以及纵缩放比例；相应的，可以根据顶点坐标信息中的横坐标信息以及横缩放比例，确定参考坐标信息中的横坐标信息，根据顶点坐标信息中的纵坐标信息以及纵缩放比例，确定参考坐标信息中的纵坐标信息。需要说明的是，本公开实施例以横缩放比例与纵缩放比例相同为例进行说明。

举例来说，参考图2，假设针对图2中右侧的待处理的图像中的图像块e，获取了图像块e的左上顶点坐标(0,0)，右下顶点坐标(16,16)，由于图2右侧的待处理的图像至左侧的参考图像的横缩放比例h以及纵缩放比例z均为2，则可以根据左上顶点坐标(0,0)、横缩放比例h以及纵缩放比例z，确定参考图像中与左上顶点坐标(0,0)对应的参考坐标(h*0,z*0)即(0,0)，根据右下顶点坐标(16,16)、横缩放比例h以及纵缩放比例z，确定参考图像中与右下顶点坐标(16,16)对应的参考坐标(h*16,z*16)即(32,32)。

步骤304，确定至少两个参考坐标信息所限定的图像区域中的参考图像块。

步骤305，将至少两个参考坐标信息所限定的图像区域中的参考图像块，确定为与图像块具有映射关系的参考图像块。

在示例性实施例中，针对待处理的图像中的每个图像块，确定了参考图像中与图像块的每个顶点坐标信息分别对应的参考坐标信息后，即可确定至少两个参考坐标信息所限定的图像区域中的参考图像块，进而将至少两个参考坐标信息所限定的图像区域中的参考图像块，确定为与图像块具有映射关系的参考图像块。

举例来说，继续上述示例，假设针对图2中的图像块e的左上顶点坐标(0,0)和右下顶点坐标(16,16)，确定了参考图像中与左上顶点坐标(0,0)和右下顶点坐标(16,16)分别对应的参考坐标(0,0)和(32,32)，则可确定参考坐标(0,0)和(32,32)所限定的图像区域为图4的左侧图中的黑色方形区域，并确定参考坐标(0,0)和(32,32)所限定的图像区域中的参考图像块为参考图像块a、b、c、d，进而将参考图像块a、b、c、d，确定为与图像块e具有映射关系的参考图像块。

需要说明的是，上述示例是以待处理的图像至参考图像的缩放比例为整数为例进行说明的，在一种可能的实现形式中，待处理的图像至参考图像的缩放比例可能为非整数，在这种情况下，针对待处理的图像中的每个图像块，参考图像中与图像块的至少两个顶点坐标信息对应的至少两个参考坐标信息所限定的图像区域中可能包含非完整的参考图像块，此时，将至少两个参考坐标信息所限定的图像区域中包含的完整的参考图像块以及非完整的参考图像块，均确定为与图像块具有映射关系的参考图像块。

举例来说，参考图5，假设图5中左侧为分辨率为720p的参考图像，图5中右侧为分辨率为480p的待处理的图像，其中，待处理的图像中每个图像块以及参考图像中每个参考图像块的尺寸均为16*16像素。假设针对图5中右侧的待处理的图像中的图像块f(图5中右侧图像中黑色图像块)，获取了图像块f的左上顶点坐标为(0,0)，右下顶点坐标为(16,16)，由于图5右侧的待处理的图像至左侧的参考图像的横缩放比例h以及纵缩放比例z均为3/2，则可以根据图像块f的左上顶点坐标(0,0)、横缩放比例h以及纵缩放比例z，确定参考图像中与左上顶点坐标(0,0)对应的参考坐标(h*0,z*0)即(0,0)，根据图像块f的右下顶点坐标(16,16)、横缩放比例h以及纵缩放比例z，确定参考图像中与右下顶点坐标(16,16)对应的参考坐标(h*16,z*16)即(24,24)。

而参考坐标(0,0)和(24,24)所限定的图像区域为图5的左侧图中的黑色方形区域，该图像区域中包括图5左侧图中第1行第1列的完整参考图像块，以及第1行第2列、第2行第1列、第2行第2列的3个非完整参考图像块，则可以将图5左侧图中第1行第1列的完整参考图像块，以及第1行第2列、第2行第1列、第2行第2列的3个非完整参考图像块，确定为与图像块f具有映射关系的参考图像块。

需要说明的是，上述实施例在确定与待处理的图像中的每个图像块具有映射关系的参考图像块时，是针对待处理的图像中的每个图像块，获取参考图像块中与图像块的至少两个顶点坐标信息分别对应的参考坐标信息，再以根据至少两个参考坐标信息所限定的图像区域来确定与图像块具有映射关系的参考图像块。在一种可能的实现形式中，还可以直接结合计算公式来确定与待处理的图像中的每个图像块具有映射关系的参考图像块，下面对这种方式进行说明。

在示例性实施例中，以参考图像的分辨率为720p、待处理的图像中图像块的至少两个顶点坐标信息包括左上顶点坐标信息和右下顶点坐标信息，参考图像中图像块的尺寸以及待处理的图像中图像块的尺寸为16像素*16像素为例，假设待处理的图像至参考图像的缩放比例为整数，则对待处理的图像中的每个图像块，可以先获取图像块的至少两个顶点坐标信息，进而根据以下公式(1)-(4)，确定参考图像中与图像块具有映射关系的参考图像块。

a1＝floor((x1/scale*720)/16) (1)

b1＝floor((y1/scale*720)/16) (2)

a2＝floor((x2/scale*720)/16) (3)

b2＝floor((y1/scale*720)/16) (4)

其中，(x1,y1)为待处理的图像中图像块的左上顶点坐标，(x2,y2)为待处理的图像中图像块的右下顶点坐标，scale为待处理的图像的分辨率，720为参考图像的分辨率，16为待处理的图像中图像块和参考图像块的尺寸，floor为向下取整，a1表示图像块的左上顶点对应参考图像中横轴上的第a1个参考图像块，b1表示图像块的左上顶点对应参考图像中纵轴上的第b1个参考图像块，a2表示图像块的右下顶点对应参考图像中横轴上的第a2个参考图像块，b2表示图像块的右下顶点对应参考图像中纵轴上的第b2个参考图像块。

举例来说，假设参考图像的分辨率为720p、待处理的图像的分辨率为360p，参考图像中图像块的尺寸以及待处理的图像中图像块的尺寸为16像素*16像素，待处理的图像中某图像块的左上顶点坐标为(0,0)、右下顶点坐标为(16,16)，则可以根据公式(1)-(4)，确定a1＝floor((0/scale*720)/16)＝0，b1＝floor((0/scale*720)/16)＝0，a2＝floor((16/scale*720)/16)＝2，b2＝floor((16/scale*720)/16)＝2，即该图像块的左上顶点对应参考图像中横轴上的第0个参考图像块和纵轴上的第0个参考图像块，该图像块的右下顶点对应参考图像中横轴上的第2个参考图像块和纵轴上的第2个参考图像块，则可以将参考图像中第1行第1列、第1行第2列、第2行第1列、第2行第2列的4个参考图像块，确定为与该图像块具有映射关系的参考图像块。

在示例性实施例中，以参考图像的分辨率为720p、待处理的图像中图像块的至少两个顶点坐标信息包括左上顶点坐标信息和右下顶点坐标信息，参考图像中图像块的尺寸以及待处理的图像中图像块的尺寸为16像素*16像素为例，假设待处理的图像至参考图像的缩放比例为非整数，则对待处理的图像中的每个图像块，可以先获取图像块的至少两个顶点坐标信息，进而根据以下公式(5)-(8)，确定参考图像中与图像块具有映射关系的参考图像块。

a1'＝floor((x1/scale*720)/16) (5)

b1'＝floor((y1/scale*720)/16) (6)

a2'＝floor((x2/scale*720)/16)+1 (7)

b2'＝floor((y1/scale*720)/16)+1 (8)

其中，(x1,y1)为待处理的图像中图像块的左上顶点坐标，(x2,y2)为待处理的图像中图像块的右下顶点坐标，scale为待处理的图像的分辨率，720为参考图像的分辨率，16为待处理的图像中图像块和参考图像块的尺寸，floor为向下取整，a1’表示图像块的左上顶点对应参考图像中横轴上的第a1’个参考图像块，b1’表示图像块的左上顶点对应参考图像中纵轴上的第b1’个参考图像块，a2’表示图像块的右下顶点对应参考图像中横轴上的第a2’个参考图像块，b2’表示图像块的右下顶点对应参考图像中纵轴上的第b2’个参考图像块。

举例来说，假设参考图像的分辨率为720p、待处理的图像的分辨率为480p，参考图像中图像块的尺寸以及待处理的图像中图像块的尺寸为16像素*16像素，待处理的图像中某图像块的左上顶点坐标为(0,0)、右下顶点坐标为(16,16)，则可以根据公式(5)-(8)，确定a1'＝floor((0/scale*720)/16)＝0，b1'＝floor((0/scale*720)/16)＝0，a2'＝floor((16/scale*720)/16)+1＝2，b2'＝floor((16/scale*720)/16)＝2，即该图像块的左上顶点对应参考图像中横轴上的第0个参考图像块和纵轴上的第0个参考图像块，该图像块的右下顶点对应参考图像中横轴上的第2个参考图像块和纵轴上的第2个参考图像块，则可以将参考图像中第1行第1列、第1行第2列、第2行第1列、第2行第2列的4个参考图像块，确定为与该图像块具有映射关系的参考图像块。

需要说明的是，公式(1)-(8)是以参考图像的分辨率为720p、参考图像中图像块的尺寸以及待处理的图像中图像块的尺寸为16像素*16像素为例进行示意的，在实际应用中，当参考图像的分辨率、参考图像块的尺寸、图像块的尺寸为其它值时，本领域技术人员可以适应性的对公式(1)-(8)进行修改，本公开对此不作限制。

步骤306，针对图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果。

步骤307，根据图像中各个图像块的模式决策结果，对图像进行编码处理。

在示例性实施例中，针对图像中的每个图像块，参考图像中与图像块具有映射关系的参考图像块的个数可以为一个，也可以为多个，而每个参考图像块均有其对应的模式决策结果，相应的，至少一个参考图像块对应了至少一个模式决策结果。在示例性实施例中，针对待处理的图像中的每个图像块，在参考图像中与图像块具有映射关系的参考图像块的个数为1个时，可以将该参考图像块的模式决策结果，确定为图像块的模式决策结果；在参考图像中与图像块具有映射关系的参考图像块的个数为多个时，可以从多个参考图像块分别对应的模式决策结果中，选出一种模式决策结果作为图像块的模式决策结果。进而在确定待处理的图像中各个图像块的模式决策结果后，可以根据待处理的图像中各个图像块的模式决策结果，对待处理的图像进行编码处理。

在示例性实施例中，可以通过以下方式，从多个参考图像块分别对应的模式决策结果中，选择一种模式决策结果作为图像块的模式决策结果：确定图像块采用至少一个参考图像块的模式决策结果的代价数值；从至少一个参考图像块的模式决策结果中选择对应的代价数值最小的模式决策结果，作为图像块的模式决策结果。

其中，代价数值，例如可以为RDCOST数值，或者，也可以为其它能够评价至少一个参考图像块的模式决策结果的优劣的指标值，本公开对此不作限制。

在示例性实施例中，在参考图像中与图像块具有映射关系的参考图像块的个数为多个时，多个参考图像块对应的模式决策结果可能为一个或多个，在多个参考图像块对应的模式决策结果为一个时，可以将该模式决策结果确定为图像块的模式决策结果，在多个参考图像块对应的模式决策结果为多个时，可以确定图像块采用每种模式决策结果的代价数值，进而从多种模式决策结果中选择对应的代价数值最小的模式决策结果，作为图像块的模式决策结果。

本实施例的图像编码方法中，获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率高于待处理的图像的分辨率，首先针对图像中的每个图像块，获取图像块的至少两个顶点坐标信息，确定参考图像中与顶点坐标信息对应的参考坐标信息，确定至少两个参考坐标信息所限定的图像区域中的参考图像块，将至少两个参考坐标信息所限定的图像区域中的参考图像块，确定为与图像块具有映射关系的参考图像块，再针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，由此，提高了图像编码的速度，降低了编码过程中CPU的功耗。

下面对本申请实施例提供的另一种图像编码方法进行说明。

图6为本申请实施例提供的另一种图像编码方法的流程示意图。其中，需要说明的是，本实施例提供的图像编码方法，执行主体为图像编码装置，该图像编码装置可以为电子设备，也可以被配置在电子设备中，以提高图像编码的速度，降低编码过程中CPU的功耗。本公开实施例以图像编码装置被配置在电子设备中为例进行说明。

其中，电子设备，可以为前述推流客户端设备，其可以是任意能够进行数据处理的静止或者移动计算设备，例如笔记本电脑、智能手机、可穿戴设备等移动计算设备，或者台式计算机等静止的计算设备等，本公开对此不作限制。

如图6所示，该图像编码方法，可以包括以下步骤：

步骤601，获取待处理的图像以及对应的参考图像，其中，参考图像与图像内容相同，且参考图像的分辨率低于图像的分辨率。

其中，待处理的图像，可以为任意待进行编码的图像，比如可以为摄像装置拍摄的一帧图像，也可以为对待进行编码的视频中的各帧图像，本公开对待处理的图像的类型不作限制。

其中，参考图像，为已经预先确定了模式决策结果的图像，且参考图像的分辨率低于图像的分辨率。

需要说明的是，待处理的图像，可以为至少一种分辨率下的图像。另外，为了提高图像编码速度，降低编码过程中CPU的消耗，可以只确定一种分辨率下的参考图像的模式决策结果，从而对于不同分辨率下的待处理的图像，均可以根据该参考图像的模式决策结果来进行图像编码。即，待处理的图像为至少一种分辨率下的图像时，至少一种分辨率下的图像对应相同的参考图像。

步骤602，确定图像中图像块与参考图像中参考图像块之间的映射关系。

在示例性实施例中，可以按照预设的划分深度，将待处理的图像以及参考图像划分为多个图像块。具体过程可以参考上述实施例的描述，此处不再赘述。

在示例性实施例中，可以按照与划分待处理的图像时相同的划分深度，将参考图像划分为多个参考图像块，即，参考图像中参考图像块的尺寸与待处理的图像中图像块的尺寸可以相同。

在示例性实施例中，可以根据待处理的图像中各图像块与参考图像块中各参考图像块的内容，确定图像中各图像块与参考图像中各参考图像块之间的映射关系，其中，内容相同的图像块与参考图像块之间具有映射关系。

在示例性实施例中，也可以根据以下方式，确定图像中各图像块与参考图像中各参考图像块之间的映射关系：针对图像中的每个图像块，获取图像块的至少两个顶点坐标信息；确定参考图像中与顶点坐标信息对应的参考坐标信息；确定至少两个参考坐标信息所限定的图像区域中的参考图像块；将至少两个参考坐标信息所限定的图像区域中的参考图像块，确定为与图像块具有映射关系的参考图像块。

具体确定图像中各图像块与参考图像中各参考图像块之间的映射关系的过程，可以参考上述实施例的描述，此处不再赘述。

步骤603，针对图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果。

步骤604，根据图像中各个图像块的模式决策结果，对图像进行编码处理。

其中，模式决策结果，可以包括帧内预测模式中的垂直预测、水平预测、均值预测、平面预测等，帧间预测模式中的P帧、B帧预测方法、采用不同大小的预测块进行运动估计等预测模式。

在示例性实施例中，针对待处理的图像中的每个图像块，由于参考图像中与图像块具有映射关系的至少一个参考图像块的内容，与图像块的内容相同，因此编码时的模式决策具有一定继承性，可以根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果。

可以理解的是，针对图像中的每个图像块，参考图像中与图像块具有映射关系的参考图像块的个数可以为一个，也可以为多个，而每个参考图像块均有其对应的模式决策结果，相应的，至少一个参考图像块对应了至少一个模式决策结果。在示例性实施例中，针对待处理的图像中的每个图像块，在参考图像中与图像块具有映射关系的参考图像块的个数为1个时，可以将该参考图像块的模式决策结果，确定为图像块的模式决策结果；在参考图像中与图像块具有映射关系的参考图像块的个数为多个时，可以从多个参考图像块分别对应的模式决策结果中，选出一种模式决策结果作为图像块的模式决策结果。

其中，在参考图像中与图像块具有映射关系的参考图像块的个数为多个时，可以通过以下方法，从多个参考图像块分别对应的模式决策结果中，选出一种模式决策结果作为图像块的模式决策结果：确定图像块采用至少一个参考图像块的模式决策结果的代价数值；从至少一个参考图像块的模式决策结果中选择对应的代价数值最小的模式决策结果，作为图像块的模式决策结果。

进而在确定待处理的图像中各个图像块的模式决策结果后，可以根据待处理的图像中各个图像块的模式决策结果，对待处理的图像进行编码处理。

由于对于待处理的图像中的每个图像块，根据待处理的图像对应的参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，减少了确定待处理的图像中的各个图像块的模式决策结果时的计算量，比如上述示例中，以确定图像块e的模式决策结果为例，只需计算图像块e采用水平预测和垂直预测这两种预测模式时分别对应的RDCOST数值，无需再计算图像块e采用除水平预测和垂直预测之外的其它预测模式时的TDCOST数值，从而提高了图像编码的速度，降低了编码过程中CPU的功耗，且该图像编码方法不包含其它额外计算过程，简单易实现。

本实施例的图像编码方法中，获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率低于待处理的图像的分辨率，首先确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，再针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，由此，提高了图像编码的速度，降低了编码过程中CPU的功耗。

为了实现上述实施例，本实施例提供了一种图像编码装置。

图7为本实施例提供的一种图像编码装置的结构示意图，如图7所示，该装置包括：第一获取模块701、第一确定模块702、第二确定模块703和第一处理模块704。

第一获取模块701，用于获取待处理的图像以及对应的参考图像，其中，参考图像与图像内容相同，且参考图像的分辨率高于图像的分辨率；

第一确定模块702，用于确定图像中图像块与参考图像中参考图像块之间的映射关系；

第二确定模块703，用于针对图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果；

第一处理模块704，用于根据图像中各个图像块的模式决策结果，对图像进行编码处理。

其中，本公开实施例中的图像编码装置，可以执行上述实施例的图像编码方法，该图像编码装置可以为电子设备，也可以被配置在电子设备中，以提高图像编码的速度，降低编码过程中CPU的功耗。

其中，电子设备，可以为前述推流客户端的设备，其可以是任意能够进行数据处理的静止或者移动计算设备，例如笔记本电脑、智能手机、可穿戴设备等移动计算设备，或者台式计算机等静止的计算设备等，本公开对此不作限制。

需要说明的是，前述对方法实施例的解释说明，也适用于本实施例的装置，原理相同，本实施例中不再赘述。

本实施例的图像编码装置中，获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率高于待处理的图像的分辨率，首先确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，再针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，由此，提高了图像编码的速度，降低了编码过程中CPU的功耗。

下面结合图8，对本申请实施例中的图像编码装置进行进一步说明。

图8为本申请实施例提供的另一种图像编码装置的结构示意图。

如图8所示，该图像编码装置800包括：第一获取模块801、第一确定模块802、第二确定模块803和第一处理模块804。其中，图8中第一获取模块801、第一确定模块802、第二确定模块803和第一处理模块804与图7中第一获取模块701、第一确定模块702、第二确定模块703和第一处理模块704具有相同功能和结构。

在本实施例的一种可能的实现方式中，参考图8，第一确定模块802，包括：

第一获取单元8021，用于针对图像中的每个图像块，获取图像块的至少两个顶点坐标信息；

第一确定单元8022，用于确定参考图像中与顶点坐标信息对应的参考坐标信息；

第二确定单元8023，用于确定至少两个参考坐标信息所限定的图像区域中的参考图像块；

第三确定单元8024，用于将至少两个参考坐标信息所限定的图像区域中的参考图像块，确定为与图像块具有映射关系的参考图像块。

在本实施例的另一种可能的实现方式中，第一确定单元8022，包括：

第一确定子单元，用于确定从图像至参考图像的缩放比例；

第二确定子单元，用于根据顶点坐标信息以及缩放比例，确定参考图像中与顶点坐标信息对应的参考坐标信息。

在本实施例的另一种可能的实现方式中，缩放比例包括：横缩放比例以及纵缩放比例；

第二确定子单元，具体用于：

根据顶点坐标信息中的横坐标信息以及横缩放比例，确定参考坐标信息中的横坐标信息；

根据顶点坐标信息中的纵坐标信息以及纵缩放比例，确定参考坐标信息中的纵坐标信息。

在本实施例的另一种可能的实现方式中，至少两个顶点坐标信息至少包括：左上顶点坐标信息和右下顶点坐标信息；

或者，

至少两个顶点坐标信息至少包括；左下顶点坐标信息和右上顶点坐标信息。

在本实施例的另一种可能的实现方式中，参考图8，第二确定模块803，包括：

第四确定单元8031，用于确定图像块采用至少一个参考图像块的模式决策结果的代价数值；

第一选择单元8032，用于从至少一个参考图像块的模式决策结果中选择对应的代价数值最小的模式决策结果，作为图像块的模式决策结果。

在本实施例的另一种可能的实现方式中，待处理的图像，为待进行编码的视频中的各帧图像。

在本实施例的另一种可能的实现方式中，所述待处理的图像，为至少一种分辨率下的图像；

所述至少一种分辨率下的图像对应相同的所述参考图像。

需要说明的是，前述对方法实施例的解释说明，也适用于本实施例的装置，原理相同，本实施例中不再赘述。

本实施例的图像编码装置中，获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率高于待处理的图像的分辨率，首先确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，再针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，由此，提高了图像编码的速度，降低了编码过程中CPU的功耗。

为了实现上述实施例，本实施例提供了另一种图像编码装置。

图9为本实施例提供的一种图像编码装置的结构示意图，如图9所示，该装置包括：第二获取模块901、第三确定模块902、第四确定模块903和第二处理模块904。

第二获取模块901，用于获取待处理的图像以及对应的参考图像，其中，参考图像与图像内容相同，且参考图像的分辨率低于图像的分辨率；

第三确定模块902，用于确定图像中图像块与参考图像中参考图像块之间的映射关系；

第四确定模块903，用于针对图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果；

第二处理模块904，用于根据图像中各个图像块的模式决策结果，对图像进行编码处理。

其中，本公开实施例中的图像编码装置，可以执行上述实施例的图像编码方法，该图像编码装置可以为电子设备，也可以被配置在电子设备中，以提高图像编码的速度，降低编码过程中CPU的功耗。

其中，电子设备，可以为前述推流客户端的设备，其可以是任意能够进行数据处理的静止或者移动计算设备，例如笔记本电脑、智能手机、可穿戴设备等移动计算设备，或者台式计算机等静止的计算设备等，本公开对此不作限制。

进一步，在本实施例的一种可能的实现方式中，第三确定模块902，包括：

第二获取单元，用于针对图像中的每个图像块，获取图像块的至少两个顶点坐标信息；

第五确定单元，用于确定参考图像中与顶点坐标信息对应的参考坐标信息；

第六确定单元，用于确定至少两个参考坐标信息所限定的图像区域中的参考图像块；

第七确定单元，用于将至少两个参考坐标信息所限定的图像区域中的参考图像块，确定为与图像块具有映射关系的参考图像块。

在本实施例的另一种可能的实现方式中，第五确定单元，包括：

第三确定子单元，用于确定从图像至参考图像的缩放比例；

第四确定子单元，用于根据顶点坐标信息以及缩放比例，确定参考图像中与顶点坐标信息对应的参考坐标信息。

在本实施例的另一种可能的实现方式中，缩放比例包括：横缩放比例以及纵缩放比例；第四确定子单元，具体用于：

根据顶点坐标信息中的横坐标信息以及横缩放比例，确定参考坐标信息中的横坐标信息；根据顶点坐标信息中的纵坐标信息以及纵缩放比例，确定参考坐标信息中的纵坐标信息。

在本实施例的另一种可能的实现方式中，至少两个顶点坐标信息至少包括：左上顶点坐标信息和右下顶点坐标信息；或者，至少两个顶点坐标信息至少包括；左下顶点坐标信息和右上顶点坐标信息。

在本实施例的另一种可能的实现方式中，第四确定模块903，包括：

第八确定单元，用于确定图像块采用至少一个参考图像块的模式决策结果的代价数值；

第二选择单元，用于从至少一个参考图像块的模式决策结果中选择对应的代价数值最小的模式决策结果，作为图像块的模式决策结果。

在本实施例的另一种可能的实现方式中，待处理的图像，为待进行编码的视频中的各帧图像。

在本实施例的另一种可能的实现方式中，所述待处理的图像，为至少一种分辨率下的图像；所述至少一种分辨率下的图像对应相同的所述参考图像。

本实施例的图像编码装置中，获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率低于待处理的图像的分辨率，首先确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，再针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，由此，提高了图像编码的速度，降低了编码过程中CPU的功耗。

为了实现上述实施例，本实施例提供了一种电子设备，包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行前述第一方面实施例或第二方面实施例所述的方法。

为了实现上述实施例，本实施例提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行前述第一方面实施例或第二方面实施例所述的方法。

为了实现上述实施例，本实施例提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现前述第一方面实施例或第二方面实施例所述的方法。

图10为本公开实施例提供的电子设备1000的示意性框图。电子设备旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本公开的实现。

如图10所示，设备1000包括计算单元1001，其可以根据存储在ROM(Read-OnlyMemory，只读存储器)1002中的计算机程序或者从存储单元1008加载到RAM(Random AccessMemory，随机访问/存取存储器)1003中的计算机程序，来执行各种适当的动作和处理。在RAM 1003中，还可存储设备1000操作所需的各种程序和数据。计算单元1001、ROM 1002以及RAM 1003通过总线1004彼此相连。I/O(Input/Output，输入/输出)接口1005也连接至总线1004。

设备1000中的多个部件连接至I/O接口1005，包括：输入单元1006，例如键盘、鼠标等；输出单元1007，例如各种类型的显示器、扬声器等；存储单元1008，例如磁盘、光盘等；以及通信单元1009，例如网卡、调制解调器、无线通信收发机等。通信单元1009允许设备1000通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。

计算单元1001可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元1001的一些示例包括但不限于CPU(Central Processing Unit，中央处理单元)、GPU(Graphic Processing Units，图形处理单元)、各种专用的AI(Artificial Intelligence，人工智能)计算芯片、各种运行机器学习模型算法的计算单元、DSP(Digital SignalProcessor，数字信号处理器)、以及任何适当的处理器、控制器、微控制器等。计算单元1001执行上文所描述的各个方法和处理，例如图像编码方法。例如，在一些实施例中，图像编码方法可被实现为计算机软件程序，其被有形地包含于机器可读介质，例如存储单元1008。在一些实施例中，计算机程序的部分或者全部可以经由ROM 1002和/或通信单元1009而被载入和/或安装到设备1000上。当计算机程序加载到RAM1003并由计算单元1001执行时，可以执行上文描述的图像编码方法的一个或多个步骤。备选地，在其他实施例中，计算单元1001可以通过其他任何适当的方式(例如，借助于固件)而被配置为执行图像编码方法。

本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、FPGA(Field Programmable Gate Array，现场可编程门阵列)、ASIC(Application-Specific Integrated Circuit，专用集成电路)、ASSP(Application Specific StandardProduct，专用标准产品)、SOC(System On Chip，芯片上系统的系统)、CPLD(ComplexProgrammable Logic Device，复杂可编程逻辑设备)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。

用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器，使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。

在本公开的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、RAM、ROM、EPROM(Electrically Programmable Read-Only-Memory，可擦除可编程只读存储器)或快闪存储器、光纤、CD-ROM(Compact Disc Read-Only Memory，便捷式紧凑盘只读存储器)、光学储存设备、磁储存设备、或上述内容的任何合适组合。

为了提供与用户的交互，可以在计算机上实施此处描述的系统和技术，该计算机具有：用于向用户显示信息的显示装置(例如，CRT(Cathode-Ray Tube，阴极射线管)或者LCD(Liquid Crystal Display，液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。

可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据服务器)、或者包括中间件部件的计算系统(例如，应用服务器)、或者包括前端部件的计算系统(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：LAN(LocalArea Network，局域网)、WAN(Wide Area Network，广域网)、互联网和区块链网络。

计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器，又称为云计算服务器或云主机，是云计算服务体系中的一项主机产品，以解决了传统物理主机与VPS服务("Virtual Private Server"，或简称"VPS")中，存在的管理难度大，业务扩展性弱的缺陷。服务器也可以为分布式系统的服务器，或者是结合了区块链的服务器。

应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本发公开中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本公开公开的技术方案所期望的结果，本文在此不进行限制。

上述具体实施方式，并不构成对本公开保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本公开的精神和原则之内所作的修改、等同替换和改进等，均应包含在本公开保护范围之内。