电力负荷数据的压缩方法及终端

文档序号:1921480 发布日期:2021-12-03 浏览:14次 >En<

阅读说明:本技术 电力负荷数据的压缩方法及终端 (Compression method of power load data and terminal ) 是由 朱雅魁 陶鹏 申洪涛 张洋瑞 张超 张冰玉 于 2021-07-15 设计创作,主要内容包括:本发明提供了一种电力负荷数据的压缩方法及终端,该方法包括:获取待压缩数据集合;将第一数据作为第二数据的基准数据,计算第二数据与第一数据的差值,其中,第一数据为数据集合中位于第二数据之前的与第二数据距离最近的非空数据;若第二数据与第一数据的差值小于等于第一预设值,则将第二数据与第一数据的差值按照第一预设数据结构存储至压缩序列中第二数据对应的位置,其中,差值的绝对值为a×10~(n),第一预设数据结构包括第一值、第二值和第三值,第一值用于表示差值为正数或负数,第二值为10~(n)中的指数n的值,第三值为a的值,其中,n为负整数。本发明能够提高电力数据的压缩速度。(The invention provides a compression method and a terminal for power load data, wherein the method comprises the following steps: acquiring a data set to be compressed; taking the first data as reference data of the second data, and calculating a difference value between the second data and the first data, wherein the first data is non-null data which is positioned before the second data and is closest to the second data in the data set; if the difference value between the second data and the first data is less than or equal to a first preset value, storing the difference value between the second data and the first data to a position corresponding to the second data in the compressed sequence according to a first preset data structure, wherein the absolute value of the difference value is a multiplied by 10 n The first preset data structure includes a first value for indicating whether the difference value is a positive number or a negative number, a second value of 10, and a third value n The third value is a value of a, wherein n is a negative integer. The invention can improve the compression speed of the power data.)

电力负荷数据的压缩方法及终端

技术领域

本发明属于计算机技术领域,尤其涉及一种电力负荷数据的压缩方法及终端。

背景技术

数据压缩,指在不丢失有用信息的前提下,通过数据压缩算法缩减数据量或重组数据,减少数据的冗余以减少存储空间,提高传输、存储和处理效率。

在电力行业中,对重要负荷需要连续不断地记录负荷曲线、电压、电流等电力特征数据,由于用户数据采样周期短,连续时间跨度大,用户基数大,业内通常采用数据库直接记录,会导致当前电力数据体量巨大,存储开销巨大,查询时间跨度不宜过长否则查询时间过长,甚至导致数据库宕机等问题。

为解决上述问题,通常通过对电力负荷数据进行压缩后再存储,但是,现有的针对电力负荷数据的压缩方法压缩速率较低。

发明内容

有鉴于此,本发明提供了一种电力负荷数据的压缩方法及终端,能够提高电力负荷数据压缩的压缩速率。

本发明实施例的第一方面提供了一种电力负荷数据的压缩方法,包括:

获取待压缩数据集合,将第一数据作为第二数据的基准数据,计算第二数据与所述第一数据的差值,其中,所述第一数据为所述数据集合中位于所述第二数据之前的与所述第二数据距离最近的非空数据;

若所述第二数据与所述第一数据的差值小于等于第一预设值,则将所述第二数据与所述第一数据的差值按照第一预设数据结构存储至所述压缩序列中所述第二数据对应的位置,其中,所述差值的绝对值为a×10n,所述第一预设数据结构包括第一值、第二值和第三值,所述第一值用于表示所述差值为正数或负数,所述第二值为10n中的指数n的值,所述第三值为a的值,其中,n为负整数。

在一种可能的实现方式中,所述第一预设数据结构还包括数据结构的类型信息,所述第一预设数据结构由两个字节构成,第一位用于表示所述第一预设数据结构的类型信息,第二位用于表示所述第一值,第三位至第五位用于表示所述第二值的绝对值,第六位至第十六位用于表示所述第三值。

在一种可能的实现方式中,该方法还包括:

若所述数据集合中存在第三数据,所述第三数据为缺失数据,则在所述压缩序列中所述第三数据对应的位置插入第二预设数据结构,所述第二预设结构包括第二预设值,所述第二预设值用于表示所述第三数据为缺失数据。

在一种可能的实现方式中,该方法还包括:

若所述第一数据为所述数据集合中的第一个数据,或所述第二数据与所述第一数据的差值大于所述第一预设值,则通过第三预设数据结构在所述压缩序列中存储所述第一数据或所述第二数据。

在一种可能的实现方式中,所述第二预设数据结构和所述第三数据结构还包含数据结构的类型信息,其中,所述第二预设数据结构和所述第三预设数据结构的类型相同,所述第二预设数据结构和所述第一数据结构的类型不同。

在一种可能的实现方式中,所述第二预设数据结构由一个字节构成,第一位用于表示所述第二预设数据结构的类型信息,第二位至第八位用于表示所述第二预设值;

所述第三预设数据结构的第一位用于表示所述第三预设数据结构的类型信息,第二位至第八位用于表示第四值,所述第四值用于表示所述第三数据结构中存储的数据的类型信息;

若所述第四值用于表示的数据类型信息为整型数据,则所述第三预设数据结构由三个字节构成,第九位至第二十四位用于存储数据的值;

若所述第四值用于表示的数据类型为单精度浮点型数据,则所述第三预设数据结构由五个字节构成,第九位至第四十位用于存储数据的值;

若所述第四值用于表示的数据类型为双精度浮点型数据,则所述第三预设数据结构由九个字节构成,第九位至第七十二位用于存储数据的值。

在一种可能的实现方式中,该方法还包括,进行数据解压缩过程:

获取待解压缩的数据序列;

根据第一位的数据,获得数据结构的类型信息;

根据所述数据结构的类型信息,对数据进行解压缩。

在一种可能的实现方式中,所述根据所述数据结构的类型信息,对数据进行解压缩包括:

若所述数据结构的类型信息用于表示第二预设数据结构或第三预设数据结构,则读取第二位至第八位;

若第二位至第八位的值是所述第二预设值,则判断该数据结构对应的数据为缺失数据;

若第二位至第八位的值是所述第四值,则根据所述第四值对应的数据类型信息,得到该数据结构中存储的数据,插入到解压缩序列中;

若所述数据结构的类型信息用于表示第一预设数据结构,则获取所述第一值、第二值和第三值,根据所述第一值、第二值和第三值得到所述第二数据与所述第一数据的差值,将所述差值与所述第一数据相加,得到所述第二数据,将所述第二数据插入所述解压缩序列中。

在一种可能的实现方式中,该方法还包括:得到所述数据集合所对应的压缩序列后,创建包含所述压缩序列的压缩文件;

按照预设策略对所述压缩文件命名,得到文件名;

在数据库中存储所述电力负荷设备和所述数据集合的标识信息、所述压缩文件的目录路径信息。

第二方面,本发明实施例提供了一种终端,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上第一方面或第一方面的任一种可能的实现方式所述方法的步骤。

本发明实施例提供一种电力负荷数据的压缩方法及装置,通过电力负荷曲线数据的特性进行分析,相邻两个数据的差值通常较小,通过在压缩序列中存储差值的方式对数据进行压缩,不但降低了数据存储量,而且本发明降低了压缩算法的复杂度,提高了压缩的速率。

附图说明

为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的一种电力负荷数据的压缩方法的实现流程图;

图2是本发明实施例提供的一种数据结构的示意图;

图3是本发明实施例提供的另一种数据结构的示意图;

图4是本发明实施例提供的另一种数据结构的示意图;

图5是本发明实施例提供的另一种电力负荷数据的压缩方法的实现流程图;

图6是本发明实施例提供的一种电力负荷数据的压缩装置的结构示意图;

图7是本发明实施例提供的终端的示意图。

具体实施方式

以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本发明实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本发明的描述。

为使本发明的目的、技术方案和优点更加清楚,下面将结合附图通过具体实施例来进行说明。

参见图1,其示出了本发明实施例提供的一种电力负荷数据的压缩方法的实现流程图,详述如下:

S101,获取待压缩数据集合,将第一数据作为第二数据的基准数据,计算第二数据与所述第一数据的差值,其中,所述第一数据为所述数据集合中位于所述第二数据之前的与所述第二数据距离最近的非空数据。

其中,所述待压缩数据集合为同一电力负荷设备所对应的预设时间段内的预设类型的数据,所述待压缩数据集合中的数据按照时间的先后顺序排列。

可选的,预设时间段可以为一个月,也可以为一年,本发明实施例对此不作限定。

数据集合中包含一个电力负荷设备在预设时间段内的预设类型的数据,即该电力负荷设备在预设时间段内的单项采集信息,如总功率数据,或电压数据,或电流数据等。

数据集合中的数据是按照采集的先后顺序,即时间由早到晚的顺序排列的。

数据的二进制存储有三种形式:整型数据占两字节,即16位;单精度浮点型数据占4个字节,即32位;双精度浮点型占8个字节,即64位。

在实际的数据存储中,还要存储数据的类型信息,因此,整型数据、单精度浮点型数据和双精度浮点型数据在存储过程中占用的内存不止2字节、4字节和8字节。

由于电力负荷数据的多样性,需要压缩的数据集合中通常包含上述三种类型的数据。

如果不对电力负荷数据进行压缩,而是直接进行存储,由上述分析可知,其所占内存非常大。

考虑到电力负荷设备在进行数据采集的过程中,相邻的两个数据的变化量较小,即后一个数据与前一个数据的差值的绝对值较小。

因此,将第一数据作为第二数据的基准数据,计算第二数据与所述第一数据的差值。

需要说明的是,所述第一数据为所述数据集合中位于所述第二数据之前的与所述第二数据距离最近的非空数据。

当存在缺失数据时,缺失数据所对应的位置可能是一个空数据。

例如,数据集合中按顺序排列有5个数据,分别是数据1、数据2、缺失数据、数据4和数据5,那么数据2的基准数据是数据1,数据4的基准数据是数据2,数据5的基准数据是数据4。

S102,若所述第二数据与所述第一数据的差值小于等于第一预设值,则将所述第二数据与所述第一数据的差值按照第一预设数据结构存储至所述压缩序列中所述第二数据对应的位置,其中,所述差值的绝对值为a×10n,所述第一预设数据结构包括第一值、第二值和第三值,所述第一值用于表示所述差值为正数或负数,所述第二值为10n中的指数n的值,所述第三值为a的值,其中,n为负整数。

本发明实施例提供如图2所示的一种数据结构,图2所示的数据结构即为本步骤中的第一预设数据结构。

可选的,如图2所示,第一预设数据结构还包括数据结构的类型信息,所述第一预设数据结构由两个字节构成,第一位用于表示所述第一预设数据结构的类型信息,第二位用于表示所述第一值,第三位至第五位用于表示所述第二值的绝对值,第六位至第十六位用于表示所述第三值。

如图2所示的第一预设数据结构只占用16位即两个字节,相比于步骤S101中的存储方式,即整型数据、单精度浮点型数据和双精度浮点型数据,其内存占用量都大大减少。

若第二数据和第一数据的差值的绝对值为a×10n,第一预设数据结构包括第一值、第二值和第三值,第一值用于表示差值为正数或负数,第二值为10n中的指数n的值,第三值为a的值,其中,n为负整数。

结合图2,可选的,第一位用于表示所述第一预设数据结构的类型信息,可以用0表示第一预设数据结构的类型信息,也可以用1表示第一预设数据结构的类型信息,本发明实施例对此不作限定。

第二位用于表示第一值,第一值用于表示第二数据与第一数据的差值为正数或负数。可选的,当第二位为0时,该差值为正数,当第二位为1时,该差值为负数,或者,当第二位为0时,该差值为负数,当第二位1时,该差值为正数,本发明实施例对此不作限定。

第三位至第五位用于表示指数n,n为0或负整数。可见,n的取值范围为-7,-6,-5,-4,-3,-2,-1,0的任一数值。

第六位至第十六位,共11位用于表示第三值,即a的值,可见a的取值范围为0至2047的任一值。

因此,第一预设数据结构可以用于表示绝对值在1×10-7至2047之间的任意数据。

基于此,第一预设值可设置为2047。

可选的,若所述数据集合中存在第三数据,所述第三数据为缺失数据,则在所述压缩序列中所述第三数据对应的位置插入第二预设数据结构,所述第二预设结构包括第二预设值,所述第二预设值用于表示所述第三数据为缺失数据。

若所述第一数据为所述数据集合中的第一个数据,或所述第二数据与所述第一数据的差值大于所述第一预设值,则通过第三预设数据结构在所述压缩序列中存储所述第一数据或所述第二数据。

所述第二预设数据结构和所述第三数据结构还包含数据结构的类型信息,其中,所述第二预设数据结构和所述第三预设数据结构的类型相同,所述第二预设数据结构和所述第一数据结构的类型不同。

可选的,所述第二预设数据结构由一个字节构成,第一位用于表示所述第二预设数据结构的类型信息,第二位至第八位用于表示所述第二预设值;

所述第三预设数据结构的第一位用于表示所述第三预设数据结构的类型信息,第二位至第八位用于表示第四值,所述第四值用于表示所述第三数据结构中存储的数据的类型信息;

若所述第四值用于表示的数据类型信息为整型数据,则所述第三预设数据结构由三个字节构成,第九位至第二十四位用于存储数据的值;

若所述第四值用于表示的数据类型为单精度浮点型数据,则所述第三预设数据结构由五个字节构成,第九位至第四十位用于存储数据的值;

若所述第四值用于表示的数据类型为双精度浮点型数据,则所述第三预设数据结构由九个字节构成,第九位至第七十二位用于存储数据的值。

下面结合图3和图4分别对第二预设数据结构和第三预设数据结构进行说明。

图3为本发明实施例提供的一种数据结构的示意图,可选的,为第二预设数据结构的示意图;图4为本发明实施例提供的另一种数据结构的示意图,可选的,为第三预设数据结构的示意图。

如图3和图4所示,第二预设数据结构的第一位和第三预设数据结构的第一位都用于表示数据结构的类型信息。其中所述第二预设数据结构和所述第三预设数据结构的类型相同,所述第二预设数据结构和所述第一数据结构的类型不同。

例如,若第一预设数据结构的类型信息用1表示,则第二预设数据结构和第三预设数据结构的类型信息用0表示;或者,若第一预设数据结构的类型信息用0表示,则第二预设数据结构和第三预设数据结构的类型信息用1表示,本发明实施例对此不作限定。

若一个待压缩数据为缺失数据,则在压缩序列中该数据对应的位置插入一个第二预设数据结构,如图3所示,该数据结构的第二位至第8位存储第二预设值,第二预设值用于表示该数据为缺失数据。

由上述分析可知,第一预设数据结构只能存储绝对值小于等于2047的值,若第二数据与第一数据的差值大于2047,则无法通过第一预设数据结构存储该差值。基于此,对于与第一数据差值大于2047的第二数据,或者数据集合中的第一个数据,结合图4,本发明实施例还提供了一种如图4所示的第三预设数据结构。

第三预设数据结构中的第一位用于表示数据结构的类型信息,其类型与第二预设数据结构的类型相同。第二至八位用于表示第四值,所述第四值用于表示所述第三数据结构中存储的数据的类型信息,示例性的:

若所述第四值用于表示的数据类型信息为整型数据,则所述第三预设数据结构由三个字节构成,第九位至第二十四位用于存储数据的值,此时,可选的,第四值为24,可用于表示该数据结构占用24位共3个字节;

若所述第四值用于表示的数据类型为单精度浮点型数据,则所述第三预设数据结构由五个字节构成,第九位至第四十位用于存储数据的值,此时,可选的,第四值为40,可用于表示该数据结构占用40位共5个字节;

若所述第四值用于表示的数据类型为双精度浮点型数据,则所述第三预设数据结构由九个字节构成,第九位至第七十二位用于存储数据的值,此时,可选的,第四值为72,可用于表示该数据结构占用72位共9个字节。

需要说明的是,第二预设值与第四值的值不同。例如,可将第二预设值设置为8,用于表示该数据为缺失数据。

进一步的,第二预设值还可以是其他数值,用于表示实际应用中可能遇到的其他特殊类型的数据,基于本发明思路的特殊数据的存储,都在本发明实施例的保护范围之内。

下面以一个具体的实例对上述数据的压缩过程进行说明。

例如,数据集合中按顺序排列有5个数据,分别是数据1、数据2、缺失数据、数据4和数据5,那么数据2的基准数据是数据1,数据4的基准数据是数据2,数据5的基准数据是数据4。

数据2与数据1的差值的绝对值小于2047,数值4与数值2的差值绝对值大于2047,数值5与数值4的差值绝对值小于2047。

开始进行压缩过程,按数据集合中数据的排列顺序依次对数据进行压缩,首先对数据1进行压缩,数据1是数据集合中的第一个数据,则通过图4所示的第三预设数据结构进行数据1的压缩并插入预设的压缩序列;

数据2与数据1的差值绝对值小于2047,得到数据2与数据1的差值X,将X1变换为绝对值为a×10n的形式,分别得到a和n的值,用第一预设数据结构存储X1并按顺序插入压缩序列;

第三个数据为缺失数据,则按顺序在压缩序列中插入第二预设数据结构;

数据4与数据2的差值绝对值大于2047,则通过第三预设数据结构存储数据2并按顺序插入压缩序列;

数据5与数据4的差值绝对值小于2047,得到数据5与数据4的差值X2,将X2变换为绝对值为a×10n的形式,分别得到a和n的值,用第一预设数据结构存储X2并按顺序插入压缩序列。

数据5为集合中的最后一个数据,则压缩完成,输出压缩序列。

传统压缩方法要么对文件直接压缩,不利于结构化存取,要么压缩和解压缩相对复杂,处理速度较慢,在对大量用户数据读取时,系统响应不及时。本申请降低了数据存储开销、提高了压缩速率,实现了数据的快速读取和展示。

由上可知,本发明通过对同一电力负荷设备的同一类型的电力数据进行压缩,根据相邻两个数据差值较小的特点,计算后一个数据与前一个数据的差值,若差值小于第一预设值,则通过一个占用内存较小的数据结构来存储该差值,实现了降低存储量的基础上的无损压缩,提高了电力负荷数据压缩的速度。

图5示出了本发明实施例提供的另一种电力负荷数据的压缩方法的实现流程图,详述如下:

S501,获取待解压缩的数据序列。

通过图1所述的方法得到一个压缩序列,当需要对该压缩序列进行解压缩时,该压缩序列即为本步骤中的待解压缩的数据序列。

S502,根据第一位的数据,获得数据结构的类型信息。

由图1所示的方法以及图2至图4所示的三种预设数据结构可知,每个数据结构的第一位都用于表示数据结构的类型信息,其中,所述第二预设数据结构和所述第三预设数据结构的类型相同,所述第二预设数据结构和所述第一数据结构的类型不同。

S503,根据所述数据结构的类型信息,对数据进行解压缩。

可选的,若所述数据结构的类型信息用于表示第二预设数据结构或第三预设数据结构,则读取第二位至第八位;

若第二位至第八位的值是所述第二预设值,则判断该数据结构对应的数据为缺失数据;

若第二位至第八位的值是所述第四值,则根据所述第四值对应的数据类型信息,得到该数据结构中存储的数据,插入到解压缩序列中;

若所述数据结构的类型信息用于表示第一预设数据结构,则获取所述第一值、第二值和第三值,根据所述第一值、第二值和第三值得到所述第二数据与所述第一数据的差值,将所述差值与所述第一数据相加,得到所述第二数据,将所述第二数据插入所述解压缩序列中。

下面以一个实例对解压缩过程进行说明。

在本步骤中,继续以原数据集合中按顺序排列有5个数据,分别是数据1、数据2、缺失数据、数据4和数据5,那么数据2的基准数据是数据1,数据4的基准数据是数据2,数据5的基准数据是数据4为例进行说明。

通过步骤S101至步骤S102,得到一个压缩序列,该压缩序列中依次存储有:通过第三预设数据结构存储的数据1、通过第一预设数据结构存储的数据2与数据1的差值X1、通过第二预设数据结构存储的缺失数据、通过第三预设数据结构存储的数据4、通过第一预设数据结构存储的数据5和数据4的差值X2。

假设第一预设数据结构的类型信息用1表示,第二预设数据结构和第三预设数据结构的类型信息用0表示。

则解压缩的过程为:读取序列的第一位,得到0,判断为第二预设数据结构或第三预设数据结构,则读取第2至8位,得到数据1的类型信息,假设数据1为整型数据,则该数据结构包括24位,读取第9至24位,得到数据1的值,存储到解压缩序列中;

继续进行数据读取,读取第一位,得到1,判断为第一预设数据结构,读取第二位,判断该差值为正数还是负数,读取第三至五位,得到n的值,读取第6-16位,得到a的值,计算a×10n并结合第二位的值,得到差值X1,将X1与数据1相加,得到数据2,存储到解压缩序列中;

继续进行数据读取,第一位为0,判断为第二预设数据结构或第三预设数据结构,读取第2-8位,得到第二预设值,判断该位置对应的数据为缺失数据;

继续进行数据读取,第一位为0,判断为第二预设数据结构或第三预设数据结构,则读取第2至8位,得到数据4的类型信息,假设数据4为单精度浮点型数据,则该数据结构包括40位,读取第9至40位,得到数据4的值,存储到解压缩序列中;

继续进行数据读取,读取第一位,得到1,判断为第一预设数据结构,读取第二位,判断该差值为正数还是负数,读取第三至五位,得到n的值,读取第6-16位,得到a的值,计算a×10n并结合第二位的值,得到差值X2,将X2与数据4相加,得到数据5,存储到解压缩序列中;

数据读取完成,解压缩完成。

进一步的,压缩完成后,将压缩序列存储至预设数据库中,以方便后续的索引和查找,包括:得到所述数据集合所对应的压缩序列后,创建包含所述压缩序列的压缩文件;按照预设策略对所述压缩文件命名,得到文件名;在数据库中存储所述电力负荷设备和所述数据集合的标识信息、所述压缩文件的目录路径信息。

可选的,可以以自然年为预设时间段,对单个电力负荷设备的负荷曲线数据进行压缩,得到一个压缩文件,此文件名以用户编号+抄见负荷年为文件名进行存储,在数据库中记录该负荷的户名、户号、记录开始时间点、总数据点数、每日负荷点数、负荷记录之间的时间间隔、压缩文件的目录路径等。

对所有用电客户的负荷曲线进行压缩,采用与上述相同的方法在数据库中对压缩文件进行存储。

本发明实施例还提供一种数据库存储格式实例,如下所示:

字段 类型 说明
ID number 数据条目唯一ID
Cons_name Char(64) 户名
Cons_no Char(10) 户号
Start_time datetime 记录开始时间点
Sum_num number 总数据点数
Day_piont number 每日负荷点数
Sepa_time number 负荷记录之间的时间间隔(min)
File_path Varchar2 该压缩文件的目录路路径

由上可知,本发明通过本发明通过对同一电力负荷设备的同一类型的电力数据进行压缩,根据相邻两个数据差值较小的特点,计算后一个数据与前一个数据的差值,若差值小于第一预设值,则通过一个占用内存较小的数据结构来存储该差值,实现了降低存储量的基础上的无损压缩,提高了电力负荷数据压缩的速度。

应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。

以下为本发明的装置实施例,对于其中未详尽描述的细节,可以参考上述对应的方法实施例。

图6示出了本发明实施例提供的一种电力负荷数据的压缩装置的结构示意图,为了便于说明,仅示出了与本发明实施例相关的部分,详述如下:

如图6所示,电力负荷数据的压缩装置6包括:数据获取模块61、差值计算模块62和压缩模块63;

数据获取模块61用于:获取待压缩数据集合,其中,所述待压缩数据集合为同一电力负荷设备所对应的预设时间段内的预设类型的数据,所述待压缩数据集合中的数据按照时间的先后顺序排列;

差值计算模块62用于:将第一数据作为第二数据的基准数据,计算第二数据与所述第一数据的差值,其中,所述第一数据为所述数据集合中位于所述第二数据之前的与所述第二数据距离最近的非空数据;

压缩模块63用于:若所述第二数据与所述第一数据的差值小于等于第一预设值,则将所述第二数据与所述第一数据的差值按照第一预设数据结构存储至所述压缩序列中所述第二数据对应的位置,其中,所述差值的绝对值为a×10n,所述第一预设数据结构包括第一值、第二值和第三值,所述第一值用于表示所述差值为正数或负数,所述第二值为10n中的指数n的值,所述第三值为a的值,其中,n为0或负整数。

可选的,所述第一预设数据结构还包括数据结构的类型信息,所述第一预设数据结构由两个字节构成,第一位用于表示所述第一预设数据结构的类型信息,第二位用于表示所述第一值,第三位至第五位用于表示所述第二值的绝对值,第六位至第十六位用于表示所述第三值。

可选的,所示压缩模块63还用于:若所述数据集合中存在第三数据,所述第三数据为缺失数据,则在所述压缩序列中所述第三数据对应的位置插入第二预设数据结构,所述第二预设结构包括第二预设值,所述第二预设值用于表示所述第三数据为缺失数据。

可选的,所述压缩模块63还用于:若所述第一数据为所述数据集合中的第一个数据,或所述第二数据与所述第一数据的差值大于所述第一预设值,则通过第三预设数据结构在所述压缩序列中存储所述第一数据或所述第二数据。

可选的,所述第二预设数据结构和所述第三数据结构还包含数据结构的类型信息,其中,所述第二预设数据结构和所述第三预设数据结构的类型相同,所述第二预设数据结构和所述第一数据结构的类型不同。

可选的,所述第二预设数据结构由一个字节构成,第一位用于表示所述第二预设数据结构的类型信息,第二位至第八位用于表示所述第二预设值;

所述第三预设数据结构的第一位用于表示所述第三预设数据结构的类型信息,第二位至第八位用于表示第四值,所述第四值用于表示所述第三数据结构中存储的数据的类型信息;

若所述第四值用于表示的数据类型信息为整型数据,则所述第三预设数据结构由三个字节构成,第九位至第二十四位用于存储数据的值;

若所述第四值用于表示的数据类型为单精度浮点型数据,则所述第三预设数据结构由五个字节构成,第九位至第四十位用于存储数据的值;

若所述第四值用于表示的数据类型为双精度浮点型数据,则所述第三预设数据结构由九个字节构成,第九位至第七十二位用于存储数据的值。

可选的,该装置还包括解压缩模块64,用于获取待解压缩的数据序列;根据第一位的数据,获得数据结构的类型信息;根据所述数据结构的类型信息,对数据进行解压缩。

解压缩模块64还用于:若所述数据结构的类型信息用于表示第二预设数据结构或第三预设数据结构,则读取第二位至第八位;

若第二位至第八位的值是所述第二预设值,则判断该数据结构对应的数据为缺失数据;

若第二位至第八位的值是所述第四值,则根据所述第四值对应的数据类型信息,得到该数据结构中存储的数据,插入到解压缩序列中;

若所述数据结构的类型信息用于表示第一预设数据结构,则获取所述第一值、第二值和第三值,根据所述第一值、第二值和第三值得到所述第二数据与所述第一数据的差值,将所述差值与所述第一数据相加,得到所述第二数据,将所述第二数据插入所述解压缩序列中。

可选的,该装置还包括存储模块65,用于得到所述数据集合所对应的压缩序列后,创建包含所述压缩序列的压缩文件;按照预设策略对所述压缩文件命名,得到文件名;在数据库中存储所述电力负荷设备和所述数据集合的标识信息、所述压缩文件的目录路径信息。

由上可知,本发明装置通过对同一电力负荷设备的同一类型的电力数据进行压缩,根据相邻两个数据差值较小的特点,计算后一个数据与前一个数据的差值,若差值小于第一预设值,则通过一个占用内存较小的数据结构来存储该差值,实现了降低存储量的基础上的无损压缩,提高了电力负荷数据压缩的速度。

图7是本发明实施例提供的终端的示意图。如图7所示,该实施例的终端7包括:处理器70、存储器71以及存储在所述存储器71中并可在所述处理器70上运行的计算机程序72。所述处理器70执行所述计算机程序72时实现上述各个电力负荷数据的压缩方法实施例中的步骤,例如图1所示的步骤101至步骤102。或者,所述处理器70执行所述计算机程序72时实现上述各装置实施例中各模块/单元的功能,例如图6所示模块/单元61至65的功能。

示例性的,所述计算机程序72可以被分割成一个或多个模块/单元,所述一个或者多个模块/单元被存储在所述存储器71中,并由所述处理器70执行,以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述计算机程序72在所述终端7中的执行过程。例如,所述计算机程序72可以被分割成图6所示的模块/单元61至65。

所述终端7可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述终端7可包括,但不仅限于,处理器70、存储器71。本领域技术人员可以理解,图7仅仅是终端7的示例,并不构成对终端7的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如所述终端还可以包括输入输出设备、网络接入设备、总线等。

所称处理器70可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

所述存储器71可以是所述终端7的内部存储单元,例如终端7的硬盘或内存。所述存储器71也可以是所述终端7的外部存储设备,例如所述终端7上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,所述存储器71还可以既包括所述终端7的内部存储单元也包括外部存储设备。所述存储器71用于存储所述计算机程序以及所述终端所需的其他程序和数据。所述存储器71还可以用于暂时地存储已经输出或者将要输出的数据。

所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。

在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。

本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。

在本发明所提供的实施例中,应该理解到,所揭露的装置/终端和方法,可以通过其它的方式实现。例如,以上所描述的装置/终端实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。

所述集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个电力负荷数据的压缩方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括是电载波信号和电信信号。

以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。

18页详细技术资料下载
上一篇:一种医用注射器针头装配设备
下一篇:一种混合云的数据存储方法

网友询问留言

已有0条留言

还没有人留言评论。精彩留言会获得点赞!

精彩留言,会给你点赞!