一种用于云计算系统的数据处理方法

文档序号:1937569 发布日期:2021-12-07 浏览:8次 >En<

阅读说明:本技术 一种用于云计算系统的数据处理方法 (Data processing method for cloud computing system ) 是由 吴剑波 王庆东 关玉蓉 姜国松 陆正武 朱晓明 于 2021-09-11 设计创作,主要内容包括:本申请公开了一种用于云计算系统的数据处理方法,采集数据并传输至云计算系统;采集数据并传输至云计算系统;对采集到的数据进行处理;将处理后的数据分类储存;对存储的数据进行管理和调度;根据用户个性化需要展示对应数据。可以在大数据中更加准确的展示出用户需要的内容,同时通过数据处理,可以对数据进行分析挖掘,从而可以展示更加深层的数据,也可以提高数据的关联度,解决了现有的云计算系统的数据处理方法在处理数据时数据分类不清晰的问题,使得云计算系统中的数据处理后分类更加明确,从而使得用户在数据检索完成后,会得到相关度较高的数据内容,通过虚拟化技术可以帮助用户快速了解所需内容,提高了数据的检索效率。(The application discloses a data processing method for a cloud computing system, which comprises the steps of collecting data and transmitting the data to the cloud computing system; collecting data and transmitting the data to a cloud computing system; processing the acquired data; storing the processed data in a classified manner; managing and scheduling the stored data; and displaying the corresponding data according to the personalized needs of the user. The content required by the user can be displayed more accurately in the big data, and meanwhile, through data processing, the data can be analyzed and mined, so that deeper data can be displayed, the association degree of the data can also be improved, the problem that data classification is not clear when the data processing method of the existing cloud computing system processes the data is solved, the classification of the data in the cloud computing system is more definite after the data is processed, the data content with higher correlation degree can be obtained after the data retrieval of the user is completed, the user can be helped to quickly know the required content through a virtualization technology, and the data retrieval efficiency is improved.)

一种用于云计算系统的数据处理方法

技术领域

本申请涉及数据处理方法,尤其是一种用于云计算系统的数据处理方法。

背景技术

云计算是分布式计算的一种,指的是通过网络“云”将巨大的数据计算处理程序分解成无数个小程序,再通过多部服务器组成的系统进行处理和分析这些小程序得到结果并返回给用户,是简单的分布式计算,解决任务分发,并进行计算结果的合并,与信息技术、软件、互联网相关的一种服务,许多计算资源集合起来,通过软件实现自动化管理,只需要很少的人参与和维持,就能让资源被快速提供,云计算的核心是可以将很多的计算机资源协调在一起,通过这项技术,可以在很短的时间内完成对数以万计的数据的处理,从而达到强大的网络服务。

随着互联网的普及和发展,云计算系统的数据处理方法也随着快速发展,目前的云计算系统的数据处理方法在处理数据时,无法对数据进行清晰的分类等,导致数据在处理完成后,用户进行查询时,反馈出的数据的相关度会降低,且由于数据收集后分类和处理手段不够,容易导致部分深层数据无法被发掘,影响数据的检索展示效果。因此,针对上述问题提出一种用于云计算系统的数据处理方法。

发明内容

在本实施例中提供了一种用于云计算系统的数据处理方法用于解决现有技术中云计算系统的数据处理方法在处理数据时数据分类不清晰的问题。

根据本申请的一个方面,提供了一种用于云计算系统的数据处理方法,所述云计算系统的数据处理方法包括一下步骤:

(1)采集数据并传输至云计算系统;

(2)对采集到的数据进行处理;

(3)将处理后的数据分类储存;

(4)对存储的数据进行管理和调度;

(5)根据用户个性化需要展示对应数据。

进一步地,所述步骤(1)中通过终端收集设备对进行大量的数据采集,并将采集后的数据直接传输至云计算系统的数据采集模块,此时云计算系统中的数据采集模块对数据进行初步分类。

进一步地,所述步骤(1)中将采集来的数据分为文字资料、音频、视频、图片和位置信息五大类,并将对应的数据内容传输至文字资料模块、音频模块、视频数据模块、图片信息模块和位置信息模块,并对分类后的数据进行处理。

进一步地,所述步骤(2)中的数据处理包括数据预处理和数据解析,数据预处理包括解码处理、数据填充处理和噪音清洗处理。

进一步地,所述步骤(2)中的数据解析包括拆分单元、映射单元、输出单元和合并储存单元,对分类后的数据进行拆分、映射和合并处理。

进一步地,所述步骤(2)中将分类后的数据分别对应进行数据预处理和数据解析处理后,传输至存储模块。

进一步地,所述步骤(3)中数据储存模块包括一级存储模块、二级存储模块和三级存储模块,并按照上下位进行分离,二级存储模块包含三级存储模块,一级存储模块包括二级存储模块,到达三级储存模块时,数据可以得到一个较细的分类。

进一步地,所述步骤(4)中分类储存好的数据通过管理调度模块进行管理,管理调度模块包括访问调度模块、内容发布模块、存储管理模块和数据备份模块,对用户的访问、系统内容的发布、数据存储和数据备份进行管理,通过数据备份可以保证数据有效时间。

进一步地,所述步骤(5)中云计算系统存储模块通过管理调度模块与应用接口模块连接,通过应用接口下达的数据指令,对云系统的数据进行调度和管理,按照指令逐级展示对应数据。

进一步地,所述步骤(5)所述应用接口模块包括数据存储接口模块、空间租赁接口模块、公共资源接口模块、多用户数据共享接口模块和数据备份查询接口模块。

通过本申请上述实施例,采用了分类式处理和存储,将采集到的数据分类处理和存储,便于后续的查询展示,通过对大量的数据分析、存储管理,可以在大数据中更加准确的展示出用户需要的内容,同时通过数据处理,可以对数据进行分析挖掘,从而可以展示更加深层的数据,也可以提高数据的关联度,解决了现有的云计算系统的数据处理方法在处理数据时数据分类不清晰的问题,使得云计算系统中的数据处理后分类更加明确,从而使得用户在数据检索完成后,会得到相关度较高的数据内容,通过虚拟化技术可以帮助用户快速了解所需内容,提高了数据的检索效率。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其它的附图。

图1为本申请一种实施例的流程示意图。

具体实施方式

为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。

需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

在本申请中,术语“上”、“下”、“左”、“右”、“前”、“后”、“顶”、“底”、“内”、“外”、“中”、“竖直”、“水平”、“横向”、“纵向”等指示的方位或位置关系为基于附图所示的方位或位置关系。这些术语主要是为了更好地描述本申请及其实施例,并非用于限定所指示的装置、元件或组成部分必须具有特定方位,或以特定方位进行构造和操作。

并且,上述部分术语除了可以用于表示方位或位置关系以外,还可能用于表示其他含义,例如术语“上”在某些情况下也可能用于表示某种依附关系或连接关系。对于本领域普通技术人员而言,可以根据具体情况理解这些术语在本申请中的具体含义。

此外,术语“安装”、“设置”、“设有”、“连接”、“相连”、“套接”应做广义理解。例如,可以是固定连接,可拆卸连接,或整体式构造;可以是机械连接,或电连接;可以是直接相连,或者是通过中间媒介间接相连,又或者是两个装置、元件或组成部分之间内部的连通。对于本领域普通技术人员而言,可以根据具体情况理解上述术语在本申请中的具体含义。

需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。

本实施例中的数据处理方法可以适用于计算机主机,例如,在本实施例提供了如下一种方便移动的计算机主机,本实施例中的数据处理方法可以用于一种方便移动的计算机主机。

包括计算机主机,所述计算机主机的正面上并且靠近计算机主机的端部开设有USB接口,所述USB接口的右侧并且位于计算机主机的正面上设置有扬声器插孔,所述扬声器插孔的右侧并且位于计算机主机的正面上设置有电源按键,所述电源按键的右侧并且位于计算机主机的正面上设置有指示灯,所述计算机主机的左侧壁中心处均匀开设有散热孔,所述计算机主机的底部开设有螺纹孔,所述螺纹孔连接有万向轮组件,所述万向轮组件包括螺纹杆和万向轮,所述螺纹杆垂直连接在万向轮的端面中心处,所述螺纹杆连接在螺纹孔的内部,所述计算机主机的端面上并且位于计算机主机背面的边缘处开设有把手放置槽,所述把手放置槽的内部并且位于计算机主机上安装有伸缩把手,所述伸缩把手的端部设置有伸缩把手控制按键,所述USB接口、扬声器插孔、电源按键、指示灯分别通过导线电性连接在计算机主机内部中的控制主板上,所述散热孔基于计算机主机为轴线对称设置,所述螺纹孔开设四个并且分别开设在计算机主机底部的四角处,四个所述螺纹孔对应连接有四个万向轮组件,所述螺纹杆与螺纹孔的连接方式为螺纹连接并且可拆装,所述万向轮采用可锁紧万向轮,所述伸缩把手为拉箱上的伸缩把手。

当然本实施例也可以用于其他计算机主机。在此不再一一赘述,下面对本申请实施例的数据处理方法进行介绍。

请参阅图1所示,一种用于云计算系统的数据处理方法,所述云计算系统的数据处理方法包括一下步骤:

(1)采集数据并传输至云计算系统;

(2)对采集到的数据进行处理;

(3)将处理后的数据分类储存;

(4)对存储的数据进行管理和调度;

(5)根据用户个性化需要展示对应数据。

所述步骤(1)中通过终端收集设备对进行大量的数据采集,并将采集后的数据直接传输至云计算系统的数据采集模块,此时云计算系统中的数据采集模块对数据进行初步分类,数据采集模块接收到数据后,按照初步识别对收集的大量数据进行初级分类。

所述步骤(1)中将采集来的数据分为文字资料、音频、视频、图片和位置信息五大类,并将对应的数据内容传输至文字资料模块、音频模块、视频数据模块、图片信息模块和位置信息模块,并对分类后的数据进行处理。

所述步骤(2)中的数据处理包括数据预处理和数据解析,数据预处理包括解码处理、数据填充处理和噪音清洗处理。

所述步骤(2)中的数据解析包括拆分单元、映射单元、输出单元和合并储存单元,对分类后的数据进行拆分、映射和合并处理,数据拆分是指把逻辑上是统一整体的数据分割成较小的、可以独立管理的物理单元进行存储,以便于重构、重组和恢复,以提高创建索引和顺序扫描的效率,数据映射涉及从一个数据库将数据字段匹配到另一个数据库的过程,是ETL流程的重要组成部分,可促进数据迁移、数据集成和其他重要的数据管理任务,数据整合是把收集到的不同数据、整理、清洗,转换后加载到一个新的数据源,为数据消费者提供统一数据视图的数据集成方式。

所述步骤(2)中将分类后的数据分别对应进行数据预处理和数据解析处理后,传输至存储模块,将文字资料模块、音频模块、视频数据模块、图片信息模块和位置信息模块终的数据进行对应的拆分、映射等处理,其中视频数据模块中包含部分音频数据。

所述步骤(3)中数据储存模块包括一级存储模块、二级存储模块和三级存储模块,并按照上下位进行分离,二级存储模块包含三级存储模块,一级存储模块包括二级存储模块,到达三级储存模块时,数据可以得到一个较细的分类,分级按照人类日常需要进行分类,按照上下级包含式进行分类,依次递进后,可以快速准确的查找到所需的数据,每个级别的数据中包含对应级别的数据关键词。

所述步骤(4)中分类储存好的数据通过管理调度模块进行管理,管理调度模块包括访问调度模块、内容发布模块、存储管理模块和数据备份模块,对用户的访问、系统内容的发布、数据存储和数据备份进行管理,通过数据备份可以保证数据有效时间,通过访问调度模块识别用户访问的指令,并识别指令,按照指令调度对应级别的数据,并展示对应级别的数据,并优先展示关键度高的相关数据,然后根据系统的需要发布内容,同时对数据的访问量判断数据的关键度,到达对应关键度后,对相关数据进行备份保持。

所述步骤(5)中云计算系统存储模块通过管理调度模块与应用接口模块连接,通过应用接口下达的数据指令,对云系统的数据进行调度和管理,按照指令逐级展示对应数据,通过管理调度模块判断访问口的位置来源,并访问来源提供相关度高的关键词,管理调度模块在存储模块和接口模块之间,将存储模块中的内容调度至接口模块并展示。

所述步骤(5)所述应用接口模块包括数据存储接口模块、空间租赁接口模块、公共资源接口模块、多用户数据共享接口模块和数据备份查询接口模块,判断数据访问时的来源,如公共资源系统的访问词会根据该公共资源的对应的服务内容,提供相关数据内容,多用户数据共享接口则可以提供更加广泛的相关数据。

涉及到电路和电子元器件和模块均为现有技术,本领域技术人员完全可以实现,无需赘言,本申请保护的内容也不涉及对于软件和方法的改进。

以上所述仅为本申请的优选实施例而已,并不用于限制本申请,对于本领域的技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

8页详细技术资料下载
上一篇:一种医用注射器针头装配设备
下一篇:点云存储方法、装置、设备及存储介质

网友询问留言

已有0条留言

还没有人留言评论。精彩留言会获得点赞!

精彩留言,会给你点赞!