一种基于云计算的大数据信息分析系统

文档序号:22818 发布日期:2021-09-21 浏览:20次 >En<

阅读说明:本技术 一种基于云计算的大数据信息分析系统 (Big data information analysis system based on cloud computing ) 是由 王清杰 于 2021-06-18 设计创作,主要内容包括:本发明公开了一种基于云计算的大数据信息分析系统,包括:数据采集单元、预处理单元、数据传输单元,云端服务器和终端,通过数据采集单元将数据采集后发送至预处理单元,预处理单元对数据进行处理,生成偏好数据,将偏好数据通过数据传输单元发送至云端服务器,云端服务器对偏好数据进行检测、标记、分类和分析后,将分析结果通过数据传输单元发送至终端进行显示。(The invention discloses a cloud computing-based big data information analysis system, which comprises: the data acquisition unit sends the data acquisition back to the preprocessing unit, and the preprocessing unit processes the data, generates preference data, sends the preference data to the cloud server through the data transmission unit, and the cloud server detects, marks, classifies and analyzes the preference data, sends the analysis result to the terminal through the data transmission unit and shows.)

一种基于云计算的大数据信息分析系统

技术领域

本发明涉及发数据分析

技术领域

,更具体的说是涉及一种基于云计算的大数据信息分析系统。

背景技术

目前,随着信息化的高速发展,大数据应运而生,大数据技术,指的是一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合,具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。数据多样化的形成主要有两方面的原因:一是数据来源多,有搜索引擎、社交网络、通话记录、传感器等等;二是数据格式多,有结构数据、半结构数据和非结构数据。为了弥补传统方法无法处理如此量大且非结构的大数据的缺陷,人们研究出了云计算,以云计算为基础的信息存储、分享和挖掘手段,可以便宜、有效地将这些大量、高速、多变化的终端大数据存储下来。

但是,各种行业业务系统,产生了大量的行业数据。行业信息不通、数据壁垒保护,让许多系统、信息在各部门地区间重复建设,造成资源利用效率下降、甚至效率极低等现象,形成较大的社会浪费。

因此,如何统计和运用这些数据,这就涉及到大数据的信息分析技术,如何对大数据信息进行高效的分析是本领域技术人员亟需解决的问题。

发明内容

有鉴于此,本发明提供了一种基于云计算的大数据信息分析系统,通过数据采集单元将数据采集后发送至预处理单元,预处理单元对数据进行处理,生成偏好数据,将偏好数据通过数据传输单元发送至云端服务器,云端服务器对偏好数据进行检测、标记、分类和分析后,将分析结果通过数据传输单元发送至终端进行显示。

为了实现上述目的,本发明采用如下技术方案:

一种基于云计算的大数据信息分析系统,包括:数据采集单元、预处理单元、数据传输单元,云端服务器和终端;

所述数据采集单元与所述预处理单元连接,所述数据采集单元将数据采集后发送至所述预处理单元,所述预处理单元对数据进行处理,生成偏好数据,所述预处理单元通过数据传输单元与所述云端服务器连接,将偏好数据通过数据传输单元发送至云端服务器,所述云端服务器对偏好数据进行检测、标记、分类和分析后,将分析结果通过所述数据传输单元发送至终端进行显示。

优选的,所述预处理单元与所述数据传输单元之间还设置有加密单元,将偏好数据进行加密后通过所述数据传输单元发送至云端服务器。

优选的,所述云端服务器内设置有存储单元,包括基础数据库、主题数据库、共享数据库和数据仓库,用于对偏好数据和分析结果进行存储。

优选的,所述云端服务器内设置有数据检测单元、数据标记单元、数据分类单元和数据分析单元,所述数据检测单元用于对数据的有效性进行筛分,并将有效数据输入至数据标记单元;所述数据标记单元用于对有效数据进行标记;所述数据分类单元用于对标记后的数据进行分类整理;所述数据分析单元用于对分类整理后的数据进行统计分析,得出数据分析结果。

优选的,所述数据传输单元包括有线传输和无线传输。

优选的,所述终端包括显示单元和人机交互单元,所述显示单元用于显示分析结果和交互信息,所述人机交互单元用于输入分析需求。

经由上述的技术方案可知,与现有技术相比,本发明公开提供了一种基于云计算的大数据信息分析系统,通过数据采集单元将数据采集后发送至预处理单元,预处理单元对数据进行处理,生成偏好数据,将偏好数据通过数据传输单元发送至云端服务器,云端服务器对偏好数据进行检测、标记、分类和分析后,将分析结果通过数据传输单元发送至终端进行显示。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。

图1附图为本发明提供的系统结构示意图。

图2附图为本发明提供的云端服务器结构示意图。

其中,1为数据采集单元,2为预处理单元,3为加密单元,4为数据传输单元,5为云端服务器,6为终端,51为存储单元,52为数据检查单元,53为数据标记单元,54为数据分类单元,55为数据分析单元。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

本发明实施例公开了一种基于云计算的大数据信息分析系统,包括:数据采集单元1、预处理单元2、数据传输单元4,云端服务器5和终端6;

数据采集单元1与预处理单元2连接,数据采集单元1将数据采集后发送至预处理单元2,预处理单元2对数据进行处理,生成偏好数据,预处理单元2通过数据传输单元4与云端服务器5连接,将偏好数据通过数据传输单元4发送至云端服务器5,云端服务器5对偏好数据进行检测、标记、分类和分析后,将分析结果通过数据传输单元4发送至终端6进行显示。

为进一步优化上述技术方案,预处理单元2与数据传输单元4之间还设置有加密单元3,将偏好数据进行加密后通过数据传输单元4发送至云端服务器5。

为进一步优化上述技术方案,云端服务器5内设置有存储单元51,包括基础数据库、主题数据库、共享数据库和数据仓库,用于对偏好数据和分析结果进行存储。

为进一步优化上述技术方案,云端服务器5内设置有数据检测单元52、数据标记单元53、数据分类单元54和数据分析单元55,数据检测单元52用于对数据的有效性进行筛分,并将有效数据输入至数据标记单元53;数据标记单元53用于对有效数据进行标记;数据分类单元54用于对标记后的数据进行分类整理;数据分析单元55用于对分类整理后的数据进行统计分析,得出数据分析结果。

为进一步优化上述技术方案,数据传输单元4包括有线传输和无线传输。

为进一步优化上述技术方案,终端包括显示单元和人机交互单元,显示单元用于显示分析结果和交互信息,人机交互单元用于输入分析需求。

数据采集单元采集前端数据,其包括视频数据、音频数据、用户使用信息等,并将采集的数据发送至预处理单元,预处理单元对采集的数据进行初步融合、整合,将数据处理为偏好数据,将偏好数据发送至加密单元,加密单元对偏好数据进行加密,确保数据在传输时的安全,加密单元将数据通过数据传输单元传输至云端服务器,其中,数据检测单元在接收到加密信息后,对加密信息解密,并检测数据的完整性将错误或缺失信息删除,将完整信息发送至数据标记单元,数据标记单元对完整信息进行标记,将标记后的信息发送至数据分类单元,数据分类单元根据数据形态,类型,目的及重要度进行分类,分类完成后发送至存储单元进行存储,同时发送至数据分析单元,数据分析单元对数据进行统计分析,得到分析结果。

本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。

对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

6页详细技术资料下载
上一篇:一种医用注射器针头装配设备
下一篇:用于辅助驾驶培训的移动设备、方法和电子设备

网友询问留言

已有0条留言

还没有人留言评论。精彩留言会获得点赞!

精彩留言,会给你点赞!

技术分类