智慧大数据分析系统解决方案

高校大数据用户分析

高校类似一个小社会,用户群体较多,各部门都存在大数据需求,而关注的内容会有较大的区别。比如校领导关注全校基础数据和总体情况,用于战略决策与发展评估。管理部门关注学生的生活、消费和心理状态。教学部门关注学生成绩情况、教师教学质量和学生满意度等。因此,这些特点决定了高校大数据的应用模块和类型会比较丰富。

l  校领导决策更加科学。

l  教师教学更加便捷教学水平提升

l  学生随时随地个性化学习。

l  家长及时掌握子女在校情况。

l  学校校园环境更加绿色、环保、安全。信息化覆盖范围和服务水平有效提升。教学管理与服务管理更加简单高效,服务水平不断提升。

l  社会更多优质教育资源和科研成果开放共享。

l  国家政策的推动


 大数据管理平台

数据管理平台本着“采集全量数据,进行深度挖掘和分析,为用户提供智能的价值应用”为目标。架构采用基于Hadoop及其生态组件技术,为学校建立分布式大数据中心。为了提供综合的数据挖掘和分析,数据来源需要从结构化数据(教务、学工、迎新等系统中的数据),非结构化数据(上网日志、文件、图片等)和互联网数据(贴吧、微博、论坛等)不同数据类型采集数据,然后对这些数据进行清洗、存储和分析,再通过模型构建及可视化看板系统把数据通过各种形式呈现到用户面前。

架构提供两种计算模式,针对实时性要求不高的则进行离线计算以后为用户呈现。针对要求实时性的场景,则通过Spark Streaming进行实时计算,实时的呈现到用户面前。


智慧大数据体系建设内容

为高校提供“可靠、开放、易扩展”的大数据管理与挖掘平台。智慧大数据本着“采集全量数据,进行深度挖掘和分析,为用户提供智能的价值应用”为目标。架构采用基于Hadoop及其生态组件技术,为学校建立分布式大数据中心。为了提供综合的数据挖掘和分析,数据来源需要从结构化数据(教务、学工、迎新等系统中的数据),非结构化数据(上网日志、文件、图片等)和互联网数据(贴吧、微博、论坛等)不同数据类型采集数据,然后对这些数据进行清洗、存储和分析,再通过模型构建及可视化看板系统把数据通过各种形式呈现到用户面前。针对大数据中心的数据,其它应用可以通过数据开放平台提供的接口使用。

架构提供两种计算模式,针对实时性要求不高的则进行离线计算以后为用户呈现。针对要求实时性的场景,则通过Spark Streaming进行实时计算,实时的呈现到用户面前。学校的主数据质量普遍不是很好,架构提供了对主数据的采集、清洗和共享服务,采用全新的技术、产品和服务,确保学校主数据权威和共享,解决学校一直头痛的问题。

 大数据监控服务

数据平台监控服务功能包括集群状态监控,集群服务器监控,数据池情况分析,数据采集情况,任务运行监控等功能。



Copyright © 2018-2019 shentu828.com. 郑州深途信息科技有限公司 版权所有    豫ICP备18034878号-1