大数据时代下的教育管理信息化建设的实践探究

1、    大数据时代下的教育管理信息化建设的实践探究    杜艳华摘要：大数据时代信息化管理模式发展对我国各行各业均时刻产生着重要影响，尤其对于教育信息管理而言，大数据信息管理系统的应用使教育信息的管理更为规范，同时为现代化教育信息管理体系的形成创造了有利条件，使信息化管理工作的开展能够与教育信息化管理机制的发展方向保持一致，进而帮助教育机构及教育管理问题解决诸多教育信息管理不完善问题。关键词：大数据；教育；管理；信息；建设近年来，教育信息管理系统在各地区教育部门及教育机构的有效应用，使教育信息的管理工作开展更符合教育信息管理的数据化发展需求，使信息在管理

2、安全性、管理功能性及管理效率等多个方面均得以有效提升，为更好的及更合理的运用信息化管理系统开展教育工作创造了良好环境，是现代教育信息化体系建设的重要内容。一、学校信息资源现状分析随着学校软、硬件资源的增添，产生大量的数据，数据包含结构化、半结构化和非结构化的数据，大致包括以下来源：1.数字化软件系统数字化软件系统是教育信息管理系统运行的重要基础，也是管理教育信息内容的重要体系，在实际应用方面，要根据教育机构对数字化软件的使用需求，对软件的功能性內容进行优化，使数字化软件系统能够在实际应用方面发挥良好效果。2.数据管理系统数据管理系统主要用于对数据信息的输入及输出进行管理，并对相关文件进行加密处

3、理，提高系统数据储存的安全性。数据管理系统主要由多种文档格式构成，记录管理信息较为广泛，因此是学校信息资源系统建立的核心内容，对提高数据储存管理效率具有良好的帮助作用。3.数据存储数据存储系统主要由颗粒芯片及机械化磁盘构成，多用于对数据文件的有效管理，由于学校信息管理系统涵盖的内容较为全面，因此数据存储的数量也相对较多，做好数据储存管理将有效的解决数据存储速度过慢及数据丢失等相关问题，使数据存储的可靠性得以进一步提升。4.智能设备信息化系统智能设备主要包括智能电话、智能仪表及智能信息处理等系统，智能设备的应用将进一步提高学校信息化管理设备的智能化及自动化水平，降低对人员的实际依赖性，通过智能分

4、类及对相关问题的处理，实现设备的智能化运行从而有效的提高信息化管理系统的实际效率。5.聚合的数据提供程序聚合数据主要由程序供应系统及程序处理感应器构成，由于现代化信息管理系统所汇集的信息管理格式种类繁多，同时信息管理存在信息重复及错误信息等问题，因此在聚合数据程序控制方面，能够有效的对相关信息进行筛选，将可用的信息内容进行归类，并将错误信息进行处理及纠正，从而保障信息数据提供的准确性。6.硬件资源数据硬件资源数据系统主要由计算机设备、计算机服务器、交换机及路由器等，通过硬件系统的串联实现对数据信息的管理与控制，从而提高数据信息使用管理的安全性与稳定性。由于现代化信息管理体系构成较为复杂，因此在

5、实际应用方面，硬件资源数据构成通常较多，同时包括了无线控制设备及门禁设备等，出于对信息硬件设备应用的安全化考虑，部分硬件资源数据设备有防火安全控制系统。7.其它数据各地区对于数据管理系统的应用需求不同，因此基础设备也有较大差异，现阶段视频管理资源及防御管理设备是主要的附带管理资源之一，由于部分地区未能形成良好的网络管理体系，因此对视频资源的运用也不够广泛，难以充分的发挥出视频资源使用效益。二、大数据技术及实践实验平台采集到的数据包含应用系统数据、网络访问日志、各个网络设备的snmp trap信息、各个核心设备以及安全设备syslog日志（包括ids、wireless ac、负载均衡设备、路由器

6、、防火墙、上网行为审计设备等）、服务器访问日志、snort信息、sflow数据和netflow数据以及端口镜像数据。网络中的syslog日志和网络访问日志将会是一个海量的数据，考虑到日志更新频繁和海量数据的特点，实验环境在linux服务器上安装并启动的程序有tomcat8，hadoop2.6.1，zookeeper3.4.6，hbase0.98.5，flume1.5。选择了flume+hbase的采集和存储方案，flume最早是cloudera提供的日志收集系统，flume可以在日志系统中定制各类数据发送方，用于收集数据，flume提供对数据进行简单处理，并写到各种数据接受方，flume可以从

7、console（控制台）、rpc（thrift-rpc）、text（文件）、tail、syslog日志系统、exec（命令执行）等数据源上收集数据。hbase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统。实验平台以tomcat为web服务器，通过flume实时监控网络的日志文件并将新增日志收集、清洗并保存到hbase中，供spark等分布计算框架分析使用。计算层主要包括离线数据处理、近似实时批处理、实时流处理。其中：离线数据处理采用hadoop的分布式存储和并行计算模式mapreduce编程模型。hadoop是一个分布式系统的基础架构，非常适合对大数据集进行离线计算。通过读取数据，对

8、数据进行映射（map），使用某个键值对数据进行重排，然后对数据进行化简（reduce）得到最终的输出。该功能模块采用聚类分析、分类计算和关联规则等算法对网络中的日志进行离线分析。在海量数据下，数据冗余模块往往成为整个系统的瓶颈，实验使用了内存nosql来处理冗余原始数据，并采用尽可能多的节点进行处理冗余信息。网络流的实时处理采用storm和spark框架模型进行处理，实时处理消息更新数据库，可对数据流做查询，计算时将结果以流的形式输出给hive/pig进行聚类分析、拟合、协同过滤、展示。三、结语大数据时代下的信息管理建设要教育信息管理要求对核心基础，通过合理的进行信息管理系统设计，提高信息管理系统在教育管理方面的实际应用有效性，并为相关的教育机构提供有效的信息管理帮助，使大数据时代下的教育信息管理更符合相关教学工作开展的基本要求，从而提高信息化管理建设的实际效益，为未来阶段更好的运用信息管理系统进行规范化信息管理奠定良好根基。参考文献：1程晓光.大数据时代下高校教育管