网络安全分析的大数据技术应用论文

Word第第页网络安全分析的大数据技术应用论文【关键词】网络平安;大数据技术;应用

一、引言

随着信息技术的进展，计算机网络技术在各行各业中的应用越来越广泛,随之引发的网络平安问题也开头引起人们的关注。在信息时代，网络平安问题渐渐引起人们的重视，其不但会影响到个人信息的平安，还会影响到国家信息的平安。而随着计算机网络技术的飞速进展，网络平安分析的数据变得越来越冗杂，数量越来越浩大，数量级已从TB迈向PB，涉及到的范围越来越广泛；硬件设备的性能不断提升，对信息的传输速度要求越来越高；且表现出越来越明显的分散化趋势,此外，对网络的攻击行为也变得越来越频繁，要求进一步加强对网络平安的维护。总的来说，现今网络平安分析的难度越来越大,对网络平安管理技术的要求不断提高,在这样的形势下，迫切需要引入新的技术来进行网络平安分析,以满意冗杂环境下对网络平安的需要。2023年，Gartner分析数据说明，将来信息架构的进展必将以大数据技术为主导，其已在多个行业领域获得了广泛的应用。实践说明，大数据技术具有处理速度快、掩盖范围广等优点，能够完全满意网络平安分析中对数据的高效率、大容量的要求。

二、网络平安分析中大数据技术的应用

当前来说，网络平安分析面对的主要对象是日志和流量，同时还有配置、漏洞、访问、用户行为、外部报告等相关联的帮助信息。通过应用大数据技术，将过于分散的日志与流量等汇合起来，采纳更为高效的采集、存储、检索、分析等手段，提升网络平安分析的效率，削减花费的时间。同时，采纳关联分析等技术手段，进一步挖掘平安事故之间的内在联系，对平安漏洞、网络攻击等平安大事进行预报，不断提升网络平安性。〔1〕对于信息的采集。一般来说，可以使用Chukwa等进行数据采集，通过应用分布采集的方法对重要的日志信息进行全面的采集；利用常规的数据镜像的形式，可以实现全流量数据的有效采集。〔2〕对于信息的存储。当前的数据类型及其应用形式越来越冗杂，要想满意全方位的分析需求，并提升检索与分析的效率，就要实行更具针对性的存储手段来存储对应的数据。假如是供检索的原始平安数据，包括日志信息、流量数据等，可采纳GBase、Hbase等列式存储手段，其能够实现快速索引，对数据检索予以准时的响应。假如是进行标准化处理后平安数据，可利用Hahoop分布式进行构架计算，将相应的数据置于对应的节点上，利用Hive等实施脚本分析，对平安数据进行挖掘，得到具体的分析报告，再将结果放置于列式存储中。假如是需要进行实时分析的平安数据，可采纳Storm、Spark等流式计算手段，将相应的数据置于对应的节点上，当数据流经过节点时，自动对其进行分析，得到具体的分析报告，再将结果放置于流式存储中。〔3〕对于信息的检索。对于数据的检索可以采纳基于MapReduce的技术架构，将数据查询的恳求发送到各个节点进行处理，通过分布式的并行计算，进一步提高数据信息的'检索速率。〔4〕对于数据的分析。一般来说，可采纳Storm或者Spark等架构为基础来进行数据的分析，并结合冗杂大事处理方法等。通过以上方法对数据内存、监控信息与关联信息等进行准时的分析，可以有效地捕获到异样行为。非实时数据的分析，可采纳Hadoop架构，结合HDFS分布式存储和MapReduce分布式计算方法，离线统计风险事故、分析缘由、查找攻击源。〔5〕多源数据与多阶段组合的关联分析。大数据技术的应用，可以有效的提升数据分析效率，在较短的时间内对多源异构数据进行分析，关联分析网络系统的平安隐患、关联分析不同时段的攻击行为等。比方，对可能的僵尸网络实施分析，不仅可以结合流量同DNS的访问特性，还可以进一步的拓展数据源，对数据信息进行更加深化的分析。又比方，觉察某台设备被攻击，或者存在平安隐患，通过分析系统中的其他主机是否也患病了同样的攻击，或者存在同样的隐患，从而更早的发觉隐患，予以更加有效的防范。

结束语：

随着计算机网络技术的进展，网络平安问题引起人们更多的重视，面对愈加冗杂的网络环境，为了加强对网络平安的维护，提升数据信息的处理效率，将大数据技术应用到网络平安分析中。讨论说明，大数据技术具有处理速度快、掩盖范围广等特点，能