2023学年完整公开课版Accumulo审计日志

Accumulo审计日志Accumulo常用概念0102Accumulo审计和恢复Content目录01

Accumulo常用概念Accumulo常用概念一、简介ApacheAccumulo的是一个高度可扩展的结构化存储，基于谷歌的BigTable。Accumulo是用Java编写的，并在Hadoop分布式文件系统（HDFS），这是流行的ApacheHadoop项目的一部分工作。Accumulo支持高效存储和检索的结构化数据，包括查询范围，并提供支持使用Accumulo表作为输入和输出的MapReduce作业。Accumulo设有自动负载平衡和分区，数据压缩和细粒度的安全标签。Accumulo常用概念二、Accumulo设计1、数据模型Accumulo提供了丰富的数据模型不是简单的键-值存储，但不是完全的关系数据库。数据表示为键-值对，其中键和值是由以下元素：Accumulo常用概念2、体系结构accumulo是一个分布式数据存储和检索系统，因此由一些建筑元件，其中一些许多单独服务器上运行的。大部分的工作确实涉及Accumulo保持一定性能的数据，如组织，可用性和完整性，在许多商品级机。3、组件一个实例的Accumulo包括的许多TabletServers，一个垃圾收集过程中，一台主服务器和多个客户端。Accumulo常用概念4、

tablet服务器TabletServer管理一些子集的所有片（分区表）。这包括接收从客户端中写道，坚持预写日志，写入新的键值对排序在内存中，定期冲洗排序键-值对HDFS中的新文件，并响应来自客户端的读取，形成一个合并排序查看所有键和值从创建和排序的内存中存储的所有文件。TabletServers执行恢复以前的服务器失败，重新应用发现任何写在预写日志平板平板。5、

垃圾收集器Accumulo进程将共享存储在HDFS中的文件。每隔一段时间，垃圾收集器将确定不再需要任何进程的文件，并删除它们。Accumulo常用概念6、master负责检测和响应TabletServer失败的Accumulomaster。它试图以平衡负载分配药片仔细和指导TabletServers的卸载片，必要时跨TabletServer的。

master确保所有分片被分配到每一个TabletServer，并处理表的创建，修改和删除请求从客户。master也协调启动，正常关机和恢复的变化的预写日志tablet服务器时失败。可能会运行多个master。master将选举一个作为master，其他作为备份。Accumulo常用概念02

Accumulo审计和恢复Accumulo审计1、审计

Accumulo处理每写一组日志文件。默认情况下，这些被发现下

$ACCUMULO/logs/。Accumulo审计2、恢复

关闭AccumuloTabletServer故障或错误的情况下，有些突变可能不会一直未成年人正确压缩到HDFS。在这种情况下，将自动重新Accumulo这种突变的预写日志时，片从故障服务器重新分配由主，在一个单一的TabletServer故障的情况下，或下一次启动Accumulo，在发生故障时，关机期间。

要求预写日志记录器复制到HDFS进行恢复。复制日志，他们还整理，使平板电脑可以很容易地找到他们失踪的更新。在Accumulo监控状态页显示每个文件的复制/排序状态。一旦恢复完成涉及任何片应回到``在线“状态，到那时，这些药片将无法给客户。Accumulo客户端库