2023学年完整公开课版寻址机制

寻址机制2学习任务了解RegionServer的主要功能了解老的Region寻址方式初步探索新的Region寻址方式了解读写过程3知识目标RegionServer的主要功能新老Region的

寻址方式读写过程01能力目标掌握RegionServer的主要功能了解新老Region的寻址方式

理解读写过程02学习目标4目录01RegionServer简介02RegionServer的主要功能03老的Region寻址方式03新的Region寻址方式03读写过程5RegionServer简介HRegionServer是HBase中最主要的组件，负责table数据的实际读写，管理Region。在分布式集群中，HRegionServer一般跟DataNode在同一个节点上，目的是实现数据的本地性，提高读写效率。6RegionServer的主要功能定期向Master汇报RS的情况，包括RS内存使用状态、在线状态的Region等信息管理Region，执行Flush、Compaction、Open、Close、Load等操作管理WAL执行数据插入、更新和删除操作Metrics：对外提供了衡量HBase内部服务状况的参数内置HttpServer，提供访问RS的界面7老的Region寻址方式在HBase-0.96版本以前，HBase有两个特殊的表，分别是-ROOT-表和.META.表，其中-ROOT-的位置存储在ZooKeeper中，-ROOT-本身存储了.META.Table的RegionInfo信息，并且-ROOT-不会分裂，只有一个Region。而.META.表可以被切分成多个Region。读取的流程如下图所示：8老的Region寻址方式Client请求ZooKeeper获得-ROOT-所在的RegionServer地址Client请求-ROOT-所在的RS地址，获取.META.表的地址，Client会将-ROOT-的相关信息cache下来，以便下一次快速访问Client请求.META.表的RegionServer地址，获取访问数据所在RegionServer的地址，Client会将.META.的相关信息cache下来，以便下一次快速访问Client请求访问数据所在RegionServer的地址，获取对应的数据步骤：9新的Region寻址方式2层结构其实完全能满足业务的需求，因此0.96版本以后将-ROOT-表去掉了。如下图所示：10新的Region寻址方式Client请求ZooKeeper获取.META.所在的RegionServer的地址。Client请求.META.所在的RegionServer获取访问数据所在的RegionServer地址，Client会将.META.的相关信息cache下来，以便下一次快速访问。Client请求数据所在的RegionServer，获取所需要的数据。（1）访问路径变成了3步11新的Region寻址方式提高性能2层结构已经足以满足集群的需求（2）总结去掉-ROOT-的原因有如下2点12新的Region寻址方式第一层是保存zookeeper里面的文件，它持有rootregion的位置。第二层rootregion是.META.表的第一个region其中保存了.META.表其它region的位置。通过rootregion，我们就可以访问.META.表的数据。.META.是第三层，它是一个特殊的表，保存了hbase中所有数据表的region位置信息。（3）系统如何找到某个rowkey所在的regionbigtable使用三层类似B+树的结构来保存region位置。13读写过程客户端通过zookeeper以及root表和meta表找到目标数据所在的regionserver联系regionserver查询目标数据regionserver定位到目标数据所在的region，发出查询请求region先在memstore中查找，命中则返回如果在memstore中找不到，则在storefile中扫描读请求过程14读写过程client向regionserver提交写请求regionserver找到目标regionregion检查数据是否与schema一致如果客户端没有指定版本，则获取当前系统时间作为数据版本将更新写入WALlog、Memstore判断