2023学年完整公开课版Ganglia和Hadoop整合

侯磊目录0102安装Ganglia提取配置文件0302配置gmetad和gmond守护进程安装Ganglia1安装Ganglia选择Hadoop集群中的一个节点作为承载Ganglia服务器的节点。gmetad、gweb和rrdtool守护程序将在这个服务器节点上运行。1．将服务器RPM安装在Ganglia服务器上,如下所示(对于RHEL/CentOS系统):#yuminstallganglia-gmond-3.2.0-99ganglia-gmetad-3.2.0-99gweb-2.2.0-992．安装客户端RPM以在所有集群节点上运行gmond进程，如下所示。#yuminstallganglia-gmond-3.2.0-99提取配置文件2提取配置文件安装Ganglia软件后，将配置文件解压缩到configuration_files.zip文件夹中，并将ganglia文件夹中的文件复制到临时目录，如/tmp/ganglia。在作为Ganglia服务器主机的节点上，创建一个名为objects的目录，并将Gangliaobject文件复制到该目录中:#mkdir-p/usr/libexec/ganglia#cp/tmp/ganglia/ganglia/objects/*.*/usr/libexec/ganglia#cp/tmp/ganglia/scripts/*/etc/init.d配置gmetad和gmond守护进程3配置gmetad和gmond守护进程gmond.conf文件由global、cluster、host、upd_receive_channel、tcp_receive_channel和modules等几个部分组成。它们的作用不言而喻，完全可以使用它们的默认值。可以为你认为关键的指标设置自定义指标集合组，例如可用内存(mem_free),系统负载(load_five,每5分钟平均负载)和总可用磁盘空间(disk_free)。可以设置指标集合组，如以下示例所示，该组为空闲内存量组:配置gmetad和gmond守护进程collection_group{collect_every=40time_threshold=300metric{name="mem_free"value_threshold=1024title="FreeMemory“}配置gmetad和gmond守护进程metric{name="bytes_out"value_threshold=4096title="sentBytes"}}配置gmetad和gmond守护进程如前所述，轮询指标数据的gmetad守护进程仅在单个服务器(Ganglia服务器)上运行。可以设置gmetad轮询gmetad.conf文件中的指标数据的数据源，如下所示:#Format:#datasource"servicename"[pollinginterval]address1:portaddreses2:port...配置gmetad和gmond守护进程data_source"NameNode"50ahdoop01.localhost:8658data_source"ResourceManager"50hadoop03.localhost:8664data_source"JobHistoryS