kafka-connect——数据导入导出——shell脚本监控connect集群

目录

1、配置文件:

2、代码:

3、配置参数说明:

4、使用注意事项:


shell脚本监控connect集群代码如下:

1、配置文件:

ipAddressAndPorts=192.168.0.141:8083
[email protected]
sendEmailTitle=测试kafka-connect异常标题
sendEmailContent=测试kafka-connect异常内容。

2、代码:

注意:不同linux设备的sh路径可能不同,需通过which sh查看sh的绝对路径修改即可。

#!/bin/sh
#防止中文乱码
export LANG="zh_CN.UTF-8"
export LC_ALL="zh_CN.UTF-8"

#db_backups_conf.txt文件路径
db_backups_conf="/data/shell/check_kafka_connect_conf.txt"

#判断文件是否存在
if [ -f "${db_backups_conf}" ];then
	
	echo $(date +'%Y-%m-%d %H:%M:%S')" 发现文件配置信息文件存在"

	#获取等号前内容,作为map中的Key值
	dbArrOne=($(awk -F'[=]' '{print $1}' ${db_backups_conf} ))
	
	#获取等号后内容,作为map中的value值
	dbArrTwo=($(awk -F'[=]' '{print $2}' ${db_backups_conf}))

	#创建一个空map
	declare -A map=()
	
	#通过循环,将db_backups_conf配置文件中的信息存储在map中
	for((i=0;i<${#dbArrOne[@]};i++))
	do
		map[${dbArrOne[i]}]=${dbArrTwo[i]}
	done	

	#获取要监测集群节点IP和端口号组合的字符串
	ipPortsStr=${map["ipAddressAndPorts"]}
	
	#获取收件人的邮件账号的字符串
	semdEmailTo=${map["semdEmailTo"]}
	
	#获取默认的字符串分隔符
	old_ifs="$IFS"
	
	#设置字符串分隔符为逗号
	IFS=","

	#将要备份的索引名称value值的字符串进行分隔,获取一个数组
	ipPortArr=($ipPortsStr)
	
	#将收件人的邮件账号value值的字符串进行分隔,获取一个数组
	semdEmailToArr=($semdEmailTo)

	#将字符串的分隔符重新设置为默认的分隔符
	IFS="$old_ifs"
	
	
	#定义一个是否需要发送异常提醒邮件变量
	isSendEmailStr=0
	
	#定义一个出现异常集群节点ip和端口号存储的变量
	errorIpPort=""
	
	{
	
		#遍历,
		for ipPort in ${ipPortArr[@]};
		do
		
			#检测访问地址是否有效
			esStatus=$(curl -s -m 5 -IL http://${ipPort}|grep 200)
			if [ "$esStatus" == "" ];then
			
				echo $(date +'%Y-%m-%d %H:%M:%S')" kafka-connect地址访问异常:"${ipPort}
				isSendEmailStr=1
				errorIpPort=${errorIpPort}""${ipPort}","
			
			fi
			
		
		done
		
	} || {
		isSendEmailStr=1
	}
	

	#判断命令执行是否有异常,如果有异常就发送邮件
	if [ ${isSendEmailStr} == "0" ];then
			echo $(date +'%Y-%m-%d %H:%M:%S')" 执行kafka-connect集群节点监测全部正常"
		else 
			echo $(date +'%Y-%m-%d %H:%M:%S')" 执行kafka-connect集群节点监测有异常,开始发送邮件通知管理员"
			
			#遍历收件人的邮箱地址,逐个发送邮件
			for email in ${semdEmailToArr[@]};
			do
				echo $(date +'%Y-%m-%d %H:%M:%S')" 开始发送邮件:"${email}

				echo ""${map["sendEmailContent"]}",异常节点信息如下:"${errorIpPort} | mail -s ""${map["sendEmailTitle"]} ${email}
			done
			
			echo $(date +'%Y-%m-%d %H:%M:%S')" 执行kafka-connect集群节点监测有异常,成功发送邮件通知管理员"
	fi
	
	echo $(date +'%Y-%m-%d %H:%M:%S')" 脚本执行完毕"


else
	echo "文件不存在"
fi

3、配置参数说明:

参数意义如下:
ipAddressAndPorts=值为kafka-connect节点浏览器访问IP地址和端口号,如果是多个节点用英文逗号分隔
semdEmailTo=收件人邮箱,多个收件人邮箱用逗号隔开
sendEmailTitle=测试邮件主题(文本内容中一定不能包含=)
sendEmailContent=测试邮件内容(文本内容中一定不能包含=)

4、使用注意事项:

使用注意事项:
1、默认的是.sh、.txt文件都要放在/data/shell脚本下,如果放置的路径变了,需要修改.sh中读取.txt配置文件的路径
2、对于不同的Linux环境下,要修改check_kafka_connect_conf.txt文件中的配置信息,比如filePath的路径等信息
3、备份异常发送邮件提醒采用的是mail,运行的linux上提前先安装好mail并配置到mail.rc发送邮件的信息才可以。
发布了131 篇原创文章 · 获赞 23 · 访问量 1万+

猜你喜欢

转载自blog.csdn.net/LSY_CSDN_/article/details/103749353