python运维篇---实时查看liunx后台日志
linux-dash
A beautiful web dashboard for Linux
项目地址:https://gitcode.com/gh_mirrors/li/linux-dash
免费下载资源
·
The reason
为啥要用python去做实时监控linux后台日志呢,其实是因为在元旦监控生产环境时发现的诟病,服务器太多导致xshell一开窗口要开好多个,而现在又没有实现自动化运维的功能,不仅是这样,若想要查看某台服务器上的日志还需要先ctrl + c终止终端(terminal),而查看筛选条件也需要重复性的大量操作,于是想到有没有可以用python写个脚本连接到各台服务器上,监控的同时直接把日志写入到本地上。有了想法,实现只是时间问题咯。。。
environment
- python3
- linux的各种ip以及对应的账号密码
- 第三方库:paramiko
这里要说一下,windows下借助的第三方库是paramiko这个加密及SSH功能的强大库,推荐再有网的情况下进行安装:
pip install paramiko
若无网环境安装,离线的话非常麻烦,因为此库依赖实在是太多了,之前有在linux的离线环境下安装,由于各种原因导致未成功。。。
show me the code
废话不多说,直接上码,注释写的很详细,老规矩不多讲:
import time
import paramiko
import select
now_time = time.strftime('%Y-%m-%d %H:%M:%S', time.localtime(time.time()))
now_day = time.strftime('%Y-%m-%d', time.localtime(time.time()))
#方法复用,连接客户端通过不同id进来即可
#这个方法是进行非实时的连接返回,例如ls这样的cmd命令,或者grep这样的命令。。
def link_server_cmd(serverip,user,pwd):
print('------------开始连接服务器(%s)-----------' % serverip)
client = paramiko.SSHClient()
client.set_missing_host_key_policy(paramiko.AutoAddPolicy())
print('------------开始认证......-----------')
client.connect(serverip, 22, username=user, password=pwd, timeout=4)
print('------------认证成功!.....-----------')
while 1:
cmd = input('(输入linux命令)~:')
stdin, stdout, stderr = client.exec_command(cmd)
#enumerate这个写法可遍历迭代对象以及对应索引
for i, line in enumerate(stdout):
print(line.strip("\n"))
break
client.close()
#此方法是进行实时返回,例如tail -f这样的命令,本次监控就用的是此方法。
#将实时返回的日志返回到本地
def link_server_client2(serverip, user, pwd):
# 进行连接
print('------------开始连接服务器(%s)-----------' % serverip)
client = paramiko.SSHClient()
client.set_missing_host_key_policy(paramiko.AutoAddPolicy())
print('------------开始认证......-----------')
client.connect(serverip, 22, username=user, password=pwd, timeout=4)
print('------------认证成功!.....-----------')
# 开启channel 管道
transport = client.get_transport()
channel = transport.open_session()
channel.get_pty()
# 执行命令nohup.log.2017-12-30
tail = 'tail -f /xxxx/xxxxx/nohuplogs/nohuplogs20180101.log'
#将命令传入管道中
channel.exec_command(tail)
while True:
#判断退出的准备状态
if channel.exit_status_ready():
break
try:
# 通过socket进行读取日志,个人理解,linux相当于客户端,我本地相当于服务端请求获取数据(此处若有理解错误,望请指出。。谢谢)
rl, wl, el = select.select([channel], [], [])
if len(rl) > 0:
recv = channel.recv(1024)
# 此处将获取的数据解码成gbk的存入本地日志
print(recv.decode('gbk', 'ignore'))
text_save(recv.decode('gbk', 'ignore'), 'tail(' + serverip + ').txt')
#键盘终端异常
except KeyboardInterrupt:
print("Caught control-C")
channel.send("\x03") # 发送 ctrl+c
channel.close()
client.close()
# 文件存储
def text_save(self,content, filename, mode='a'):
# Try to save a list variable in txt file.
file = open(filename, mode)
for i in content:
file.write(i)
file.close()
Result
结果不言而喻呀,当然是成功了,这里因为涉及到隐私问题,就不上传生产的图片结果了,有需要的同学可以亲测一下,通过这次的代码需求,感觉对于自己监控而言,确实是方便了不少,在解决channel管道进行实时传输数据那里费时比较多…..因为对socket编程不是很了解,后续继续看看吧…
GitHub 加速计划 / li / linux-dash
10.39 K
1.2 K
下载
A beautiful web dashboard for Linux
最近提交(Master分支:2 个月前 )
186a802e
added ecosystem file for PM2 4 年前
5def40a3
Add host customization support for the NodeJS version 4 年前
更多推荐
已为社区贡献5条内容
所有评论(0)