jenkins工具系列 —— 删除Jenkins JOB后清理workspace_jenkin workspace

问题现象分析

Jenkins使用过程中，占用空间最大的两个位置：
1 、workspace： 工作空间，可以随便删除，删除后再次构建时间可能会比较长，因为要重新获取一些资源。
2 、job： 存放的是项目的配置、构建结果、日志等。不建议手动删除，手动删除的后果往往需要重新部署。
选择给项目配置丢弃旧的构建这种模式，保持构建的天数和保持最大构建数根据项目的需要设置。配置完后，需要重新构建一次，才起作用，这时候我们的job空间会大大缩小。

多名开发人员都在同一个jenkins下构建项目，当删除Jenkins JOB后，相应JOB只是在页面上删除，实际workspace不会被删除，所以需要自行处理workspace环境，使用python脚本实现还功能。

解决思路

1、遍历Jenkins节点的workspace，根据路径解析获得Jenkins job name
2、如果job不存在，则删除相应的workspace

脚本实现

使用 python 根据上面的解决思路，解决 workspace 空间占用大的问题

#!/usr/bin/python3

import sys
import argparse
import os
import subprocess
import logging
import configparser
import datetime
import shutil
import jenkins

logging.basicConfig(level=logging.INFO)
logger = logging.getLogger(__file__)

def execute_command(command):
    proc = subprocess.Popen(command, stdout=subprocess.PIPE, stderr=subprocess.PIPE, shell=True)
    stdout, stderr = proc.communicate()
    if stdout:
        for line in stdout.splitlines():
            switchlog.debug(line.decode('utf-8'))
    if stderr:
        for line in stderr.splitlines():
            switchlog.debug(line.decode('utf-8'))

def setup_logger(logger_name, log_file, level=logging.INFO):
    l = logging.getLogger(logger_name)

    for handler in l.handlers[:]:  # make a copy of the list
        l.removeHandler(handler)

    formatter = logging.Formatter('%(levelname)-8s %(message)s')
    fileHandler = logging.FileHandler(log_file, mode='w', encoding='utf-8')
    fileHandler.setFormatter(formatter)
    streamHandler = logging.StreamHandler()
    streamHandler.setFormatter(formatter)

    l.setLevel(level)
    l.addHandler(fileHandler)
    l.addHandler(streamHandler)

if __name__ == "__main__":
    # Set syslog
    setup_logger('slog', 'sfirmware.log', logging.DEBUG)
    slog = logging.getLogger('slog')

    parser = argparse.ArgumentParser(description='workspace create commands')
    parser.add_argument("--username", type=str, default='0')
    parser.add_argument("--password", type=str, default='0')
    parser.add_argument("--path", type=str, default='0')

    args = parser.parse_args()
    print(args.username)
    print(args.password)

    jenkins_url = "http://192.168.118.324:8080/job/version/job/" + args.username
    jenkins_username = args.username
    jenkins_password = args.password
    jenkins_instance = jenkins.Jenkins(jenkins_url, username=jenkins_username, password=jenkins_password)

    jenkins_workspace_path = '/home/dwb/workspace/version/' + args.path

    for dirpath, dirnames, filenames in os.walk(jenkins_workspace_path):
        if dirpath == jenkins_workspace_path:
            for dirname in dirnames:
                jenkins_job_name = dirname
                if not jenkins_instance.job_exists(jenkins_job_name):
                    slog.debug('removing workspace dir of job:' + dirname)
                    shutil.rmtree(os.path.join(dirpath, dirname))
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69

运行命令：

./workspace_clear.py --username ${username} --password ${password} --path ${path_dir}
1