浅析python 定时拆分备份 nginx 日志的方法

浅析Python定时拆分备份Nginx日志的方法，可以分为以下几个步骤：

1. 确定日志拆分方式

可以根据需要选择按时间或按大小拆分日志。按时间拆分可以简单地根据日期拆分，例如每天、每周或每月。按大小拆分可以设置每个日志文件的最大大小，当超出后新开一个日志文件。

2. 编写Python脚本

下面是一个基本的Python脚本，用于按日期拆分Nginx日志文件：

import os
import shutil
import datetime

DATE_FORMAT = '%Y%m%d'
NGINX_LOG_DIR = '/usr/local/nginx/logs'
BACKUP_DIR = '/data/nginx/logs'

today_str = datetime.datetime.now().strftime(DATE_FORMAT)
log_file = os.path.join(NGINX_LOG_DIR, 'access.log')
backup_file = os.path.join(BACKUP_DIR, 'access-%s.log' % today_str)

shutil.copy(log_file, backup_file)
open(log_file, 'w').close()

在该脚本中，首先定义了拆分时间的格式和Nginx日志文件的目录，以及备份文件的目录。然后通过datetime.datetime.now().strftime(DATE_FORMAT)获取当前日期字符串，拼接出备份文件名。

接着，使用shutil.copy函数将原日志文件备份到指定目录，并使用open(log_file, 'w').close()清空原日志文件，实现拆分Nginx日志的目的。

3. 设置定时任务

最后需要将Python脚本设置为定时任务，在每隔一段时间执行该脚本。可以使用Linux自带的cron服务实现，编辑crontab文件并添加如下内容：

0 0 * * * python /path/to/script.py

上述内容表示每天凌晨0点执行Python脚本。

示例1：按日期拆分Nginx日志文件

例如，要将每天的Nginx日志文件按日期拆分，并存储在/data/nginx/logs目录中。则可以按照以上步骤完成。

示例2：按大小拆分Nginx日志文件

如果要设置每个Nginx日志文件的最大大小为100MB，并按照文件大小拆分，可以使用os.stat函数获取文件大小，并在拆分时判断是否超过了最大值。

import os
import shutil
import datetime

MAX_LOG_SIZE = 100 * 1024 * 1024
NGINX_LOG_DIR = '/usr/local/nginx/logs'
BACKUP_DIR = '/data/nginx/logs'

log_file = os.path.join(NGINX_LOG_DIR, 'access.log')
if os.stat(log_file).st_size > MAX_LOG_SIZE:
    backup_file = os.path.join(BACKUP_DIR, 'access-%s.log' % datetime.datetime.now().strftime('%Y%m%d%H%M%S'))
    shutil.copy(log_file, backup_file)
    open(log_file, 'w').close()

在该脚本中，定义了最大日志文件大小为100MB，然后检查当前日志文件的大小是否超过了最大值。如果超过，则按照日期和时间拼接出备份文件名，并使用shutil.copy函数将原日志文件备份到指定目录，最后清空原日志文件。

通过以上步骤，即可实现按大小拆分Nginx日志文件备份的功能。