오브젝트 스토리지를 이용한 데이터 백업 방법

S3cmd를 이용하여 카페24 클라우드 오브젝트 스토리지로 데이터(db 포함) 백업을 설정합니다. 해당 스크립트는 OS(Centos/ubuntu/Rocky/Almalinux) 구분없이 적용 가능합니다.

triangle-exclamation

1. 사전 준비

(1) 오브젝트 스토리지 신청 및 S3cmd 설치

아래 매뉴얼을 참고하여 오브젝트 스토리지 신청 및 S3cmd 설치가 선행되어야 합니다.

[오브젝트 스토리지 신청]arrow-up-right [S3cmd 설치 및 연동]arrow-up-right

(2) 시간 동기화

백업 스크립트를 cron 서비스에 등록하여 일정 주기로 실행할 수 있습니다. 때문에 서버 OS내 시간과 실제 시간간 동기화가 이루어져야 설정한 시간에 백업이 진행됩니다. 시간 동기화는 아래 매뉴얼을 참고하시기 바랍니다.

[OS 시간 동기화]arrow-up-right

(3) 디스크 여유 공간 체크

백업이 진행되는 동안 OS내 생성된 데이터를 오브젝트 스토리지로 업로드후 삭제됩니다.

원활한 백업 및 서비스 운영을 위해 1일치 백업 데이터의 여유 공간을 확보하시기 바랍니다.

아래 명령어(df -Th)를 통해 디스크 여유 공간 확인이 가능합니다.

2. 백업 스크립트 동작 방식

백업 스크립트의 동작 방식은 rsync 및 mysqldump 명령어를 통해 데이터 및 DB를 로컬 호스트에 백업후 백업된 데이터를 s3cmd 명령어를 통해 오브젝트 스토리지로 데이터 업로드됩니다.

DB 백업의 경우 database 단위 및 table 단위로 각각 백업 진행됩니다.

백업 스크립트 동작 순서

data 백업만 원하실 경우, 스크립트내 "_MysqlDump" 를 주석 처리 DB 백업만 원하실 경우, 스크립트내 "_Data_Backup"를 주석 처리 하시기 바랍니다.

3. 백업 스크립트 다운로드

circle-info

2 종류의 백업 스크립트를 제공하며 각 스크립트는 고객님 서비스 환경에 맞게 커스텀하여 이용해 주시기 바랍니다.

(1) 백업 스크립트 다운로드

(2) mysql root 패스워드가 포함된 백업 스크립트

스크립트내 mysql root 패스워드를 지정해야 합니다. 보안상 권장되지 않는 방법이며 스크립트를 실행하면 아래와 같은 warning 메세지가 출력됩니다. 보안상 권장되지 않는 방법이나 서비스 환경으로 인해 "mysql_config_editor" 유틸리티 설정이 불가할 경우 이용 가능합니다. (mysql 5.6.6 미만, mariadb 10.2.4 미만 버전에선 mysql_config_editor 유틸리티 제공 안함)

(3) mysql root 패스워드가 포함되지 않는 백업 스크립트

스크립트에 mysqldump 명령어 실행시 -p(-- password) 옵션을 사용하여 비밀번호를 직접 입력하여 DB 데이터를 추출하는 방식은 보안상 취약하여 권장하는 방식이 아닙니다. (스크립트가 실행되면서 다른 사용자가 명령어 히스토리나 프로세스 목록을 모니터링하고 있을 경우 패스워드가 노출될 우려가 있습니다.)

하여 "mysql_config_editor" 유틸리티를 이용하여 난독화된 인증 자격 증명을 저장하고 "-p" 옵션이 아닌 "--login-path=root" 옵션으로 변경하여 접속하는 방식을 권장합니다.

아래 명령어는 "mysql_config_editor" 유틸리티를 이용한 mysql 접속 방법입니다.

위와 같이 "mysql_config_editor" 유틸리티 설정이 완료하셨을 경우, "--login-path=root" 옵션을 이용하여 mysql 접속이 가능하며 "mysql root 패스워드가 포함되지 않는 백업 스크립트" 사용이 가능합니다.

4. 백업 스크립트 설정

다운로드한 백업 스크립트를 파일 편집기(vi 또는 nano)를 이용해 변수 설정 및 로그 경로 확인(수정)이 가능합니다.

(1) 변수 설정

위와 같이 파일 편집기로 스크립트를 확인해 보면 아래와 같이 변수를 설정할 수 있습니다.

variable
Description

MYSQL_PW="####"

mysql root 패스워드가 포함된 스크립트를 사용할때 설정 ####안에 mysql root 패스워드 입력

DUMP_OPTION=""

mysqldump시 적용되는 옵션으로 기본값은 아래와 같음 --max-allowed-packet=1024M --add-drop-table --add-drop-database --single-transaction

SRC_DIR=""

data backup 진행시 백업되는 경로. 기본값 : /home

BACKUP_DIR=""

백업 데이터가 저장되는 localhost 디렉토리 경로 설정한 디렉토리에 "[백업날짜]_[hostname]" 형식으로 디렉토리 생성 해당 디렉토리를 오브젝트 스토리지에 업로드 기본값 : /home/backup

OBS_BUCKET="###"

localhost에 백업된 데이터를 업로드할 오브젝트 스토리지 버킷명 ###안에 버킷명 입력 (eg. s3://backup)

KEEP_DATE=

오브젝트 스토리지에 백업된 데이터 보관 주기 설정 기본값 : 7일 (date +%Y-%m-%d --date '7 days ago')

(2) 로그

위와 같이 파일 편집기로 스크립트를 확인해 보면 백업시 생성되는 로그 확인이 가능합니다.

variable
Description

LOG_DIR

로그 파일이 저장되는 디렉토리 경로 : ${BACKUP_DIR}/log

LOG_FILE

data 백업(rsync)시 발생되는 로그 경로 : ${LOG_DIR}/rsync_backup.log

OBS_LOG_FILE

오브젝트 스토리지에 데이터 업로드할 때 발생되는 로그 경로 : ${LOG_DIR}/obs_upload.log

START_LOG

백업 시작 시간 로그 경로 : ${LOG_DIR}/backup_start.log

END_LOG

백업 완료 시간 로그 경로 : ${LOG_DIR}/backup_end.log

5. cron 스케줄 등록

cron 서비스에 스케줄 등록 방법은 아래와 같습니다.

스케줄 등록후 cron 서비스 재시작하여 적용해 줍니다.

triangle-exclamation

스크립트 소유자를 root 계정으로 다운로드하였기 때문에 root 계정에 대하여 실행 권한을 부여합니다.

Last updated