Unix & Linux

RSYNC 용법

LEEHANDS 2020. 11. 30. 00:57
반응형

소개

rsync 는 Remote Sync 의 약자로 samba 의 핵심 개발자인 Andrew Tridgell 이 만든 두 개의 site 간의 file & directory 의 동기화를 위한 Unix용 유틸리티이다. 

전송시에 네트웍 대역폭을 최소화하는 delta encoding algorithm 을 구현하여 rcp 나 scp 보다 훨씬 빠르고 효율적으로 site 간의 데이타를 동기화한다.

rsync는 client와 server 프로그램이 모두 포함되어 있으며 server 로 구동시 TCP의 873 포트를 사용한다. server 구동시 SSH 나 RSH 같은 Remote Shell protocol 기반에서 동작할 수도 있으므로 ssh 기반으로 rsync 를 사용하면 방화벽 오픈을 할 필요가 없이 편리하게 사용할 수 있다.(SSH 추천)

주요 용도로는 전통적인 rcpscp를 대치하는 용도로 사용할 수 있으며 원격 사이트 미러링(Remote Site mirroring), 데이타 백업(data backup) 등의 용도로도 사용할 수 있다.

용법

 rsync 는 다음과 같은 문법으로 사용한다.

rsync options source destination

Copy

주요 옵션은 다음과 같다.

  • -v: verbose 자세한 정보 출력
  • -r : 재귀적으로 하위 디렉터리 까지 복사(단 전송시 타임스탬프나 permission을 보존하지 않는다)
  • -a : archive mode. -r, -t(타입스탬프 보존), -l (심볼릭 링크 보존), -p(permission 보존), -g(g그룹 보존), -o(소유자 보존 – root 만 가능),  -D(device, special 파일 보존)과 동일하다. 일반적으로 rsync 로 복제시 -a 옵션에 -z 옵션을 추가하면 충분하다.
  • -z : 데이타 압축
  • -h : human-readable, output numbers in a human-readable format

사용

Local 에서 두 개의 디렉터리 복제mysql 의 DB 를 /home/backups/mysql 에 복제 rsync -azvh /var/lib/mysql /home/backupsCopyLocal 파일을 Remote 에 복제Local 의 /root/data 디렉터리를 example.com 의 /home/lesstif/backup 에 복제. 호스트 명(example.com) 뒤에 : 가 빠지면 제대로 동작 안 하니 주의해야 한다.$ rsync -avz /home/lesstif/data/ lesstif@example.com:/home/lesstif/backup/ CopyRemote 파일을 Local 에 복제example.com 의 /home/lesstif/data 디렉터리를 local 의  /home/lesstif/backup/  에 복제$ rsync -avz lesstif@example.com:/home/lesstif/data /home/lesstif/backup/ CopyRemote 의 일부만 Local 에 복제백업 대상 폴더에 여러 개의 하위 폴더가 있고 특정 폴더만 백업이 필요할 수 있다.
예로 아래와 같이 src 에 3개의 하위 폴더가 있고 dir1, dir3 만 복제가 필요한 경우$ tree ../src/ ../src/ ├── dir1 │ └── file1 ├── dir2 │ └── file2 └── dir3 └── file3Copy
trailing slash 에 따라 rsync 의 동작이 다른 점을 활용해서 아래와 같이 for 루프를 돌면서 src 의 맨 뒤에 / 를 붙여주면 dir1과 dir3 의 내용만 복제할 수 있다.$ cd src $ for i in dir1 dir3; do rsync -avz lesstif@example.com:$PWD/$i/ /home/lesstif/backup/$i;doneCopy
목적지(destination) 파일이 변경 되었을 경우 덮어 쓰지 않음동기화시 목적지 파일이 수정되었을 경우 rsync 를 수행하면 출발지 파일로 덮어써 버린다. 이 상황을 원치않을 경우 rsync 에 -u 옵션을 추가하여 실행하면 파일이 변경 되었을 경우 덮어쓰지 않는다.$ rsync -avuz lesstif@example.com:/home/lesstif/data /home/lesstif/backup/ Copy
 Remote 의 폴더중 일부만 Local 에 복제아래와 같이 src 에 여러 폴더가 있고 이중에 dir1, dir2 만 복사해야 할 경우가 있다.$ tree ../src/ ../src/ ├── dir1 │ └── file1 ├── dir2 │ └── file2 └── dir3 └── file3Copy
trailing slash 를 활용해서 다음과 같이 src 의 맨 뒤에 / 를 붙여주고 rsync 를 실행하면 된다. $ cd src $ for i in dir1 dir2;do rsync -avz lesstif@example.com:$PWD/$i/ /home/lesstif/backup/$i; doneCopy디렉터리 구조만 복제rsync 에 -d(소문자) 옵션을 추가하면 원본의 디렉터리 구조만 복제하고 안의 파일들은 복제하지 않는다. $ rsync -vd lesstif@example.com:/home/lesstif/ .Copy
 진행 내역 보기–progress 옵션을 추가하면 전송시 진행 내역을 볼 수 있다.$ rsync -avz --progress lesstif@example.com:/home/lesstif/data /home/lesstif/backup/ Copyssh가 22가 아닐 경우 연결보안때문에 SSH 를 다른 포트(예: 10022) 를 사용하는 서버에 연결시 아래와 같이 -e 뒤에 ssh와 연결할 포트를 추가하고 실행하면 된다.$ rsync -avz --progress -e 'ssh -p 10022' lesstif@example.com:/home/lesstif/data /home/lesstif/backup/ Copy특정 확장자만 전송https://stackoverflow.com/questions/11111562/rsync-copy-over-only-certain-types-of-files-using-include-option특정 파일(예: pdf)만 전송할 경우 아래와 같이 include 에 모든 파일을 의미하는 * 를 써주고 그 다음에 전송할 파일 종류(–include=*.pdf) 를 적어준 후에 마지막에 –exclude=* 로 모든 파일을 제외해주면 의도한 대로 동작$ rsync -zarv --prune-empty-dirs --include="*/" --include="*.pdf" --exclude="*" "$from" "$to"Copy
불필요한 파일 제외USB 를 마운트해서 복사할 경우 휴지통이나 미리보기 데이타등의 불 필요한 파일은 –exclude 옵션으로 명시적으로 지정해서 제외해야 한다. 아래 gist 를 참고  여기를 클릭하여 펼치기…
symbolic link 처리심블릭 링크의 경우 link 로 처리(–link)하거나 원본을 따라가서 원본을 복사(-L), 또는 제외(–no-links)하는 3가지 옵션이 있다.rsync -avz --link --progress lesstif@example.com:/home/lesstif/data /home/lesstif/backup/ Copyrsync -avz -L --progress lesstif@example.com:/home/lesstif/data /home/lesstif/backup/ Copyrsync -avz --no-links --progress lesstif@example.com:/home/lesstif/data /home/lesstif/backup/ Copy

-a 옵션 사용시 –no-links, -L, –link 옵션은 -a 뒤에 와야 함
파일이 존재할 경우 덮어쓰기(overwrite)https://unix.stackexchange.com/questions/79678/force-rsync-to-overwrite-files-at-destination-even-if-theyre-newerrsync 는 파일이 목적지에 존재할 경우 생성 시간과 크기를 비교해서 동일할 경우 건너뜀.-I, --ignore-times 옵션을 주면 생성 시간을 확인하지 않으므로 덮어쓰기와 동일한 효과 발생rsync -avz -I --progress lesstif@example.com:/home/lesstif/data /home/lesstif/backup/ Copy

반응형