설치 rclone

rclone 도구는 디렉토리를 동기화하고 스토리지 플랫폼 간에 데이터를 마이그레이션하는 데 유용합니다. 이는 Go 프로그램이며 단일 바이너리 파일입니다.

curl https://rclone.org/install.sh | sudo bash

curl https://rclone.org/install.sh | sudo bash -s beta

IBM COS에 대한 액세스 구성

1. rclone config를 실행하고 새 원격에 대해 n을 선택하십시오.

   No remotes found - make a new one
      n) New remote
      s) Set configuration password
      q) Quit config
      n/s/q> n
   

2. 구성의 이름을 입력하십시오.

   name> <YOUR NAME>
   

3. “s3” 스토리지를 선택하십시오.

   Choose a number from below, or type in your own value
      1 / Alias for a existing remote
        \ "alias"
      2 / Amazon Drive
        \ "amazon cloud drive"
      3 / Amazon S3 Complaint Storage Providers (Dreamhost, Ceph, Minio, IBM COS)
        \ "s3"
      4 / Backblaze B2
        \ "b2"
   [snip]
      23 / http Connection
        \ "http"
      Storage> 3
   

4. IBM COS를 S3 스토리지 제공자로 선택하십시오.

   Choose the S3 provider.
   Enter a string value. Press Enter for the default ("")
   Choose a number from below, or type in your own value
      1 / Amazon Web Services (AWS) S3
        \ "AWS"
      2 / Ceph Object Storage
        \ "Ceph"
      3 / Digital Ocean Spaces
        \ "Digital Ocean"
      4 / Dreamhost DreamObjects
        \ "Dreamhost"
      5 / IBM COS S3
        \ "IBMCOS"
   [snip]
        Provider>5
   

5. False를 입력하여 인증 정보를 입력하십시오.

   Get AWS credentials from the runtime (environment variables or EC2/ECS meta data if no env vars).
   Only applies if access_key_id and secret_access_key is blank.
   Enter a boolean value (true or false). Please Enter for the default ("false").
   Choose a number from below, or type in your own value
      1 / Enter AWS credentials in the next step
        \ "false"
      2 / Get AWS credentials from the environment (env vars or IAM)
        \ "true"
      env_auth>false
   

6. 액세스 키 및 시크릿을 입력하십시오.

   AWS Access Key ID - leave blank for anonymous access or runtime credentials.
     access_key_id> <>
   AWS Secret Access Key (password) - leave blank for anonymous access or runtime credentials.
     secret_access_key> <>
   

7. IBM COS의 엔드포인트를 지정하십시오. 공용 IBM COS의 경우 제공된 옵션에서 선택하십시오. 엔드포인트에 대한 자세한 정보는 엔드포인트 및 스토리지 위치를 참조하십시오.

   Endpoint for IBM COS S3 API.
   Choose a number from below, or type in your own value
      1 / US Cross Region Endpoint
        \ "s3.us.cloud-object-storage.appdomain.cloud"
      2 / US Cross Region Dallas Endpoint
        \ "s3-api.dal.us-geo.objectstorage.s3.us-south.cloud-object-storage.appdomain.cloud.net"
      3 / US Cross Region Washington DC Endpoint
        \ "s3-api.wdc-us-geo.objectstorage.s3.us-south.cloud-object-storage.appdomain.cloud.net"
      4 / US Cross Region San Jose Endpoint
        \ "s3-api.sjc-us-geo.objectstorage.s3.us-south.cloud-object-storage.appdomain.cloud.net"
      5 / US Cross Region Private Endpoint
        \ "s3-api.us-geo.objectstorage.service.networklayer.com"
   [snip]
      34 / Toronto Single Site Private Endpoint
        \ "s3.tor01.objectstorage.service.networklayer.com"
   endpoint>1
   

8. IBM COS 위치 제한조건을 지정하십시오. 위치 제한조건이 엔드포인트와 일치해야 합니다. 엔드포인트에 대한 자세한 정보는 엔드포인트 및 스토리지 위치를 참조하십시오.

      1 / US Cross Region Standard
        \ "us-standard"
      2 / US Cross Region Vault
        \ "us-vault"
      3 / US Cross Region Cold
        \ "us-cold"
      4 / US Cross Region Flex
        \ "us-flex"
      5 / US East Region Standard
        \ "us-east-standard"
   [snip]
     32 / Toronto Flex
     \ "tor01-flex"
     location_constraint>1
   

9. ACL을 지정하십시오. public-read 및 private만 지원됩니다.

   Canned ACL used when creating buckets or storing objects in S3.
   Choose a number from below, or type in your own value
      1 "private"
      2 "public-read"
   acl>1
   

10. 표시된 구성을 검토하고 “remote” 저장을 승인한 다음 종료하십시오. 구성 파일은 다음과 같아야 합니다.

    [YOUR NAME]
    type = s3
    Provider = IBMCOS
    access_key_id = xxx
    secret_access_key = yyy
    endpoint = s3.us.cloud-object-storage.appdomain.cloud
    location_constraint = us-standard
    acl = private
    

명령 참조

rclone mkdir RemoteName:newbucket

rclone lsd RemoteName:

rclone ls RemoteName:newbucket

rclone copy /Users/file.txt RemoteName:newbucket

rclone copy RemoteName:newbucket/file.txt /Users/Documents/

rclone delete RemoteName:newbucket/file.txt

rclone sync

sync 오퍼레이션은 소스와 대상을 동일하게 하며 대상만 수정합니다. 동기화는 크기 및 수정 시간 또는 MD5SUM으로 테스트하여 변경되지 않은 파일을 전송하지 않습니다. 대상은 필요한 경우 파일 삭제를 포함하여 소스와 일치하도록 업데이트됩니다.

이 오퍼레이션으로 인해 데이터 손실이 발생할 수 있으므로 먼저 --dry-run 플래그로 테스트하여 복사하고 삭제할 항목을 정확히 확인하십시오.

언제든지 오류가 발생하면 대상의 파일이 삭제되지 않습니다.

디렉토리의 컨텐츠 는 디렉토리 자체가 아니라 동기화됩니다. source:path가 디렉토리인 경우 디렉토리 이름과 컨텐츠가 아닌 복사된 source:path의 컨텐츠입니다. 자세한 정보는 copy 명령의 자세한 설명을 참조하십시오.

dest:path가 없는 경우 작성되고 source:path 컨텐츠가 여기로 이동됩니다.

rclone sync source:path dest:path [flags]

Server A> rclone sync /tmp/whatever remote:ServerA
Server B> rclone sync /tmp/whatever remote:ServerB

Server A> rclone copy /tmp/whatever remote:Backup
Server B> rclone copy /tmp/whatever remote:Backup

rclone sync /path/to/local remote:current --backup-dir remote:old

rclone 일일 동기화

백업 스케줄링은 백업 자동화에서 중요합니다. 플랫폼에 따라 수행 방법이 다릅니다. Windows에서는 Task Scheduler를 사용할 수 있는 반면 MacOS 및 Linux에서는 crontabs를 사용할 수 있습니다.

rclone sync /path/to/my/backup/directory RemoteName:newbucket