복구 이미지가 사용중인 것으로 확인되어 현재 1TB 소스 디스크는 사용되지 않고 있습니다. 정말 좋은 소식이네요.

이제 신뢰할 수 없는 매체를 통해 디스크를 복사하려면 자동으로 다시 설정될 수 있는 전송 계층(예: UDP 기반 OpenVPN) 또는 다시 시작 가능한 데이터 "청크"를 보내는 방법이 필요합니다.

우리는 모든 것이 클라이언트에 의해 제어되고 ssh인증서/키를 통해 액세스할 수 있으므로 비밀번호가 필요하지 않다고 가정합니다.

1GB 블록을 사용하는 것이 좋습니다. 이는 ssh전체 디스크를 전송하려면 약 1000개의 연결이 필요하다는 의미입니다. 스크립트 상단 근처에서 블록 크기와 개수를 조정해야 할 수도 있습니다. "유효한 데이터" 섹션에서는 bzip2압축된 블록이나 압축되지 않은 일반 블록을 쓰도록 선택할 수 있습니다. ( bzip2여러개의 압축된 블록을 처리할 수 있으므로 문제가 되지 않습니다.)

#!/bin/bash
#
dev=/dev/sda1   # Device to read
img=image.dat   # Target image filename
bs=32M          # dd blocksize per read
count=32        # Number of blocks per ssh chunk

for (( chunk=0; ; ))
do
    # Grab chunk from server
    #
    ssh -zn root@remoteServer "
        dev=$dev chunk=$chunk bs=$bs count=$count "'
        echo "chunk $chunk from device $dev"
        {
            dd bs=$bs skip=$((chunk*count)) count=$count if=$dev 2>/tmp/dd.$$
            echo $? >/tmp/ss.$$
            dd bs=$bs iflag=fullblock count=$count if=/dev/zero 2>/dev/null
        } | dd bs=$bs iflag=fullblock count=$count 2>/dev/null
        echo "========"
        echo "status $(cat /tmp/ss.$$)"
        cat /tmp/dd.$$
        rm -f /tmp/dd.$$ /tmp/ss.$$
    ' |
        {
            # Extract data from chunk
            #
            IFS= read -r info
            echo "Received: $info"
            dd bs=$bs iflag=fullblock count=$count of=/var/tmp/data.$$
            cat >/var/tmp/meta.$$
        }

    # Append extracted data
    #
    meta=$(cat /var/tmp/meta.$$)
    echo "Meta:"
    echo "$meta" | sed 's/^/| /'

    if [[ "$meta" =~ ([[:digit:]]+)\+[[:digit:]]+' records in' ]]
    then
        # Valid data
        #
        # bzip2 </var/tmp/data.$$ >> "$img.bz2"
        dd bs=$bs count=$count seek=$((chunk*count)) conv=notrunc if=/var/tmp/data.$$ of="$img"

        # Is this all
        #
        if [[ "${BASH_REMATCH[1]}" -lt $count ]]
        then
            # We are done
            #
            break
        fi

        # Next round the loop
        #
        ((chunk++))
    else
        echo "Invalid data received for chunk $chunk; retrying"
    fi
done

# Tidy up
#
rm -f /var/tmp/data.$$ /var/tmp/meta.$$
exit 0

결과 이미지는 최소한 소스 디스크의 크기입니다. 추가 0바이트는 다음 전체 블록 크기로 반올림하기에 충분합니다. 이것이 중요한 경우 를 사용하여 truncate압축되지 않은 결과 이미지의 크기를 줄일 수 있습니다.

누락된 비트를 보내려면 누락된 비트를 압축된 스트림(이전에 본 내용에 따라 bzip2와 같은)으로 보내는 경우에도 처음부터 다시 압축해야 합니다.

$s전송된 콘텐츠의 크기를 포함 했다면

dd if=/dev/md3 status=progress bs=500k | bzip2 --best | {
  head -c "$s" > /dev/null
  ssh host 'cat >> /mnt/client/image.bz2'
}

( headGNU와 같은 구현이 head여기서 필요한 것 이상을 읽지 않는다고 가정합니다).

혹은 그 반대로도:

ssh other-host "
  dd if=/dev/md3 status=progress bs=500k | bzip2 --best |
    tail -c +$(($s + 1))" >> /mnt/client/image.bz2

/dev/md3지난번 이후 수정되지 않았다고 가정합니다 (또는 설치되지 않은 경우에도 일부 "마지막 설치 시간" 필드가 업데이트될 수 있음).

네트워크 파일 시스템을 사용하여 대용량 파일을 전송하는 것도 좋지 않은 생각입니다.