똑같은 ext2 파일 시스템을 만드세요

Question 1

IMHO 모든 것이 지나치게 복잡해지는 것 같습니다. 언제아스팔트혼자서는 분명한 해결책처럼 보입니다. tar는 cdfs(--options cd9660:*)를 포함한 거의 모든 파일 시스템을 만들 수 있습니다. 또한 출력 파일에 -m || --modification-time가장 최근,,,, --gid id || --gname name... 중 하나로 타임스탬프를 지정할 수 있습니다.--acls || --no-acls--same-owner || --no-same-owner

또는 파일 시스템을 생성할 수도 있습니다. chown -Rh someone:somegroup .파일 트리에서 chmod원하는 대로 실행하여 사용 tar하거나동기화파일 트리를 준비된 파일 시스템에 배치합니다. 그러면 날짜, 소유자/그룹, 권한 등 모든 것이 일관되게 유지됩니다.

글쎄요, 그게 제가 그런 일에 접근하는 방식이에요. :)

화타이

Answer

IMHO 모든 것이 지나치게 복잡해지는 것 같습니다. 언제아스팔트혼자서는 분명한 해결책처럼 보입니다. tar는 cdfs(--options cd9660:*)를 포함한 거의 모든 파일 시스템을 만들 수 있습니다. 또한 출력 파일에 -m || --modification-time가장 최근,,,, --gid id || --gname name... 중 하나로 타임스탬프를 지정할 수 있습니다.--acls || --no-acls--same-owner || --no-same-owner

또는 파일 시스템을 생성할 수도 있습니다. chown -Rh someone:somegroup .파일 트리에서 chmod원하는 대로 실행하여 사용 tar하거나동기화파일 트리를 준비된 파일 시스템에 배치합니다. 그러면 날짜, 소유자/그룹, 권한 등 모든 것이 일관되게 유지됩니다.

글쎄요, 그게 제가 그런 일에 접근하는 방식이에요. :)

화타이

Question 2

원래 질문에 대한 답은 다음과 같은 프로그램입니다.제넥스트2fs. -f 스위치를 제공하면 동일한 입력에 대해 비트 단위로 동일한 출력이 생성됩니다. 이는 생성된 이미지를 올바르게 출력되는 미리 계산된 md5sum과 비교하는 자체 테스트 모음이나 이 테스트(소스 디렉터리 내에서 실행됨)를 통해 입증될 수 있습니다.

$ ./genext2fs -f -B 1024 -b 40 -d m4 rootfs.img
$ md5sum rootfs.img
322053a8962acc599eaabb2dfde28783  rootfs.img
$ rm rootfs.img
$ ./genext2fs -f -B 1024 -b 40 -d m4 rootfs.img
$ md5sum rootfs.img
322053a8962acc599eaabb2dfde28783  rootfs.img

생성된 이미지를 마운트하고 해당 내용이 실제로 패키징 디렉터리와 동일한지 확인할 수 있습니다.

$ sudo mount rootfs.img /mnt
$ ls -lha /mnt
total 27K
drwxr-xr-x  3 root  root  1.0K Jan  1  1970 .
drwxr-xr-x 25 root  root  4.0K Mar 22 14:56 ..
-rw-r--r--  1 josch josch 1.5K Mar 22 23:05 ac_func_scanf_can_malloc.m4
-rw-r--r--  1 josch josch 2.4K Mar 22 14:24 ac_func_snprintf.m4
drwx------  2 root  root   16K Jan  1  1970 lost+found
$ rmdir /mnt/lost+found
$ diff -rq m4 /mnt
$ echo $?
0

재미있게 보내세요!

Answer

원래 질문에 대한 답은 다음과 같은 프로그램입니다.제넥스트2fs. -f 스위치를 제공하면 동일한 입력에 대해 비트 단위로 동일한 출력이 생성됩니다. 이는 생성된 이미지를 올바르게 출력되는 미리 계산된 md5sum과 비교하는 자체 테스트 모음이나 이 테스트(소스 디렉터리 내에서 실행됨)를 통해 입증될 수 있습니다.

$ ./genext2fs -f -B 1024 -b 40 -d m4 rootfs.img
$ md5sum rootfs.img
322053a8962acc599eaabb2dfde28783  rootfs.img
$ rm rootfs.img
$ ./genext2fs -f -B 1024 -b 40 -d m4 rootfs.img
$ md5sum rootfs.img
322053a8962acc599eaabb2dfde28783  rootfs.img

생성된 이미지를 마운트하고 해당 내용이 실제로 패키징 디렉터리와 동일한지 확인할 수 있습니다.

$ sudo mount rootfs.img /mnt
$ ls -lha /mnt
total 27K
drwxr-xr-x  3 root  root  1.0K Jan  1  1970 .
drwxr-xr-x 25 root  root  4.0K Mar 22 14:56 ..
-rw-r--r--  1 josch josch 1.5K Mar 22 23:05 ac_func_scanf_can_malloc.m4
-rw-r--r--  1 josch josch 2.4K Mar 22 14:24 ac_func_snprintf.m4
drwx------  2 root  root   16K Jan  1  1970 lost+found
$ rmdir /mnt/lost+found
$ diff -rq m4 /mnt
$ echo $?
0

재미있게 보내세요!

Question 3

노트: 이것은 완전한 답변이 아니며 단지 일부이거나 적어도 힌트입니다.

이미지를 생성하고 출력이 매번 동일하게 비트 단위로 표시되도록 하는 스크립트를 실행할 수 있어야 합니다.

가장 먼저 깨달아야 할 문제는 분할된 테이블 (분할된 테이블의 오프셋 440) disk signatures에 있습니다.msdos막 생물 반응기,4바이트 길이). MBR이 다른 경우 첫 번째 섹터에서만 목표가 누락됩니다. mklabelinside 를 실행할 때 마다 parted새로운 것이 생성됩니다 disk signature. 다음과 같이 이 4바이트를 동일한 무작위 서명으로 덮어쓰면 이 문제를 극복할 수 있습니다.

printf RAMDOM_SIGNATURE | xxd -p -r | dd bs=1 count=4 seek=440 of=YOUR_DOT_BIN conv=notrunc 2> /dev/null

RANDOM_SIGNATURE이럴 수도 있지'73396992'

다음 문제를 해결하기 위해 스크립트를 일부 수정했습니다.

dd if=/dev/zero bs=1024 count=46112 of="$1"
parted "$1" <<EOF
unit
s
mklabel
msdos
mkpart
p
ext2
63s
45119s
set
1
boot
on
q
EOF

printf "$2" | xxd -p -r | dd bs=1 count=4 seek=440 of="$1" conv=notrunc 2> /dev/null

losetup -o $(expr 63 \* 512) /dev/loop0 "$1"

mke2fs -b 1024 -t ext2 /dev/loop0 22528

#clear some parameters
tune2fs -i 0 /dev/loop0 # interval between check
tune2fs -L LABEL /dev/loop0
tune2fs -U 00000000-0000-0000-0000-000000000000 /dev/loop0 #uuid
tune2fs -c 0 /dev/loop0 #mount count

#mount /dev/loop0 mnt
## make a dummy file
#echo HELLO > mnt/a.txt
#umount mnt

losetup -d /dev/loop0

이제 다음과 같이 스크립트를 호출할 수 있습니다.

./script_name BIN_FILE_NAME RANDOM_SIGNATURE

이제 이렇게 하면:

./test.sh cf00.bin '73396992'
./test.sh cf01.bin '73396992'
./test.sh cf02.bin '73396992'
./test.sh cf03.bin '73396992'

그런 다음 이:

dd if=cf00.bin count=63 2>/dev/null | sha1sum
dd if=cf01.bin count=63 2>/dev/null | sha1sum
dd if=cf02.bin count=63 2>/dev/null | sha1sum
dd if=cf03.bin count=63 2>/dev/null | sha1sum

첫 번째 파티션의 파일 시스템 이전에 이러한 모든 파일이 동일하다는 것을 알 수 있습니다(원본 스크립트와 동일하게 시도하면 합계가 서로 달라집니다).

내 버전의 스크립트에서는 파일에 쓰는 줄을 주석 처리했음을 알 수 있습니다 a.txt. 파일 시스템에 파일이 없더라도 파일 시스템을 동일하게 만들 수 없으면 문제를 해결하려고 노력할 필요가 없기 때문에 이렇게 합니다. 문제는 파일이 없어도 파일 시스템이 다르기 때문에 먼저 이를 수정해야 한다는 것입니다.

각 이미지의 파일 시스템 파티션에 대해 실행 dumpe2fs하고 이를 파일에 덤프한 다음 diff덤프 쌍에 대해 사용하면 다음과 같은 내용이 표시됩니다.

25c25
< Filesystem created:       Sat Jun 15 07:37:32 2019
---
> Filesystem created:       Sat Jun 15 07:37:40 2019
27c27
< Last write time:          Sat Jun 15 07:37:33 2019
---
> Last write time:          Sat Jun 15 07:37:40 2019
30c30
< Last checked:             Sat Jun 15 07:37:32 2019
---
> Last checked:             Sat Jun 15 07:37:40 2019
37c37
< Directory Hash Seed:      603130ae-82de-4530-9772-f68ae3d6df5f
---
> Directory Hash Seed:      1d9c5af8-a48e-4221-9e70-8fa2ccc6936f

그러니 적어도,매우 높은 수준에서(이후에는 가장 낮은 수준, 즉 실제바이트 단위비교) 파일 시스템은 위에 표시된 세부 사항이 다릅니다. 먼저 이 문제를 해결하세요.

기계에서 날짜를 변경하더라도 프로그램 실행에는 제어할 수 있는 시간 차이가 있기 때문에 타임스탬프를 성공적으로 변조하고 동일하게 만들 수 없습니다. 이 경우에는 다음이 필요합니다.꼭 매달리게 하다적어도 파일 시스템을 생성한 프로그램의 관점에서 보면 그것은 여러분의 시계입니다. 이에 대해 더 깊이 파고들 수 있지만 컴퓨터에서 스크립트를 실행해야 한다고 말했기 때문에 이것이 올바른 접근 방식이라고 생각하지 않습니다.당신은 그들의 시계를 엉망으로 만들고 싶지 않습니다. 그래서 IMHO, 갈 길은 아마도 내가 disk signature검색한 것처럼 파일 시스템의 올바른 바이트를 조작하는 것입니다.

또한... 추적하는 것도 잊지 마세요 Superblock backups. 각 파일 시스템에 서로 다른 데이터가 포함되어 있으면 해당 파일이 있는 바이트 범위의 차이가 전파됩니다.

마지막으로, 파일을 복사할 때 파일 시스템 내에서 파일 바이트의 "분배"를 직접 제어할 수 없다는 점을 기억하십시오. 복제할 수 없는 경우 다음과 같이 이를 제어할 수 있는 방법을 찾아야 합니다. 잘.

Answer

노트: 이것은 완전한 답변이 아니며 단지 일부이거나 적어도 힌트입니다.

이미지를 생성하고 출력이 매번 동일하게 비트 단위로 표시되도록 하는 스크립트를 실행할 수 있어야 합니다.

가장 먼저 깨달아야 할 문제는 분할된 테이블 (분할된 테이블의 오프셋 440) disk signatures에 있습니다.msdos막 생물 반응기,4바이트 길이). MBR이 다른 경우 첫 번째 섹터에서만 목표가 누락됩니다. mklabelinside 를 실행할 때 마다 parted새로운 것이 생성됩니다 disk signature. 다음과 같이 이 4바이트를 동일한 무작위 서명으로 덮어쓰면 이 문제를 극복할 수 있습니다.

printf RAMDOM_SIGNATURE | xxd -p -r | dd bs=1 count=4 seek=440 of=YOUR_DOT_BIN conv=notrunc 2> /dev/null

RANDOM_SIGNATURE이럴 수도 있지'73396992'

다음 문제를 해결하기 위해 스크립트를 일부 수정했습니다.

dd if=/dev/zero bs=1024 count=46112 of="$1"
parted "$1" <<EOF
unit
s
mklabel
msdos
mkpart
p
ext2
63s
45119s
set
1
boot
on
q
EOF

printf "$2" | xxd -p -r | dd bs=1 count=4 seek=440 of="$1" conv=notrunc 2> /dev/null

losetup -o $(expr 63 \* 512) /dev/loop0 "$1"

mke2fs -b 1024 -t ext2 /dev/loop0 22528

#clear some parameters
tune2fs -i 0 /dev/loop0 # interval between check
tune2fs -L LABEL /dev/loop0
tune2fs -U 00000000-0000-0000-0000-000000000000 /dev/loop0 #uuid
tune2fs -c 0 /dev/loop0 #mount count

#mount /dev/loop0 mnt
## make a dummy file
#echo HELLO > mnt/a.txt
#umount mnt

losetup -d /dev/loop0

이제 다음과 같이 스크립트를 호출할 수 있습니다.

./script_name BIN_FILE_NAME RANDOM_SIGNATURE

이제 이렇게 하면:

./test.sh cf00.bin '73396992'
./test.sh cf01.bin '73396992'
./test.sh cf02.bin '73396992'
./test.sh cf03.bin '73396992'

그런 다음 이:

dd if=cf00.bin count=63 2>/dev/null | sha1sum
dd if=cf01.bin count=63 2>/dev/null | sha1sum
dd if=cf02.bin count=63 2>/dev/null | sha1sum
dd if=cf03.bin count=63 2>/dev/null | sha1sum

첫 번째 파티션의 파일 시스템 이전에 이러한 모든 파일이 동일하다는 것을 알 수 있습니다(원본 스크립트와 동일하게 시도하면 합계가 서로 달라집니다).

내 버전의 스크립트에서는 파일에 쓰는 줄을 주석 처리했음을 알 수 있습니다 a.txt. 파일 시스템에 파일이 없더라도 파일 시스템을 동일하게 만들 수 없으면 문제를 해결하려고 노력할 필요가 없기 때문에 이렇게 합니다. 문제는 파일이 없어도 파일 시스템이 다르기 때문에 먼저 이를 수정해야 한다는 것입니다.

각 이미지의 파일 시스템 파티션에 대해 실행 dumpe2fs하고 이를 파일에 덤프한 다음 diff덤프 쌍에 대해 사용하면 다음과 같은 내용이 표시됩니다.

25c25
< Filesystem created:       Sat Jun 15 07:37:32 2019
---
> Filesystem created:       Sat Jun 15 07:37:40 2019
27c27
< Last write time:          Sat Jun 15 07:37:33 2019
---
> Last write time:          Sat Jun 15 07:37:40 2019
30c30
< Last checked:             Sat Jun 15 07:37:32 2019
---
> Last checked:             Sat Jun 15 07:37:40 2019
37c37
< Directory Hash Seed:      603130ae-82de-4530-9772-f68ae3d6df5f
---
> Directory Hash Seed:      1d9c5af8-a48e-4221-9e70-8fa2ccc6936f

그러니 적어도,매우 높은 수준에서(이후에는 가장 낮은 수준, 즉 실제바이트 단위비교) 파일 시스템은 위에 표시된 세부 사항이 다릅니다. 먼저 이 문제를 해결하세요.

기계에서 날짜를 변경하더라도 프로그램 실행에는 제어할 수 있는 시간 차이가 있기 때문에 타임스탬프를 성공적으로 변조하고 동일하게 만들 수 없습니다. 이 경우에는 다음이 필요합니다.꼭 매달리게 하다적어도 파일 시스템을 생성한 프로그램의 관점에서 보면 그것은 여러분의 시계입니다. 이에 대해 더 깊이 파고들 수 있지만 컴퓨터에서 스크립트를 실행해야 한다고 말했기 때문에 이것이 올바른 접근 방식이라고 생각하지 않습니다.당신은 그들의 시계를 엉망으로 만들고 싶지 않습니다. 그래서 IMHO, 갈 길은 아마도 내가 disk signature검색한 것처럼 파일 시스템의 올바른 바이트를 조작하는 것입니다.

또한... 추적하는 것도 잊지 마세요 Superblock backups. 각 파일 시스템에 서로 다른 데이터가 포함되어 있으면 해당 파일이 있는 바이트 범위의 차이가 전파됩니다.

마지막으로, 파일을 복사할 때 파일 시스템 내에서 파일 바이트의 "분배"를 직접 제어할 수 없다는 점을 기억하십시오. 복제할 수 없는 경우 다음과 같이 이를 제어할 수 있는 방법을 찾아야 합니다. 잘.

Question 4

당신은 또한 시도할 수 있습니다e2image:

e2image 프로그램은 장치의 중요한 ext2, ext3 또는 ext4 파일 시스템 메타데이터를 파일에 저장합니다.

기본적으로 e2image메타데이터만 저장되지만 , -a옵션을 이용하여 데이터를 저장할 수도 있습니다. (링크의 "포함된 데이터" 섹션 참조)

-a 옵션을 지정하여 모든 데이터를 포함할 수 있습니다. 이는 전체 FS 복제 또는 백업 목적에 적합한 이미지를 제공합니다. 이 옵션은 원시 또는 QCOW2 형식에서만 작동합니다.

QCOW2 형식은 원본 형식보다 백업에 더 적합합니다. QCOW2 이미지는 백업 중인 파티션의 사용 공간과 크기가 비슷한 일반 파일입니다. 원본 이미지는 모든 의미에서 희소 파일입니다. 희소 파일을 구체적으로 처리하지 않는 도구는 사용된 공간뿐만 아니라 여유 공간도 처리합니다.

따라서 사용 예는 다음과 같습니다.

sda1파일 및 메타데이터를 포함한 파티션을 파일에 백업합니다 boot-part.qcow2.

sudo mount -o remount,ro /dev/sda1
sudo e2image -a -Q /dev/sda1 boot-part.qcow2

백업 프로세스 중에 누구도 파티션에 쓰지 않도록 하려면 읽기 전용으로 다시 마운트해야 합니다. 결국 sudo mount -o remount,rw /dev/sda1필요한 경우 읽기-쓰기 모드로 다시 설치할 수 있습니다.

/dev/sda1QCOW2 이미지 파일에서 파티션 복구 boot-part.qcow2:

sudo umount /dev/sda1
sudo e2image -r boot-part.qcow2 /dev/sda1

umount마운트된 파티션의 슈퍼블록을 덮어쓸 수 없기 때문에 이 작업이 필요하다는 점에 유의하세요 . /dev/sda1당시 마운트되지 않은 경우 이 단계를 건너뛸 수 있습니다. :)

복구 시나리오에서는 크기가 /dev/sda1이미지 파일 내부의 파티션과 같거나 커야 한다는 점도 주목할 가치가 있습니다. 그렇지 않으면 오류가 발생합니다: e2image: Invalid argument while trying to convert qcow2 image (boot-part.qcow2) into raw image (/dev/sda1).

Answer