btrfs의 FIDEDUPERANGE ioctl이 예상대로 작동하지 않습니다.

~에 따르면ioctl_fideduperange,

최대 크기는src_length파일 시스템에 따라 다르지만 일반적으로 16MiB입니다.

src_length그러나 단일 호출로 1Gib 이상을 성공적으로 사용할 수 있었습니다 ioctl. 적어도 16MiB에 대한 경고는 완전히 과장된 것입니까 btrfs?

게다가 에 따르면VFS 문서,

구현에서는 len == 0으로 전달되는 호출자를 처리해야 합니다. 이는 "소스 파일의 끝으로 다시 매핑"을 의미합니다.

그러나 으로 설정하려고 하면 호출은 src_length성공 하지만 아무 작업도 수행되지 않습니다.0ioctl

제가 이 두 문장을 잘못 읽었나요? 아니면 btrfs구현이 단순히 (아주 좋은) 문서를 따르지 않는 걸까요? 커널을 사용하여 Linux Mint 20에서 테스트하고 있습니다 5.4.0-62-generic. 나는 이를 사용하여 filefrag -sv FILE1 FILE2파일의 블록 수준 할당을 확인하여 파일이 중복되었는지 확인합니다. 중복 파일을 제거하려면 다음 프로그램을 사용하고 있습니다. 문제의 파일 btrfs은 sudo mkfs.btrfs -mraid1 -draid1 /dev/mapper/sda1_crypt /dev/mapper/sdb1_crypt.

상상하다:

$ cp -f file1 file2
$ filefrag -sv file1 file2   # see that files use different extents (are not deduplicated)
$ myprog file1 file2
$ filefrag -sv file1 file2   # see that files use the same extents (have been deduplicated)

두 파일에서 중복 항목을 제거하는 절차:

// deduplicate srcfile and targetfile if contents are identical
// usage:  myprog srcfile targetfile
// compile with:  gcc myprog.c -o myprog

#include <stdio.h>
#include <stdlib.h>
#include <string.h>
#include <fcntl.h>
#include <sys/stat.h>
#include <sys/ioctl.h>
#include <linux/fs.h>

int main(int argc, char**argv)
{
   struct stat st;
   long size;
   __u64 buf[2048];        /* __u64 for proper field alignment */
   struct file_dedupe_range *range = (struct file_dedupe_range *)buf;

   memset(range, 0, sizeof(struct file_dedupe_range));
   memset(&range->info, 0, sizeof(struct file_dedupe_range_info));

   long srcfd = open(argv[1], O_RDONLY);
   if (srcfd < 0) { perror("open-src"); exit(1); }
   if (fstat(srcfd, &st) < 0) { perror("stat-src"); exit(1); }
   size = st.st_size;

   long tgtfd = open(argv[2], O_RDWR);
   if (tgtfd < 0) { perror("open-tgt"); exit(1); }
   if (fstat(tgtfd, &st) < 0) { perror("stat-tgt"); exit(1); }
   if (size != st.st_size) {
      fprintf(stderr, "SIZE DIFF\n");
      exit(1);
   }

   range->src_offset = 0;
   range->src_length = size;
// range->src_length = 0;                    // I expected this to work
   range->dest_count = 1;
   range->info[0].dest_fd = tgtfd;
   range->info[0].dest_offset = 0;

   while (range->src_length > 0) {
      if (ioctl(srcfd, FIDEDUPERANGE, range) < 0) { perror("ioctl"); exit(1); }

      fprintf(stderr, "bytes_deduped: %llu\n", range->info[0].bytes_deduped);
      fprintf(stderr, "status: %d\n", range->info[0].status);
      if (range->info[0].status == FILE_DEDUPE_RANGE_DIFFERS) {
         fprintf(stderr, "DIFFERS\n");
         break;
      } else if (range->info[0].status == FILE_DEDUPE_RANGE_SAME) {
         fprintf(stderr, "SAME\n");
      } else {
         fprintf(stderr, "ERROR\n");
         break;
      }

      if (range->info[0].bytes_deduped >= range->src_length) { break; }
      range->src_length -= range->info[0].bytes_deduped;
      range->src_offset += range->info[0].bytes_deduped;
      range->info[0].dest_offset += range->info[0].bytes_deduped;
   }
   exit(0);
}