나읽다Lustre 파일 시스템 정보:
대용량 파일의 경우 전체 파일을 프런트엔드 스토리지에 복원하는 것은 일반적이지 않습니다.
프로그램이 파일을 읽을 때 Lustre는 프런트엔드 스토리지에 복원할 파일의 양을 어떻게 결정합니까?
답변1
다른 의견의 대용량 파일에 대한 설명은 HSM에 대한 일반화이며 Lustre에만 국한된 것이 아닙니다. 현재 애플리케이션이 파일을 읽으면 Lustre는 1바이트만 읽은 경우에도 HSM에서 전체 파일을 복원합니다.
그러나 이것은 사용자 공간 복제 도구가 구현되는 방법에 대한 세부 사항이며 엄격한 요구 사항은 아닙니다. Lustre에서는 이미 복합 레이아웃(프로그레시브 파일 레이아웃, PFL이라고도 함)을 사용하여 단일 파일의 다양한 부분에 대해 다양한 레이아웃을 저장할 수 있습니다. https://wiki.lustre.org/Progressive_File_Layouts
HSM 상태를 각 구성 요소로 이동하여 파일의 분리된 부분을 독립적으로 보관하고 복원할 수 있도록 하는 일부 작업이 진행 중입니다. https://review.whamcloud.com/39387
그러나 이 변경 사항은 아직 출시된 버전에서 사용할 수 없습니다.