서로 다른 파일 간의 열 비교

Question

한 가지 접근 방식은 먼저 여러 파일에 있는 12개의 초기 문자 집합을 모두 찾는 것입니다.

cut -c-12 file* | sort | uniq -c

위의 명령은 cut이름이 로 시작하는 각 파일의 처음 12자를 인쇄한 다음 file문자를 정렬하고 각 줄에서 찾은 횟수를 추가합니다 uniq -c. 샘플 파일에서 이 명령을 실행하면 다음이 반환됩니다.

$ cut -c-12 file* | sort | uniq -c
      1  -13  -3  -1
      2  -13  -3  -2
      2  -13  -3  -3
      2  -13  -4   0
      2  -13  -4  -1
      2  -13  -4  -2
      2  -13  -5   0

따라서 첫 번째 줄을 제외한 모든 줄이 두 파일에 모두 나타납니다. 이제 필요한 횟수(귀하의 경우 20회)만큼 발생하는 행만 유지하세요.

cut -c-12 file* | sort | uniq -c | rev | sed -n 's/ 20 *$//p' | rev

rev거꾸로 인쇄하면 됩니다. 여기서는 각 행의 마지막 필드가 표시된 횟수를 계산하는 데 사용하고 있습니다. 그런 다음 이를 전달 sed하고 공백, 20 및 0 이상의 공백으로 끝나는 줄만 인쇄하도록 지시합니다. 이렇게 하면 20번 나타나는 줄만 유지되고 마침내 rev원래 형식으로 돌아갑니다.

이제 grep검색할 문자열 목록으로 전체 콘텐츠를 전달할 수 있습니다.

$ grep -f <(cut -c-12 file* | sort | uniq -c | 
            rev | sed -n 's/ 20 *$//p' | rev) file*
 -13  -5   0 19.3769 46.9197   1
 -13  -4  -2 347.911 57.7232   1
 -13  -4  -1 38.5696 39.0027   1
 -13  -4   0 2227.39 124.894   1
 -13  -3  -3 113.001 40.2117   1
 -13  -3  -2 850.847 78.2881   1

쉘이 해당 <()형식을 지원하지 않는 경우 결과를 cut별도의 파일에 저장하여 사용하거나 루프에서 실행할 수 있습니다.

cut -c-12 file* | sort | uniq -d | 
    while IFS= read -r l; do grep -- "^$l" file1; done

각 파일의 출력을 별도의 파일에 넣으려면 다음을 사용하십시오.

cut -c-12 file* | sort | uniq -c | rev | sed -n 's/ 20 *$//p' | rev > list
for f in file*; do grep -f list "$f" > "$f.new"; done

Answer 1