서로 다른 열에 서로 다른 정보가 포함된 행 추출

Question 1

awk입력 파일을 한 번만 사용 하고 처리하십시오.

awk 'min[$3, $5]!=""{ if(min[$3, $5]>$6){ line[$3, $5]=$0; min[$3, $5]=$6}; next }
                    { min[$3, $5]=$6; line[$3, $5]=$0 }
END{ for(x in line) print line[x] }' infile

도착하다"동일한 최소값으로 라인 유지"6열 ^:

awk 'min[$3, $5]!=""{ if(min[$3, $5] >$6){ line[$3, $5]=$0; min[$3, $5]=$6 };
                      if(min[$3, $5]==$6){ line[$3, $5]=line[$3, $5] ORS $0 }; next
                    }
                    { min[$3, $5]=$6; line[$3, $5]=$0 }
END{ for(x in line) print line[x] }' infile

Answer

awk입력 파일을 한 번만 사용 하고 처리하십시오.

awk 'min[$3, $5]!=""{ if(min[$3, $5]>$6){ line[$3, $5]=$0; min[$3, $5]=$6}; next }
                    { min[$3, $5]=$6; line[$3, $5]=$0 }
END{ for(x in line) print line[x] }' infile

도착하다"동일한 최소값으로 라인 유지"6열 ^:

awk 'min[$3, $5]!=""{ if(min[$3, $5] >$6){ line[$3, $5]=$0; min[$3, $5]=$6 };
                      if(min[$3, $5]==$6){ line[$3, $5]=line[$3, $5] ORS $0 }; next
                    }
                    { min[$3, $5]=$6; line[$3, $5]=$0 }
END{ for(x in line) print line[x] }' infile

Question 2

그리고awk

FNR==NR && !seen[$3,$5]++ {val[$3,$5]=$6}
FNR==NR && seen[$3,$5] {if ($6<val[$3,$5]) {val[$3,$5]=$6} }
 
NR!=FNR && val[$3,$5]==$6

다음으로 실행

awk -f script.awk input input

그것은 무엇을 합니까?

만들다의사 다차원 배열열 3과 5를 인덱스로 사용하고

해당 요소가 없으면 열 6의 값을 가져옵니다.
그러한 요소가 존재하는 경우 값을 6열과 비교하여 더 작은 요소를 선택합니다.
그런 다음 파일을 다시 실행하고 배열 인덱스가 열 3 및 5와 일치하고 열 6의 값이 배열 요소에 맞는 각 행을 선택합니다.

파일이 두 번 실행되지만 RAM 사용량이 매우 낮습니다. 정렬은 입력 파일에 표시된 대로입니다.

Answer

그리고awk

FNR==NR && !seen[$3,$5]++ {val[$3,$5]=$6}
FNR==NR && seen[$3,$5] {if ($6<val[$3,$5]) {val[$3,$5]=$6} }
 
NR!=FNR && val[$3,$5]==$6

다음으로 실행

awk -f script.awk input input

그것은 무엇을 합니까?

만들다의사 다차원 배열열 3과 5를 인덱스로 사용하고

해당 요소가 없으면 열 6의 값을 가져옵니다.
그러한 요소가 존재하는 경우 값을 6열과 비교하여 더 작은 요소를 선택합니다.
그런 다음 파일을 다시 실행하고 배열 인덱스가 열 3 및 5와 일치하고 열 6의 값이 배열 요소에 맞는 각 행을 선택합니다.

파일이 두 번 실행되지만 RAM 사용량이 매우 낮습니다. 정렬은 입력 파일에 표시된 대로입니다.

Question 3

sort -t$'\t' -k3,3 -k5,5 -k6n,6 file | awk -F\\t '!seen[$3,$5]++'

주로 sort필드 6의 숫자 정렬에 사용됩니다. 다음도 작동합니다.

sort -t$'\t' -k6n,6 file | awk -F\\t '!seen[$3,$5]++'

그러나 출력은 열 3과 5로 그룹화되지 않습니다. awk고유한 열 3/5 쌍을 포함하는 첫 번째 행을 인쇄하는 데 사용됩니다. C 문자열을 지원하지 않는 쉘에서 사용할 수 있습니다 "$(printf '\t')".$'\t'$'...'

awk는 파일을 두 번 처리하여 입력과 동일한 순서를 유지하고 동일한 최소값으로 줄을 유지합니다.

awk '
FNR==NR {if (min[$3,$5]=="" || $6<min[$3,$5]) min[$3,$5]=$6; next} $6==min[$3,$5]
' file file

Answer

sort -t$'\t' -k3,3 -k5,5 -k6n,6 file | awk -F\\t '!seen[$3,$5]++'

주로 sort필드 6의 숫자 정렬에 사용됩니다. 다음도 작동합니다.

sort -t$'\t' -k6n,6 file | awk -F\\t '!seen[$3,$5]++'

그러나 출력은 열 3과 5로 그룹화되지 않습니다. awk고유한 열 3/5 쌍을 포함하는 첫 번째 행을 인쇄하는 데 사용됩니다. C 문자열을 지원하지 않는 쉘에서 사용할 수 있습니다 "$(printf '\t')".$'\t'$'...'

awk는 파일을 두 번 처리하여 입력과 동일한 순서를 유지하고 동일한 최소값으로 줄을 유지합니다.

awk '
FNR==NR {if (min[$3,$5]=="" || $6<min[$3,$5]) min[$3,$5]=$6; next} $6==min[$3,$5]
' file file

Question 4

출력은 제안된 순서와 다르므로 순서가 중요하지 않은 경우 다음을 수행할 수 있습니다.

sort -s -k3,3 -k5,5 -k6,6n < in | perl -ane 'print unless $seen{$F[2]}{$F[4]}++' > out

원래 순서를 유지하려면 다음을 실행할 수 있습니다.

nl < in | sort -s -k4,4 -k6,6 -k7,7n | perl -ane 'print unless $seen{$F[3]}{$F[5]}++' | sort -k1,1n | cut -f2- > out

그러나 샘플 출력이아니요원래 순서는 유지됩니다( grep 4ch[9b]_A_001입력 및 출력 샘플에서 볼 수 있듯이).

Answer

출력은 제안된 순서와 다르므로 순서가 중요하지 않은 경우 다음을 수행할 수 있습니다.

sort -s -k3,3 -k5,5 -k6,6n < in | perl -ane 'print unless $seen{$F[2]}{$F[4]}++' > out

원래 순서를 유지하려면 다음을 실행할 수 있습니다.

nl < in | sort -s -k4,4 -k6,6 -k7,7n | perl -ane 'print unless $seen{$F[3]}{$F[5]}++' | sort -k1,1n | cut -f2- > out

그러나 샘플 출력이아니요원래 순서는 유지됩니다( grep 4ch[9b]_A_001입력 및 출력 샘플에서 볼 수 있듯이).

서로 다른 열에 서로 다른 정보가 포함된 행 추출

답변1

답변2

답변3

답변4

관련 정보