BASH의 3행과 2행 비교

BASH의 3행과 2행 비교

다음과 같은 텍스트 파일이 있습니다.

2014-11-24 12:59:42.169 101.0.0.0 source
2014-11-24 12:59:40.375 104.156.80.0 destination
2014-11-24 12:59:36.729 104.219.48.0 destination
2014-11-24 12:59:40.377 104.37.160.0 source
2014-11-24 12:58:58.902 107.188.128.0 both
2014-11-24 12:59:06.456 107.188.128.0 source
2014-11-24 12:59:06.840 107.192.0.0 both
2014-11-24 12:59:42.043 107.192.0.0 destination
2014-11-24 12:58:58.904 107.192.0.0 source
2014-11-24 12:59:55.488 111.0.0.0 both
2014-11-24 12:59:30.007 111.0.0.0 destination
2014-11-24 12:59:33.209 108.175.32.0 destination
2014-11-24 12:59:06.841 108.175.32.0 source
  • IP 107.188.128.0의 경우 태그는 다음과 같습니다.둘 다와 소스, 그냥 다음과 같이 표시하고 싶습니다.둘 다.
  • IP 107.192.0.0의 경우 태그는 다음과 같습니다.대상과 소스 모두, 그냥 다음과 같이 표시하고 싶습니다.둘 다.
  • IP 111.0.0.0의 경우 태그는 다음과 같습니다.둘 다와 목적지, 그냥 다음과 같이 표시하고 싶습니다.둘 다.
  • IP 107.192.0.0의 경우 태그는 다음과 같습니다.목적지와 소스, 그냥 다음과 같이 표시하고 싶습니다.둘 다.

내가 원하는 출력은 다음과 같아야 합니다.

2014-11-24 12:59:42.169 101.0.0.0 source
2014-11-24 12:59:40.375 104.156.80.0 destination
2014-11-24 12:59:36.729 104.219.48.0 destination
2014-11-24 12:59:40.377 104.37.160.0 source
2014-11-24 12:59:06.456 107.188.128.0 both
2014-11-24 12:59:42.043 107.192.0.0 both
2014-11-24 12:59:55.488 111.0.0.0 both
2014-11-24 12:59:33.209 108.175.32.0 both

IP와 일치하는 최신 날짜와 시간을 출력합니다.

내가 시도한 것은 다음과 같습니다.

awk '{print $3}' input.txt | sort -u | while read line

do 
grep $line input.txt | head -1 
done

단, IP 108.175.32.0에서는 작동하지 않습니다.

이 솔루션은 다음과 같습니다.

  sed '
      N
      s/\([0-9.]\)\s\S\+\n.*\1\s\S\+$/\1 both/
      t
      P
      D
      ' input.txt

하지만 이건 효과가 있어오직108.175.32.0으로.

awk한 번에 원하는 출력을 사용하거나 얻을 수 있습니까 sed? 나는이 시점에서 막혔다.

답변1

이 질문은 다음과 유사합니다.여기약간 수정됨:

| sed '
    :1
    N    #add next line
    s/\([0-9.]\+\)\s\S\+\n.*\s\1\s\S\+$/\1 both/
    t1   #go to point 1 if exchange took place
    P    #print first line from two
    D    #remove first line, return to start
    '

답변2

귀하의 요구 사항을 충족합니까?

 awk 'BEGIN{ip="nothing" 
    time=""
    type=""
 }
 {
    # if the currently processed ip is not the same as the line 
    # being processed then we need to print the data.
    if (ip != $3)
    {
       # if ip == nothing then this is the first line do not print.
       # otherwise we are at a line with a new ip and we should print
       # the data saved from previous lines.
       if(ip != "nothing")
       { 
          print time, ip, type
       }
    # Remove the time update line since we are now doing it outside the
    # if statement so it always updates the time. This will make the 
    # outputted line print the last time stamp for each IP.
    #time=$1" "$2
    ip=$3
    type=$4
    }
    else if (type != $4)
    {
       type="both"
    }
    # no matter what update the time stamp value so that the latest
    # time stamp is kept for any given ip. Putting it after the if
    # that handles when a new ip is found, makes sure that it does not
    # override the value printed for the old ip line.
    time=$1" "$2
 }
 END{
    # Once we reach the end of the input, we still have 
    # the last set of values to print.
    print time, ip, type
 }'

파일을 읽고 IP가 동일하고 유형(des, src, 둘 다)이 다른 두 개의 연속 라인이 있는 경우 유형을 둘 다로 변경하고, 그렇지 않으면 데이터에서 새 IP가 발견되면 인쇄할 유형이 됩니다. 그것은 ...

답변3

주어진 입력 파일foo.txt:

  1. sort처음 세 필드의 숫자,
  2. 사용datamashIP 태그 결합 작업을 실제로 완료하고,
  3. cut중복 필드,
  4. 그런 다음 sed조합 태그를 "모두"로 바꿉니다.

    sort -r -k1n -k2n -k3n foo.txt | \
      datamash -W -f -s -g3 collapse 4 | \
      cut --complement -f4 | \
      sed 's/\t[sdb].*,.*$/\tboth/g'
    

산출:

2014-11-24  12:59:42.169    101.0.0.0       source
2014-11-24  12:59:40.375    104.156.80.0    destination
2014-11-24  12:59:36.729    104.219.48.0    destination
2014-11-24  12:59:40.377    104.37.160.0    source
2014-11-24  12:59:06.456    107.188.128.0   both
2014-11-24  12:59:42.043    107.192.0.0     both
2014-11-24  12:59:33.209    108.175.32.0    both
2014-11-24  12:59:55.488    111.0.0.0       both

답변4

OP에 제공된 코드를 수정했습니다.

awk '{print $3}' input.txt | sort -u | while read line
do 
    echo -n `grep $line input.txt | \
      sort -r | head -1 | \
      grep -oe "[^a-z]*"` ' ' # print latest time stamp
    if [[ $(grep -c $line input.txt) -ge 2 ]];  then 
        echo  'both'
    else
        echo `grep $line input.txt | grep -oe "[a-z]*"`
    fi
done

산출:

2014-11-24 12:59:42.169 101.0.0.0  source
2014-11-24 12:59:40.375 104.156.80.0  destination
2014-11-24 12:59:36.729 104.219.48.0  destination
2014-11-24 12:59:40.377 104.37.160.0  source
2014-11-24 12:59:06.456 107.188.128.0  both
2014-11-24 12:59:42.043 107.192.0.0  both
2014-11-24 12:59:33.209 108.175.32.0  both
2014-11-24 12:59:55.488 111.0.0.0  both

관련 정보