BASH 문자 클래스별로 모든 문자 수 계산

Question 1

file=myfile
for class in alnum alpha blank cntrl digit graph lower print punct space upper xdigit
do
  printf '%7s: %d\n' "$class" "$(tr -Cd "[:${class}:]" < "$file" | wc -m)"
done

asciiword표준 문자 클래스가 아니며 구체적 입니다 bash. 밑줄이 그어져 word있고 문자 0~127이므로 다음과 같이 할 수 있습니다.alnumascii

printf '%7s: %d\n' word "$(tr -Cd "_[:alnum:]" < "$file" | wc -m)"
printf '%7s: %d\n' ascii "$(LC_ALL=C tr -cd '\0-\177' < "$file" | wc -c)"

(coreutils-8.22부터 GNU 구현은 tr멀티바이트 문자와 함께 작동할 수 없습니다.)

최소한 GNU libc를 사용하는 시스템에서는 다음을 실행할 수도 있습니다.

$ locale ctype-class-names
upper;lower;alpha;digit;xdigit;space;print;graph;blank;cntrl;punct;alnum;combining;combining_level3

해당 로캘에 정의된 문자 클래스 목록을 찾습니다.

Answer

file=myfile
for class in alnum alpha blank cntrl digit graph lower print punct space upper xdigit
do
  printf '%7s: %d\n' "$class" "$(tr -Cd "[:${class}:]" < "$file" | wc -m)"
done

asciiword표준 문자 클래스가 아니며 구체적 입니다 bash. 밑줄이 그어져 word있고 문자 0~127이므로 다음과 같이 할 수 있습니다.alnumascii

printf '%7s: %d\n' word "$(tr -Cd "_[:alnum:]" < "$file" | wc -m)"
printf '%7s: %d\n' ascii "$(LC_ALL=C tr -cd '\0-\177' < "$file" | wc -c)"

(coreutils-8.22부터 GNU 구현은 tr멀티바이트 문자와 함께 작동할 수 없습니다.)

최소한 GNU libc를 사용하는 시스템에서는 다음을 실행할 수도 있습니다.

$ locale ctype-class-names
upper;lower;alpha;digit;xdigit;space;print;graph;blank;cntrl;punct;alnum;combining;combining_level3

해당 로캘에 정의된 문자 클래스 목록을 찾습니다.

Question 2

재미있는 수업인 것 같아요! 그것은 무엇입니까?

이렇게 하면 대부분의 경우 sed가 :ascii: 또는 :word:를 지원하지 않는 것 같습니다.

for f in alnum alpha ascii blank cntrl digit graph lower print punct space upper word xdigit
do
  echo "$f: $(sed s/[^[:$f:]]//g b.txt | tr -d '\n' | wc -c)"
done

우리는 모든 것을 삭제하기 위해 sed를 사용합니다와는 별개로문자에 관심을 갖고 빈 줄을 모두 제거하고 남은 문자 수를 얻습니다.

+/-1 또는 10배 오류를 제외하고 비교적 정확해야 합니다.

Answer

재미있는 수업인 것 같아요! 그것은 무엇입니까?

이렇게 하면 대부분의 경우 sed가 :ascii: 또는 :word:를 지원하지 않는 것 같습니다.

for f in alnum alpha ascii blank cntrl digit graph lower print punct space upper word xdigit
do
  echo "$f: $(sed s/[^[:$f:]]//g b.txt | tr -d '\n' | wc -c)"
done

우리는 모든 것을 삭제하기 위해 sed를 사용합니다와는 별개로문자에 관심을 갖고 빈 줄을 모두 제거하고 남은 문자 수를 얻습니다.

+/-1 또는 10배 오류를 제외하고 비교적 정확해야 합니다.

Question 3

어떤 캐릭터가 어떤 범주에 속하는지는 찾아보지 않겠습니다. 아마도 여러분이 알아낼 수 있거나 다른 답변을 찾아볼 수도 있을 것입니다. 하지만 이렇게 하면 파일 문자를 하나도 잃지 않고 명확하게 표현할 수 있습니다.

 _c2o() { od -A n -t o1 -w1 -v | tr -dc '0-9\n' ; } 
 _c2o <file
 163
 150
 072
 040
 167
 141
 162
 156
 151
 156
 147

저는 이 기능을 다양한 방법으로 사용하고 있습니다. 각 줄은 8진수 형식으로 표시되는 바이트입니다. 물론 od매우 구성 가능합니다. 그러나 이 방법을 사용하면 매우 쉽게 목표 값에 대해 행 카운터를 구현할 수 grep있습니다 sed. 그것은 케이크 조각입니다. 그리고 그것은 매우 빠릅니다.

좋아요, 그래서 저는 수업을 계속했습니다:

_classes() { set -- ${classes=alnum alpha blank cntrl digit graph lower print punct space upper xdigit}
        while ${1+:} false ; do
                printf %b $(printf '\\%04o\n' $(seq 0 127)) |
                tr -dc "[:${1}:]" | {
                        printf "$1='"
                        _c2o
                        printf "'\n"
                } ; shift
        done
}

위의 명령을 실행하면 다음과 같은 출력이 표시됩니다.

xdigit='060
061
062
063
064
065
066
067
070
...
'

거기에서 나는 다음과 같은 것을 상상할 것입니다.

eval "$(_classes)"
for class in $classes ; do
    eval "$class=\$(_c2o <file | grep -c -F "$class")"
done

이 문제를 더 잘 처리해야 하지만 이것이 효과가 있습니다.

Answer