줄 번호를 사용하여 중복된 단어 철자 오류를 찾는 명령줄 방법

고쳐 쓰다: 행 번호 요구 사항을 명확히 하고 일부 긴 내용을 줄입니다.

명령줄에서 다음과 같은 방법이 있습니까?

• 영문 텍스트 파일 확인
• 반복되는 단어의 맞춤법 오류를 찾아보세요.
• 그리고 발견된 줄 번호,

문제를 바로잡는 데 도움을 주려고요?

실시예 1

현재 기사나 기타 영어 작문에 도움을 주어 aspell -c text.txt철자 오류를 찾는 데 도움이 됩니다. 하지만 실수가 의도치 않게 단어를 연속적으로 반복하는 경우에는 도움이 되지 않습니다.

highlander_typo.txt:

There can be only one one.

달리기 aspell:

$ aspell -c highlander_typo.txt

아마도 aspell이것은 문법 검사기가 아닌 맞춤법 검사기이기 때문에 철자가 틀린 단어를 반복하는 것은 의도된 기능 범위를 벗어납니다. 따라서 aspell개별 단어 철자에 관한 한 "오류"가 없기 때문에 파일이 검사를 통과하게 됩니다 .

올바른 문장은There can be only one., 두 번째 one는 의도하지 않은 반복 단어 철자 오류입니다.

실시예 2

그러나 또 다른 경우는 다음과 같습니다 kylie_minogue.txt.

La la la

여기서 반복하는 것은 작가의 일부이므로 오타가 아닙니다.노래 가사.

따라서 솔루션은 자체적으로 어떤 것도 가정하고 "수정"해서는 안 됩니다. 그렇지 않으면 의도적으로 반복되는 단어를 덮어쓸 수 있습니다.

예 3: 여러 줄

jefferson_typo.txt:

He has has refused his Assent to Laws, the most wholesome and necessary
for the public good.
He has forbidden his Governors to pass Laws of immediate and
and pressing importance, unless suspended in their operation till his
Assent should be be obtained; and when so suspended, he has utterly
neglected to attend to them.

다음에서 수정됨독립선언서

위의 6줄에서

• 1: He has has refused이어야 합니다 He has refused. 두 번째는 has반복되는 단어 맞춤법 오류입니다.
• 5: should be be obtained이어야 합니다 should be obtained. 두 번째는 be반복되는 단어 맞춤법 오류입니다.

그런데 세 번째로 반복되는 단어의 철자가 틀린 것을 발견하셨나요?

• 삼:... immediate and
• 4:and pressing ...

이 역시 다른 줄에 있더라도 여전히 같은 영어 문장의 일부인데, 이전 줄의 끝에 단어가 실수로 다음 줄의 시작 부분에 추가되는 경우가 있기 때문에 반복 단어 철자 오류입니다. 반복은 텍스트의 양면에서 발생하기 때문에 육안으로는 감지하기 어렵습니다.

예상 출력

• 유사한 프로세스를 가지고 있지만 aspell -c반복되는 단어를 감지할 수 있는 대화형 프로그램, 또는

• 줄 번호와 의심되는 반복 단어를 추출할 수 있는 스크립트 또는 명령 조합입니다. 이 정보를 사용 vim하면 반복되는 단어로 이동하고 적절한 위치에 수정하는 등 편집기 사용이 더 쉬워집니다 .

위의 여러 줄을 사용하면 jefferson_typo.txt원하는 출력은 다음과 유사합니다.

1: has has
3: and
4: and
5: be be

또는:

1: He [has has] refused his Assent to Laws, the most wholesome and necessary
3: He has forbidden his Governors to pass Laws of immediate [and]
4: [and] pressing importance, unless suspended in their operation till his
5: Assent should [be be] obtained; and when so suspended, he has utterly

실제로 위의 반복과 같이 줄 사이나 줄 간에 단어가 반복되는 어려운 경우를 어떻게 표시해야 할지 잘 모르겠습니다. and따라서 솔루션이 이와 정확히 유사하지 않더라도 걱정하지 마세요.

그러나 위에서 언급한 대로 다음과 같이 표시되기를 바랍니다.

• 관련 원시 입력의 줄 번호
• 반복되는 내용에 주의를 집중시키는 방법으로, 텍스트 줄이 너무 긴 경우 특히 유용합니다.
• 컨텍스트를 제공하기 위해 전체 행이 표시되는 경우(출처: @Wildcard), 반복되는 단어를 고유한 방식으로 렌더링할 수 있는 방법이 필요합니다. 여기에 표시된 예에서는 중복 항목을 ASCII 문자로 묶어 표시합니다 [ ]. 또는 grep --colors=always컬러 터미널에 표시하기 위해 선을 모방한 일치 항목을 색칠 할 수도 있습니다.

기타 고려사항

• 텍스트는 일반 텍스트 파일로 남겨두어야 합니다.
• GUI 솔루션을 제공하지 말고 텍스트 솔루션만 제공하십시오. ssh -XX11 전달이 신뢰할 수 없으므로 다시 편집해야 합니다.ssh

실패한 시도

중복된 단어를 찾으려는 생각이 있었기 uniq때문에 먼저 중복 단어 인식이 한 줄에서 작동하도록 하는 방법을 알아내는 것이 계획이었습니다.

사용하려면 uniq먼저 한 줄에 있는 단어를 한 줄에 한 단어로 변환해야 합니다.

$ tr ' ' '\n' < highlander_typo.txt
There
can
be
only
one
one.

안타깝게도:

$ tr ' ' '\n' < highlander_typo.txt | uniq -D

아무것도 없습니다.

-D이는 일반적으로 중복 항목을 표시하는 옵션의 경우 입력이 정확하게 중복 행이어야 하기 때문입니다 . 불행하게도 .단어 끝에 마침표를 반복하면 one이 사실이 무효화됩니다. 그냥 다른 라인처럼 보이는데 임의의 구두점(예: 이 마침표)을 어떻게 해결하고 tr처리 후에 다시 추가할지 잘 모르겠습니다.

이것은 실패했습니다. 그러나 성공하면 줄의 줄 번호를 포함하는 방법이 필요합니다. 입력 파일에 수백 개의 줄이 있을 수 있으므로 이는 입력 파일의 어느 줄에서 중복 단어가 감지되었는지 나타내는 데 도움이 됩니다.

이 한 줄 처리는 아마도 파일의 모든 줄을 처리할 수 있도록 일종의 한 줄씩 여러 줄 처리를 수행하는 상위 루프의 일부일 것입니다. 그러나 불행하게도 한 줄을 넘어서도 중복 단어 인식이 문제가 되었습니다.