AWK를 사용하여 CSV를 구문 분석하고 줄바꿈을 사용하여 bash var에 필드를 반환합니다.

API를 사용하는 새 애플리케이션으로 마이그레이션하려면 비밀번호 데이터베이스(Keepass)의 csv 파일을 사용해야 합니다. API는 JSON 데이터 형식이 필요한 게시 요청을 통해 업데이트됩니다. 내가 해야 할 일은 KeePass CSV를 사용하여 API에 연결된 비밀번호 및 기타 정보를 내보내는 것입니다. 나는 bash와 awk를 사용하여 스크립트를 작성하기로 결정했습니다.

csv 파일의 열은 다음과 같이 배열됩니다.

"Group","Title","Username","Password","URL","Notes","TOTP","Icon","Last Modified","Created"

일부 주석에는 줄 바꿈이 있기 때문에 "설명" 필드는 여러 줄입니다.

"That's an important note, <br/>
some extra infos <br/>
concerning a password"

다음은 데이터 게시를 위한 API 요청의 예입니다. 데이터 필드는 JSON 형식입니다.

이 요청에 필수 필드를 모두 추가하지는 않았지만 이미 작동 방식을 확인하실 수 있습니다. KeePass와 API 필드 이름이 다르게 만들어지기 때문에 일부 필드 이름이 다릅니다.

var1=name
var2=my.name
var3=password456

curl -s --request PUT -u username123:password123 -H 'Content-Type: application/json; charset=utf-8' https://tpm.mydomain.com/index.php/api/v5/passwords/1659.json --data-binary @- <<DATA
{
"name": "$var1",
"username": "$var2",
"password": "$var3"
}
DATA

내 CSV 파일 필드를 필드별로 구문 분석한 다음 행 구문 분석을 완료하면 데이터베이스에 비밀번호를 게시하도록 API 요청을 할 계획입니다. 그런 다음 남은 각 행에 대해 이 작업을 수행합니다.

CSV를 처리하기 위해 제 경우에는 매우 편리하고 유용해 보이는 AWK 언어를 찾았습니다. gsub 명령을 사용하여 내 파일을 여러 번 테스트했는데, 이는 개행 문자(\n)를 바꾸는 데 도움이 되었습니다. 어떻게 더 진행해야 할지 모르겠습니다. 다음은 그 중 일부입니다(첫 번째 항목만 작동합니다:

cat keepass.csv | awk NF=NF RS=/\n/ OFS=\n
cat keepass.csv |awk 'BEGIN {RS=","}{gsub("/\n/","",$0); print $0}'
cat keepass.csv | awk 'BEGIN {RS=""}{gsub(/\n/,"",$6); print $0}'

또한 awk 뒤에 -v를 추가하여 bash var를 공유할 수 있다는 것도 알고 있습니다. 이것은 내가 얻을 수 있는 가장 가까운 코드입니다.

awk -v RS='"\n' -v FPAT='"[^"]*"|[^,]*' '{
print "Row n°", NR, ""
for (i=1; i<=NF; i++) {
sub(/^"/, "", $i)
printf "Field %d, value=[%s]\n", i, $i
}} keepass.csv

내가 찾고 있는 것은 여러 줄 주석을 고려하여 csv의 모든 열을 구문 분석하고 이를 JSON 형식으로 bash의 전역 변수에 입력하는 명령입니다.

다음을 수행하여 빌드해야 한다고 생각합니다.

awk -v 'BEGIN{parsing and replacing keeping '\n' of notes}
if end of row,
return boolean to bash for processing the API requests, wait,
restart the loop}''

저는 스크립팅이 처음이고 몇 줄만 있으면 완료할 수 있다고 생각하지만 어떻게 진행해야 할지 잘 모르겠습니다. 필요한 경우 언어를 Python으로 변경할 수 있으며 코드에 몇 가지 도구를 추가할 수 있습니다.