쉘 파이프라인을 통해 CSV 데이터를 SQLite 테이블에 삽입하는 방법은 무엇입니까?

Question 1

여전히 사용하는 더 간단한 솔루션을 찾았습니다.sqlite3 .import, 그러나 이는 읽거나 임시로 명명된 파이프를 읽지 않습니다 /dev/stdin. 오히려 이와 .import관련이 있다.파이프라인 운영자호출은 cat -표준 입력에서 직접 읽습니다.

#!/bin/bash

function csv_to_sqlite() {
  local database_file_name="$1"
  local table_name="$2"
  sqlite3 -csv $database_file_name ".import '|cat -' $table_name"
}

database_file_name=$1
table_name=$2

csv_to_sqlite "$database_file_name" "$table_name"

이는 Windows 명령 셸에서는 작동하지 않습니다.

Answer

여전히 사용하는 더 간단한 솔루션을 찾았습니다.sqlite3 .import, 그러나 이는 읽거나 임시로 명명된 파이프를 읽지 않습니다 /dev/stdin. 오히려 이와 .import관련이 있다.파이프라인 운영자호출은 cat -표준 입력에서 직접 읽습니다.

#!/bin/bash

function csv_to_sqlite() {
  local database_file_name="$1"
  local table_name="$2"
  sqlite3 -csv $database_file_name ".import '|cat -' $table_name"
}

database_file_name=$1
table_name=$2

csv_to_sqlite "$database_file_name" "$table_name"

이는 Windows 명령 셸에서는 작동하지 않습니다.

Question 2

두 가지 방법:

샘플 test.csv파일:

GroupName,Groupcode,GroupOwner,GroupCategoryID 
System Administrators,sysadmin,13456,100
Independence High Teachers,HS Teachers,,101
John Glenn Middle Teachers,MS Teachers,13458,102
Liberty Elementary Teachers,Elem Teachers,13559,103
1st Grade Teachers,1stgrade,,104
2nd Grade Teachers,2nsgrade,13561,105
3rd Grade Teachers,3rdgrade,13562,106
Guidance Department,guidance,,107

1) 그리고csvkit(CSV 변환 및 작업을 위한 명령줄 도구 세트)

수입하다SQLite3데이터 베이스:

csvsql --db sqlite:///test_db --tables test_tbl --insert test.csv

입력 csv 파일이 지정되지 않으면 stdin에서 csv 데이터를 허용합니다.

... | csvsql --db sqlite:///test_db --tables test_tbl --insert

데이터 추출SQLite데이터 베이스:

sql2csv --db sqlite:///test_db --query 'select * from test_tbl limit 3'

산출:

GroupName,Groupcode,GroupOwner,GroupCategoryID 
System Administrators,sysadmin,13456,100
Independence High Teachers,HS Teachers,,101
John Glenn Middle Teachers,MS Teachers,13458,102

2) 그리고SQLite3명령줄 도구(사용자가 SQL 문을 수동으로 입력하고 실행할 수 있음)SQLite데이터 베이스)

" .import" 명령을 사용하여 CSV(쉼표로 구분된 값) 데이터를 SQLite 테이블로 가져옵니다. " .import" 명령에는 두 개의 매개변수, 즉 CSV 데이터를 읽어올 디스크 파일 이름과 CSV 데이터를 삽입할 SQLite 테이블 이름이 있습니다.

" " 명령을 실행하기 전에 "모드"를 "csv"로 설정하는 것이 중요합니다 .import. 이는 명령줄 셸이 입력 파일 텍스트를 다른 형식으로 해석하는 것을 방지하는 데 필요합니다.

$ sqlite3
sqlite> .mode csv
sqlite> .import test.csv test_tbl
sqlite> select GroupName,Groupcode from test_tbl limit 5;
"System Administrators",sysadmin
"Independence High Teachers","HS Teachers"
"John Glenn Middle Teachers","MS Teachers"
"Liberty Elementary Teachers","Elem Teachers"
"1st Grade Teachers",1stgrade
sqlite>

Answer