🖥

bq load コマンドの基本

2023/08/26に公開

フォーマット

次の形式でコマンドを叩く。三つとも必須。

bq load [BQのテーブル名] [リソースファイルのパス] [スキーマ指定]

たとえばこういうファイルがある場合。

Alice,20
Bob,21
Carol,22

次のコマンドでBQにテーブルを作れる。

bq load bq_dataset.table example.txt name:string,age:integer

ちなみにデフォルトの動作は「追記」なので、二回実行すると同じデータが作られる。

置換する場合は --replace を指定すること。

bq load --replace bq_dataset.table example.txt name:string,age:integer

bq load bq_dataset.table example.txt name:string,age:integer

区切り文字がカンマ以外の場合は、--field_delimiter を指定する必要がある。

Alice 20
Bob 21
Carol 22

bq load --field_delimiter=' ' bq_dataset.table example.txt name:string,age:integer

「リソースファイルのパス」は GCS（GoogleCloudStorage）上のパスでも良い。（こちらの方が高速）
ただし「スキーマファイルのパス」はローカルのものでなければいけない。

bq load bq_dataset.table gs://bucket/log.gz /tmp/schema.json

非同期で実行する。

何か質問、悩み事、相談などあればLINEオープンチャットもご利用ください。

2016-11-22