🙄

Athenaで読んだ記事

2022/06/27に公開

Athenaで

  • パーティションをした外部テーブルを作成
  • CTASを利用

などをしていたときに見た記事。

Amazon Athena で JSON データの読み取りを試みるとエラーが発生するのはなぜですか?
https://aws.amazon.com/jp/premiumsupport/knowledge-center/error-json-athena/

Amazon Athenaでパーティション数が多いJSONのテーブルをParquet形式のテーブルに変換できずにハマった
https://qiita.com/kai_kou/items/cd78d4d17d0b2b8cbc2f

Parquet SerDe
https://docs.aws.amazon.com/ja_jp/athena/latest/ug/parquet-serde.html

Athenaでデータのパーティション化
https://docs.aws.amazon.com/ja_jp/athena/latest/ug/partitions.html

Athena CTAS
https://dev.classmethod.jp/articles/amazon-athena-support-ctas/

MSCK REPAIR TABLE
https://docs.aws.amazon.com/ja_jp/athena/latest/ug/msck-repair-table.html

https://www.web-dev-qa-db-ja.com/ja/amazon-web-services/msck-repair-tableは舞台裏で何をしますか?なぜそれがとても遅いのですか?/807836471/

http://mogile.web.fc2.com/spark/sql-ref-syntax-ddl-repair-table.html

CTAS および INSERT INTO を使用した、100 個を超えるパーティションを持つテーブルの作成
https://docs.aws.amazon.com/ja_jp/athena/latest/ug/ctas-insert-into.html

AWS AthenaのPartitionに関して
https://qiita.com/nakamasato/items/c585c16e53006dd50f13

Create Tables in Amazon Athena from Nested JSON and Mappings Using JSONSerDe
https://aws.amazon.com/jp/blogs/big-data/create-tables-in-amazon-athena-from-nested-json-and-mappings-using-jsonserde/

Discussion