本文へスキップ
onsuggest
ログイン
記事 ja

AWSでデータレイクハウスを構築してApache Icebergの更新・履歴管理を検証した

情報源: Zenn ·

AWSでデータレイクハウスを構築する場合、どのようなサービスを組み合わせ、データをどのように管理するのか。まずは全体像を把握したくて、小さな検証環境を作ってみました。 今回はAmazon S3、AWS Glue Data Catalog、Amazon Athena、Apache Icebergを組み合わせ、テーブルの作成からデータの追加・更新・削除、過去のスナップショットの参照(Version Travel)、ファイルの最適化まで一通り試しています。 SQLの実行結果だけでなく、S3上のParquetファイルやメタデータも確認しながら、それぞれのサービスの役割とデータが管理される仕組みを...

AWSでデータレイクハウスを構築してApache Icebergの更新・履歴管理を検証したとは?

AWSでデータレイクハウスを構築してApache Icebergの更新・履歴管理を検証した is a 記事 discovery curated from Zenn. AWSでデータレイクハウスを構築する場合、どのようなサービスを組み合わせ、データをどのように管理するのか。まずは全体像を把握したくて、小さな検証環境を作ってみました。 今回はAmazon S3、AWS Glue Data Catalog、Amazon Athena、Apache Icebergを組み合わせ、テーブルの作成からデータの追加・更新・削除、過去のス

どのようにアクセスまたは体験できますか?

You can experience this content directly on its original host (Zenn) by clicking the "Open Original" button.

このコンテンツの提供元は?

Curated from Zenn by the OnSuggest team to surface the most interesting and serendipitous content on the web.

キーボードショートカット

前の発見
←P
次の発見
→N
いいね
L
合わない
X
保存
S
このヘルプを表示
?
閉じる
Esc

ショートカットは発見ページで使えます。