AWSでデータレイクハウスを構築してApache Icebergの更新・履歴管理を検証した
Source: Zenn ·
AWSでデータレイクハウスを構築する場合、どのようなサービスを組み合わせ、データをどのように管理するのか。まずは全体像を把握したくて、小さな検証環境を作ってみました。 今回はAmazon S3、AWS Glue Data Catalog、Amazon Athena、Apache Icebergを組み合わせ、テーブルの作成からデータの追加・更新・削除、過去のスナップショットの参照（Version Travel）、ファイルの最適化まで一通り試しています。 SQLの実行結果だけでなく、S3上のParquetファイルやメタデータも確認しながら、それぞれのサービスの役割とデータが管理される仕組みを...
Frequently Asked Questions
What is AWSでデータレイクハウスを構築してApache Icebergの更新・履歴管理を検証した?
AWSでデータレイクハウスを構築してApache Icebergの更新・履歴管理を検証した is a article discovery curated from Zenn. AWSでデータレイクハウスを構築する場合、どのようなサービスを組み合わせ、データをどのように管理するのか。まずは全体像を把握したくて、小さな検証環境を作ってみました。 今回はAmazon S3、AWS Glue Data Catalog、Amazon Athena、Apache Icebergを組み合わせ、テーブルの作成からデータの追加・更新・削除、過去のス
How can I access or experience this?
You can experience this content directly on its original host (Zenn) by clicking the "Open Original" button.
Where does this content come from?
Curated from Zenn by the OnSuggest team to surface the most interesting and serendipitous content on the web.
More like this
All Technology discoveries →米国株式市場が急落。半導体やAI関連が下落、時価総額が400兆円近く消えたとも
これからどうなるの…。2026年11月6日、各社が米国株式市場の急落を報じています。CNN.co.jpは「時価総額で約2兆5000億ドル（約395兆円）が消失した」と、Bloombergは「ナスダック100の時価総額が2兆3000億ドル（約…
ミニキッチンバサミは小回りの利く優等生。料理を仕事にする私の「包丁キャンセル」が進んだ
包丁を使わない調理を快適にするミニキッチンバサミをご紹介します。まな板を出さずに食材をスムーズに切れて、食洗機で丸洗いもできる便利な使い心地を解説します。
「パッケージ版ゲームはあと10年で消える？」Switchのゲームカード主要メーカーが事業縮小へ
任天堂Switchのゲームカード向け主要サプライヤーMacronixの事業撤退報道と、今後の物理ソフト市場への影響を解説します。
iPhone Duoで仕事しよう。相棒にしたいKeychronの折りたたみキーボードが19％オフ
iPhone Duoのベストパートナーとして最適なKeychron B11 Pro折りたたみキーボードがAmazonセールで19％オフ。エルゴノミクス配列と上質な打鍵感で快適なモバイルワークを実現します。
新型iPad mini開封。持ち運びはさらにラクに、コンテンツ視聴はさらに快適になる予感
iPad miniシリーズ史上最も薄く、最も軽いモデルへと進化した、OLEDディスプレイ搭載の新型iPad miniがついに発売されました。耐水性能と防塵性能も兼ね備えているのもポイントです。持ち運びに優れたコンパクトサイズのiPad mi…
潔きシンプルさ。カシオから新作リングウォッチ「CRW-002」登場
CASIOリングウォッチの新作！かわいい！「CRW-002」は、デジタル腕時計「A168」を小型化したモデルです。指輪サイズだけど、ストップウオッチやLEDバックライトを搭載していますよ。堂々の2代目登場初代リングウオッチ「CRW-001」…