top of page
BLOG一覧
検索


Amazon S3 TablesでIcebergテーブルにソート順設定をしてみた
はじめに AWS上で大量データの分析を行いたいとき、RDBやDWHのサービス(例:RDS、Redshiftなど)を用いると非常にコストが高くなってしまうのが悩みの種でした。そこで、S3に配置したファイルをそのまま読み込んで分析を行うオープンテーブルフォーマットの需要が高まってきました。その中でも Apache Iceberg + Amazon S3 Tables(以下、S3 Tables)の組み合わせが昨今のトレンドとなっており、本記事ではS3 TablesのIcebergテーブルにソート順を追加するときに苦戦した点や注意するべき点などをご紹介しようと思います。 ※本記事は 2025年11月時点 の情報に基づいて記載しています。AWSのアップデートなどにより、現在の仕様とは異なる可能性がありますので、その点はご了承ください。 S3 Tablesとは? S3 Tables は、分析ワークロードに最適化された表形式データをS3上で直接管理できるサービスです。2024年12月のre:Invent 2024でプレビュー発表され、2025年初頭に一般提供

Lipton
1 日前読了時間: 6分
bottom of page

