0
会員(無料)になると、いいね!でマイページに保存できます。
米アマゾン・ウェブ・サービス(AWS)は2026年9月30日、データベース「Amazon Aurora PostgreSQL」から、データレイクに置いたApache IcebergやParquet形式のデータを直接検索できるようにしたと発表した。分析エンジンのDuckDBを内蔵し、業務データと過去データをETLなしで1つのクエリで扱える。追加料金はかからない。
米アマゾン・ウェブ・サービス(AWS)は2026年9月30日、リレーショナルデータベース「Amazon Aurora PostgreSQL」で、データレイク上のApache IcebergテーブルやParquetファイルを直接クエリできるようにしたと
発表した。オープンソースの分析エンジン「DuckDB」をAurora PostgreSQLの内部に組み込み、この機能を実現したという。
これまで、Amazon S3に蓄積した過去データを業務システムで使うには、ETL(抽出・変換・ロード)でデータを運用データベースへ複製する必要があった。新機能ではその手間を省き、稼働中の業務データとデータレイクの履歴データを1つのSQL文で組み合わせて扱える。
利用手順は、クラスタで拡張機能「aurora_analytics」を有効にし、S3とAWS Glueへのアクセスを許可するIAMロールを割り当てたうえで、データレイクのファイルを指す外部テーブルを標準的なPostgreSQLの構文で作成する。Parquetファイルの場合、テーブル定義の列を省略してもファイルのメタデータからスキーマを自動で読み取る。
対象となるデータは、AWS Glue Data Catalogで管理するIcebergテーブル、Glueのフェデレーション経由で接続するIceberg REST Catalog互換の外部カタログ、S3上のParquetファイル、S3 Tablesである。性能面では、条件の絞り込みや必要な列だけを読む処理をデータレイク側に押し下げて読み込み量を減らすほか、頻繁に参照するデータをAuroraのインスタンスにキャッシュする。読み込んだ行数やバイト数、キャッシュのヒット状況は専用の関数で確認できるとしている。
用途としてAWSは、現在と過去のデータを並べるリアルタイムダッシュボード、取引データへの履歴情報の付加、AIエージェントによる現行データと過去データの横断的な推論を挙げた。発表ブログを書いたAWSのプリンシパルソリューションアーキテクト、エスラ・カヤバリ氏は、AIエージェントをアプリケーションに組み込むほど、エージェントが必要とするデータを事前に予測して複製しておくのは現実的でなくなると指摘している。
対応するのはAurora PostgreSQLのバージョン17(17.11以降)と18(18.6以降)。すべての商用リージョンとAWS GovCloud(US)で利用でき、機能自体の追加料金はない。利用者は、増えたAuroraのコンピューティング分とS3のリクエスト料金だけを支払う仕組みだ。
評価する
いいね!でぜひ著者を応援してください
会員(無料)になると、いいね!でマイページに保存できます。
関連タグ