Aurora PostgreSQL から Databricks Delta Lake テーブルにクエリする
- Aurora PostgreSQL から Databricks Delta Lake テーブルにクエリできることが確認された
- Iceberg REST Catalog API 経由で Glue catalog federation を利用し、S3 に保存された Delta Lake テーブルを Aurora から SELECT できる。ARRAY / MAP / STRUCT 型は非対応で、prepared statement でデータ更新が反映されない現象が確認された
- Aurora のロールに S3 アクセス権を付与する必要があり、Unity Catalog の row filter や column mask は適用されない。データの鮮度を気にする場合は prepared statement の使用に注意が必要
Aurora PostgreSQL から Databricks Delta Lake テーブルにクエリする


