Parquet S3 FDW 0.3.0 版本發布
發表於 2022-06-23,作者 Toshiba
相關開源專案
我們剛剛發布了 Amazon S3 上 Parquet 檔案的外部資料封裝器(Foreign Data Wrapper)0.3.0 版本。
此版本可與 PostgreSQL 13 和 14 搭配使用。
此版本改進了以下項目(相較於 0.2.1):
- 支援無綱要(schemaless)功能
- 合併 parquet_fdw 變更(- 2021 年 12 月 17 日)
此 FDW 支援以下功能:
- 支援 SELECT 本機檔案系統或 Amazon S3 上的 Parquet 檔案
- 支援使用 MinIO 存取,而非 Amazon S3。
- 允許控制外部伺服器在交易完成後是否保持連線開啟。此功能由 keep_connections 控制,預設為開啟 (on)。
- 支援 parquet_s3_fdw 函數 parquet_s3_fdw_get_connections(),用於報告開啟的外部伺服器連線。
- 支援透過指定目錄路徑,為目錄中的多個檔案建立外部資料表。
- 支援無綱要模式,允許透過使用 jsonb 類型的欄位存取資料檔案中的元素,而無需更改資料表定義。
此版本由 Toshiba Software Engineering & Technology Center 開發。
請參閱儲存庫以了解詳細資訊。
原始碼儲存庫:https://github.com/pgspider/parquet_s3_fdw