タグ: #table-format
GPU・LLM・MLOps・Kubernetes、そしてマインドセット · 2 件
Iceberg v3 ロウリネージ — 行IDはファイルに保存されない
Apache Icebergフォーマットv3は、すべての行に安定した識別子を与えるロウリネージをスペックに組み込みました。これはオプションではなく、v3テーブルであれば無条件でオンになります。ところがこの値はデータファイルには保存されません — テーブルのnext-row-idからスナップショット、マニフェスト、データファイルへと下る継承チェーンを通じて、読み取り時に計算されます。楽観的コミットが再試行される際にデータファイルを書き直さ
2026-07-16 · 31 分で読めます #iceberg#lakehouse#table-format#data-engineering#sparkApache Icebergデータレイクハウステーブルフォーマットガイド
データレイクハウスアーキテクチャのためのApache Icebergテーブルフォーマット総合ガイド。スキーマ進化、パーティショニング、タイムトラベル、クエリ最適化を解説します。
2026-03-14 · 27 分で読めます #apache-iceberg#data-lakehouse#big-data#hadoop#spark