タグ: #batch-processing
GPU・LLM・MLOps・Kubernetes、そしてマインドセット · 1 件
大規模データ処理完全ガイド:COPY、チャンクバッチ、そして元に戻せる作業
PostgreSQL 18で数億行を投入・更新・削除する作業を安全に行う方法をまとめます。COPYのオプションと既定値、ドキュメントが推奨する初期ロード手順、ONERRORで不良行を許容する方法、大量のUPDATEとDELETEをチャンクに分割する設計、削除後のデッドタプル処理とVACUUM FULLを避けるべき理由、そして再開可能なバックフィル作業を作る方法までを扱います。
2026-08-15 · 33 分で読めます #database#postgresql#batch-processing#data-loading#operations