タグ: #analytics
GPU・LLM・MLOps・Kubernetes、そしてマインドセット · 9 件
DuckDB にクライアント・サーバープロトコルができた — Quack が変えるものと変えないもの
2026年5月12日、DuckDBチームがQuackを発表しました。HTTPの上に載せたクライアント・サーバープロトコルで、DuckDBインスタンス2つが互いにクライアントとサーバーになり、同じデータベースを複数プロセスから同時に読み書きできるようにします。7年間「インプロセス」をアイデンティティとして掲げてきたプロジェクトが自らサーバーを取り付けたわけで、何が変わったかより何が変わらなかったかのほうが重要です。本稿ではQuackの設計
2026-07-16 · 31 分で読めます #database#duckdb#olap#analytics#data-engineeringDuckDB実践 — ノートPCで完結する組み込み分析の時代
OLAPのSQLiteと呼ばれるDuckDBがなぜこれほど愛されるのか、アーキテクチャから解き明かします。Parquetの直接クエリ、ウィンドウ関数・PIVOT・ASOF JOINの実践例、pandasとのzero-copy連携、dbt-duckdbによる軽量ETL、MotherDuckのハイブリッド実行、そしてPostgresやClickHouseと比較した選択ガイドまで整理します。
2026-06-12 · 22 分で読めます #duckdb#database#olap#analytics#parquetDuckDB Internals Deep Dive — Embedded OLAP、Vectorized Execution、Morsel-Driven Parallelism、Storage Format 完全攻略 (2025)
Pandas を置き換え、ClickHouse を embedded にもたらした解析エンジン、DuckDB。本記事では DuckDB の内部を一から解剖する。Mark Raasveldt と Hannes Mühleisen による 2018 年の CWI プロジェクトから 2024 年の 1.0 リリースまでの歩み、単一ファイル・単一プロセス設計、columnar storage と Vector(1024 行の chunk)、Hy
2026-04-15 · 30 分で読めます #duckdb#olap#database#columnar#vectorizationColumnar ストレージ完全ガイド 2025: Parquet, ORC, Apache Arrow, Dremel — 分析 DB が 10,000 倍速い理由
Snowflake, BigQuery, Spark が TB 規模のデータを数秒でクエリする秘密。Parquet の Dremel 構造、ORC、Apache Arrow のメモリフォーマット、RLE/Dictionary Encoding、ベクトル化実行までを完全解説。
2026-04-15 · 18 分で読めます #columnar-storage#parquet#orc#apache-arrow#dremelClickHouse Internals Deep Dive — MergeTree、Vectorized Execution、分散クエリ、Keeper 完全攻略 (2025)
Cloudflare、Uber、Bloomberg、Yandex が毎日数十兆行を処理する分析エンジン ClickHouse の内部を一から解剖します。Columnar と Row ストレージの根本的な違い、MergeTree ファミリ (Replacing/Summing/Aggregating/Collapsing)、Parts と Mutation、Sparse Primary Index と Data Skipping Inde
2026-04-15 · 22 分で読めます #clickhouse#olap#columnar#mergetree#analyticsElasticsearch完全ガイド2025：検索エンジンからログ分析、ベクトル検索まで
Elasticsearchの全て！転置インデックスの仕組み、マッピング/アナライザ、Query DSL、集約、ELKスタック、ベクトル検索（kNN/HNSW）、クラスタ運用、パフォーマンス最適化、面接対策まで。
2026-03-24 · 27 分で読めます #elasticsearch#search#elk-stack#kibana#logstashDuckDBインメモリ分析とOLAPガイド
OLAPワークロード向けのDuckDBインメモリ分析ガイド。クエリ最適化、データフォーマット、統合パターンを解説します。
2026-03-15 · 39 分で読めます #database#duckdb#olap#analytics#in-memoryDuckDB OLAP分析とデータレイクガイド
DuckDBを使用したOLAP分析とデータレイククエリのガイド。インプロセス分析、Parquet統合、パフォーマンス最適化を解説します。
2026-03-08 · 32 分で読めます #database#duckdb#olap#analytics#data-lakeチャットボット性能モニタリングと対話品質分析：メトリクス設計からA/Bテスト自動化まで
チャットボットシステムの性能モニタリングと対話品質分析の実践ガイド。コアメトリクス設計、LangSmith/Langfuseを活用したトレーシング、自動品質評価パイプライン、A/Bテストフレームワーク構築をコードとともに扱います。
2026-03-08 · 45 分で読めます #chatbot#monitoring#analytics#ab-testing#langsmith