タグ: #elasticsearch
GPU・LLM・MLOps・Kubernetes、そしてマインドセット · 11 件
データストアとキューの世代交代 — ライセンス、フォーク、そしてAtticへ行ったプロジェクト
データ層で場所を譲った、あるいは配布条件が変わったプロジェクト10個を、公式発表とApache Atticの記録だけを根拠に整理します。Redis、Elasticsearch、MongoDBのライセンス変更とそこから生まれたValkey、OpenSearchのフォークを事実だけで扱い、KafkaからZooKeeperが外れた経緯、Apache Atticへ移管されたSqoop、Oozie、Giraph、Tajo、会社の終了後にLinux
2026-08-12 · 17 分で読めます #open-source#database#kafka#redis#elasticsearchログを検索可能に、そして破産しないように — 構造化、マッピング爆発、保持、そして本当のコスト
ログのコストがコンピュートのコストを上回る瞬間は、たいていの組織に訪れます。その瞬間を遅らせるのは圧縮率ではなく、何をフィールドにするかという判断です。構造化ログのフィールド設計から、OpenSearchのマッピング爆発が実際にクラスタを殺す経路、インデックステンプレートとISMでライフサイクルを制御する方法、原則のあるサンプリングと保持階層までを扱います。最後にログでメトリクスを真似したときにかかるコストを数字で計算します。OpenS
2026-08-02 · 23 分で読めます #observability#logging#opensearch#elasticsearch#costなぜベクトルインデックスの既定値はHNSWからディスクへ変わったのか — Elasticsearch bbq_diskのトレードオフ
Elasticsearch 9.4(2026-05-05)から、floatベクトルの既定インデックスタイプがbbqdisk、つまりディスクベースのIVFに変わりました。1年足らずの間に既定値はint8hnswからbbqhnswへ、さらにグラフではないディスクインデックスへと二度移り変わったわけですが、この移行はベクトル検索の本当のコストが計算ではなくRAMにあるという判断を含んでいます。本稿では、HNSWのメモリ崖がベンダーベンチマーク
2026-07-16 · 40 分で読めます #vector-database#elasticsearch#ann-index#quantization#hnswNoSQL・異種データマイグレーション — RDBとMongoDBと多様なストアの間で
リレーショナルとドキュメントはデータモデルそのものが異なります。RDBからドキュメントへ、ドキュメントからRDBへ移すとき何を再設計すべきか、ストラングラーと二重書き込みとCDCでどう無停止移行するか、そして一貫性をどこまで譲るかを実務の観点で整理します。
2026-06-16 · 26 分で読めます #database#migration#nosql#mongodb#cdcセルフホスト検索エンジン 2026 完全ガイド - Meilisearch・Typesense・Manticore・OpenSearch・Vespa・ParadeDB・Orama・Elasticsearch 徹底解説
2026年の検索エンジン地形は、Algoliaが築いたマネージド市場の上に、Meilisearch・Typesense・Manticore・OpenSearch・Vespa・ParadeDB・Oramaといったセルフホスト型の選択肢が爆発的に増えた結果、再び塗り替えられた。本稿では各エンジンの強み・弱み・料金・性能・言語トークナイザ・RAG適合性まで一気に整理する。
2026-05-16 · 29 分で読めます #japanese#search-engines#meilisearch#typesense#manticore次世代検索エンジン 2026 — Meilisearch・Typesense・Elasticsearch・OpenSearch・Quickwit・Vespa 徹底比較(Elastic 後の風景)
2026 年の検索エンジン風景は、Elasticsearch という一点から始まり四方に散らばった。Meilisearch と Typesense は in-app 検索を『シンプルさの美学』に持ち込み、AWS は OpenSearch でライセンス回避路を作り、Quickwit は S3-native なログ検索で登場した末に Datadog に買収された。Vespa は Spotify・Wikipedia・Pinterest が使う
2026-05-14 · 29 分で読めます #search-engine#meilisearch#typesense#elasticsearch#opensearchElasticsearch と OpenSearch、Lucene の内部 — Inverted Index、BM25、Sharding、Vector Search、Hybrid RAG まで (2025)
検索はなぜ難しいのか?Lucene の Segment と Merge、Inverted Index の数学、BM25 が TF-IDF をどう超えたか、primary/replica shard と routing、Ingest パイプライン、Query DSL の迷宮、kNN と HNSW、2021 年の Elastic vs AWS ライセンス戦争と OpenSearch フォーク、Hybrid Search で完成する RAG
2026-04-15 · 14 分で読めます #elasticsearch#opensearch#lucene#search#vector-searchElasticsearch完全ガイド2025：検索エンジンからログ分析、ベクトル検索まで
Elasticsearchの全て！転置インデックスの仕組み、マッピング/アナライザ、Query DSL、集約、ELKスタック、ベクトル検索（kNN/HNSW）、クラスタ運用、パフォーマンス最適化、面接対策まで。
2026-03-24 · 27 分で読めます #elasticsearch#search#elk-stack#kibana#logstashELKスタック基盤ログ収集·分析パイプライン: Elasticsearch·Fluentd·Kibanaプロダクション構築と最適化
ELK/EFKスタックのアーキテクチャとElasticsearchクラスタ設計、シャード・レプリカ戦略、ILM（Index Lifecycle Management）設定、Fluentd/Fluent Bitログ収集パイプライン構成、Kibanaダッシュボード可視化、パフォーマンスチューニングと障害対応まで、プロダクション環境のログパイプライン構築の全過程を解説します。
2026-03-12 · 15 分で読めます #observability#elk-stack#elasticsearch#fluentd#kibanaOpenSearch 運用・管理・インデックス設計 実践ガイド 2026
OpenSearchクラスタ運用者向けのインデックス設計、シャード/レプリカ戦略、ISMロールオーバーライフサイクル、モニタリング・アラート、障害対応、セキュリティ強化、マイグレーションまで、実践的なAPI例とともに総まとめ。
2026-03-04 · 28 分で読めます #database#opensearch#elasticsearch#index-design#operations-managementFluent Bit完全ガイド：軽量ログプロセッサのアーキテクチャ、設定、Kubernetes連携を総まとめ
Fluent Bitの軽量アーキテクチャとパイプライン（Input→Parser→Filter→Buffer→Output）構造から、Kubernetes DaemonSetデプロイ、ログルーティング、パーサー設定、Elasticsearch・Loki・S3連携、Fluentd比較、パフォーマンスチューニング、プロダクション運用ガイドまでを総まとめする。
2026-03-01 · 48 分で読めます #fluent-bit#logging#observability#kubernetes#fluentd