태그: #analytics
GPU·LLM·MLOps·쿠버네티스, 그리고 마음가짐에 관한 글 · 10 편
DuckDB에 클라이언트-서버 프로토콜이 생겼다 — Quack이 바꾸는 것과 바꾸지 않는 것
2026년 5월 12일 DuckDB 팀이 Quack을 발표했습니다. HTTP 위에 얹은 클라이언트-서버 프로토콜로, DuckDB 인스턴스 두 개가 서로 클라이언트와 서버가 되어 같은 데이터베이스를 여러 프로세스에서 동시에 읽고 쓸 수 있게 합니다. 7년 동안 "인프로세스"를 정체성으로 내세운 프로젝트가 스스로 서버를 붙인 셈이라, 무엇이 바뀌었는지보다 무엇이 안 바뀌었는지가 더 중요합니다.
2026-07-16 · 31 분 읽기 #database#duckdb#olap#analytics#data-engineeringDuckDB 실전 — 노트북에서 끝내는 임베디드 분석의 시대
OLAP의 SQLite라 불리는 DuckDB가 왜 이렇게 사랑받는지 아키텍처부터 풀어봅니다. Parquet 직접 쿼리, 윈도우 함수와 PIVOT과 ASOF JOIN 실전 예제, pandas와의 zero-copy 연동, dbt-duckdb 기반 경량 ETL, MotherDuck 하이브리드 실행, 그리고 Postgres와 ClickHouse 대비 선택 가이드까지 정리합니다.
2026-06-12 · 24 분 읽기 #duckdb#database#olap#analytics#parquet컬럼 지향 스토리지 완전 가이드 2025: Parquet, ORC, Apache Arrow, Dremel — 분석 DB가 10,000배 빠른 이유
Snowflake, BigQuery, Spark가 수 TB 데이터를 수 초에 쿼리하는 비결. Parquet의 Dremel 기반 구조, ORC, Apache Arrow의 메모리 포맷, RLE/Dictionary 압축, 벡터화 실행까지 720줄로 완전 분석한다.
2026-04-15 · 40 분 읽기 #columnar-storage#parquet#orc#apache-arrow#dremelClickHouse Internals Deep Dive — MergeTree, 벡터화 실행, 분산 쿼리, Keeper 완전 정복 (2025)
Cloudflare, Uber, Bloomberg, Yandex가 매일 수십조 행을 처리하는 분석 엔진, ClickHouse. 이 글은 ClickHouse의 내부를 처음부터 해부합니다. 컬럼나 vs 로우 기반의 근본 차이, MergeTree 엔진 패밀리(Replacing/Summing/Aggregating/Collapsing), Part와 Mutation, Sparse Primary Inde
2026-04-15 · 38 분 읽기 #clickhouse#olap#columnar#mergetree#analyticsDuckDB Internals Deep Dive — 임베디드 OLAP, 벡터화 실행, Morsel-Driven 병렬, Storage Format 완전 정복 (2025)
Pandas를 대체하고 ClickHouse를 임베디드로 가져온 분석 엔진, DuckDB. 이 글은 DuckDB의 내부를 처음부터 해부합니다. Mark Raasveldt와 Hannes Mühleisen의 2018년 CWI 프로젝트부터 2024년 1.0 릴리스까지의 여정, 단일 파일 단일 프로세스 설계, 컬럼나 저장 + Vector(1024 행 chunk), HyPer 스타일 Morsel-Dri
2026-04-15 · 32 분 읽기 #duckdb#olap#database#columnar#vectorizationClickHouse MergeTree 완벽 가이드 — Columnar, Sparse Index, Part, Materialized View 모든 것 (2025)
ClickHouse MergeTree의 모든 것 — Columnar 저장의 물리적 구조, Part와 Granule과 Sparse Primary Index, ORDER BY가 왜 중요한가, Projection과 Skip Index, Materialized View로 실시간 집계, ReplacingMergeTree/SummingMergeTree/AggregatingMergeTree 변형, Dis
2026-04-15 · 33 분 읽기 #clickhouse#olap#columnar#mergetree#analyticsElasticsearch 완전 가이드 2025: 검색 엔진부터 로그 분석, 벡터 검색까지
Elasticsearch의 모든 것! 역색인 원리, 매핑/분석기, 쿼리 DSL, 집계, ELK 스택, 벡터 검색(kNN), 클러스터 운영, 성능 최적화, 면접 질문까지.
2026-03-24 · 29 분 읽기 #elasticsearch#search#elk-stack#kibana#logstashDuckDB 인메모리 분석 엔진 실전 가이드: OLAP 워크로드를 로컬에서 처리하기
DuckDB의 벡터화 실행 엔진과 컬럼 기반 아키텍처를 깊이 분석하고, Python/Node.js 통합, Parquet/CSV 직접 쿼리, S3 원격 데이터 소스 연동, 메모리 관리 전략과 실패 복구까지 실전 운영 중심으로 다룹니다.
2026-03-15 · 39 분 읽기 #database#duckdb#olap#analytics#in-memoryDuckDB 분석 엔진 실전 가이드: 로컬 OLAP부터 데이터 레이크 통합까지
DuckDB의 아키텍처와 벡터화 실행 엔진을 분석하고, Parquet·CSV·JSON 데이터 소스 통합, Python/SQL 활용법, ClickHouse·BigQuery 대비 벤치마크, 프로덕션 운영 패턴을 실전 코드와 함께 다룹니다.
2026-03-08 · 32 분 읽기 #database#duckdb#olap#analytics#data-lake챗봇 성능 모니터링과 대화 품질 분석: 메트릭 설계부터 A/B 테스트 자동화까지
챗봇 시스템의 성능 모니터링과 대화 품질 분석 실전 가이드. 핵심 메트릭 설계, LangSmith/Langfuse를 활용한 트레이싱, 자동 품질 평가 파이프라인, A/B 테스트 프레임워크 구축을 코드와 함께 다룹니다.
2026-03-08 · 45 분 읽기 #chatbot#monitoring#analytics#ab-testing#langsmith