태그: #yarn
GPU·LLM·MLOps·쿠버네티스, 그리고 마음가짐에 관한 글 · 9 편
위치 인코딩 — RoPE와 컨텍스트 확장의 대가
ropetheta 하나가 문맥 길이에 어떻게 작용하는지 파장 계산으로 보여 주고, Llama 3의 500000, Qwen3의 ABF, DeepSeek-V3와 Kimi K2의 YaRN 설정, GLM-4.5의 부분 회전을 실제 config로 비교합니다. 긴 컨텍스트가 왜 공짜가 아닌지 프리필 연산량과 캐시 비용으로 정리합니다.
2026-08-12 · 11 분 읽기 #ai-papers#model-internals#rope#positional-encoding#long-contextHadoop 아키텍처 다시 보기 — HDFS, YARN, 그리고 그 이후
Hadoop의 핵심인 HDFS와 YARN, 그리고 MapReduce의 동작 원리를 다이어그램으로 다시 정리합니다. 오브젝트 스토리지와 클라우드, 레이크하우스 시대에 Hadoop의 역할이 어떻게 바뀌었는지, 그리고 오늘날 Hadoop을 어떻게 이해해야 하는지를 살펴봅니다.
2026-06-27 · 55 분 읽기 #hadoop#hdfs#yarn#mapreduce#lakehouse모던 Hadoop & 빅데이터 생태계 2026 완벽 가이드 - Hadoop 3.4 · Spark 4 · Hive 4 · Kafka 4 · Flink 2 · Iceberg · Trino 심층 분석
2026년 Hadoop과 빅데이터 생태계는 '죽었다'가 아니라 '재배치되었다'. Hadoop 3.4의 Erasure Coding과 Ozone, Spark 4의 ANSI 모드와 Spark Connect, Hive 4의 Iceberg 통합, Kafka 4의 KRaft GA와 tiered storage, Flink 2의 disaggregated state, Iceberg 1.8과 REST 카탈로그
2026-05-16 · 45 분 읽기 #hadoop#spark#hive#kafka#flinkHadoop 에코시스템 실전 가이드: HDFS, MapReduce, YARN 핵심 정리
Hadoop의 핵심 구성 요소인 HDFS, MapReduce, YARN의 아키텍처와 동작 원리를 이해하고, 클러스터 구축부터 성능 튜닝, 모니터링까지 실전 운영 노하우를 다루는 종합 가이드.
2026-03-08 · 17 분 읽기 #hadoop#hdfs#mapreduce#yarn#big-data하둡 생태계 실전 가이드: HDFS·YARN·MapReduce 운영 기준
HDFS 용량 관리, YARN 큐 설계, MapReduce 잡 튜닝 등 하둡 클러스터를 안정적으로 운영하기 위한 실전 기준과 체크리스트.
2026-03-08 · 29 분 읽기 #hadoop#hdfs#yarn#mapreduce#databaseLLM 컨텍스트 윈도우 확장 기술 완벽 가이드: RoPE, ALiBi, YaRN부터 Ring Attention까지
LLM의 컨텍스트 윈도우를 512에서 2M 토큰까지 확장하는 기술을 분석합니다. RoPE의 수학적 원리부터 NTK-aware, YaRN, Ring Attention까지 실전 코드와 함께 다룹니다.
2026-03-03 · 11 분 읽기 #llm#context-window#rope#yarn#positional-encodingHadoop의 OS 'Yarn'이란 무엇인가?
Hadoo에서 동작하여 클러스터 자원관리와 분산처리 어플리케이션을 실행할 수 있는 플랫폼인 YARN(Yet Another Resource Negotiator)에 대해서 알아봅니다.
2023-09-02 · 6 분 읽기 #hadoop#yarnSpark on YARN 설치 방법
Spark on YARN을 설치하는 법을 알아본다.
2022-11-26 · 7 분 읽기 #hadoop#spark#yarnSecured(Kerberized) YARN 구축하기.
YARN 에 Kerberos 보안을 적용하는 법을 알아본다.
2022-10-21 · 1 분 읽기 #hadoop#kerberos#yarn