2026-05-17•백엔드 데이터 인프라 백엔드 데이터 인프라 108편. Kafka Log 파일의 바이트 단위 구조 — partition 디렉토리·segment 파일·index·timeindex 파일·offset 의 의미·binary…
[작성자:] 스마트라이프
백엔드 데이터 인프라 107편 — Kafka Log Compaction (Key 별 최신만 유지)
2026-05-17•백엔드 데이터 인프라 백엔드 데이터 인프라 107편. Kafka Log Compaction — cleanup.policy=compact 의 메커니즘. 키별 최신 값만 유지·tombstone 으로 삭제·dirty…
백엔드 데이터 인프라 106편 — Kafka Tiered Storage (S3 · 무한 Retention)
2026-05-17•백엔드 데이터 인프라 백엔드 데이터 인프라 106편. Kafka Tiered Storage — local SSD + remote S3/HDFS 2-tier 모델. RemoteStorageManager·RemoteLogMetadataManager·local.retention vs…
백엔드 데이터 인프라 105편 — Kafka KRaft (Zookeeper 의 후속 · Quorum 운영)
2026-05-17•백엔드 데이터 인프라 백엔드 데이터 인프라 105편. Kafka KRaft — Kafka 4.0+ 의 기본 모드. Zookeeper 제거의 의미·Raft 합의 알고리즘·controller…
백엔드 데이터 인프라 104편 — Kafka Hardware · OS (CPU·메모리·디스크·튜닝)
2026-05-17•백엔드 데이터 인프라 백엔드 데이터 인프라 104편. Kafka Hardware·OS 권장 — CPU·메모리·디스크 사양, OS tuning (file descriptor·vm.max_map_count·socket buffer), RAID vs…
백엔드 데이터 인프라 103편 — Kafka Geo-Replication (MirrorMaker 2)
2026-05-17•백엔드 데이터 인프라 백엔드 데이터 인프라 103편. Kafka Geo-Replication — MirrorMaker 2 의 모든 것. 4가지 connector(MirrorSource·MirrorCheckpoint·MirrorHeartbeat·MirrorClient), Active-Active vs Active-Passive…
백엔드 데이터 인프라 102편 — Kafka 다중 데이터센터 (Stretched · Local + Mirror)
2026-05-17•백엔드 데이터 인프라 백엔드 데이터 인프라 102편. Kafka 다중 데이터센터 운영 — Stretched Cluster vs Local Cluster + Mirror 두…
백엔드 데이터 인프라 101편 — Kafka Multi-tenancy (Quota · Naming · ACL 분리)
2026-05-17•백엔드 데이터 인프라 백엔드 데이터 인프라 101편. Kafka Multi-tenancy — 여러 팀·서비스가 같은 cluster 공유. Topic Naming Convention·Producer/Consumer Quota·ACL 분리·Resource…
백엔드 데이터 인프라 100편 — Kafka Monitoring (JMX 메트릭 30가지)
2026-05-17•백엔드 데이터 인프라 백엔드 데이터 인프라 100편. Kafka Monitoring 메트릭 30가지 — broker 측 UnderReplicatedPartitions·MessagesInPerSec·BytesInPerSec·RequestQueueSize, producer 측 record-send-rate·error-rate, consumer 측…