DevOps/kafka (1) 썸네일형 리스트형 kafka 개요 1장. 카프카 개요 카프카란? Apache Kafka는 실시간으로 기록 스트림을 게시, 구독, 저장 및 처리할 수 있는 분산형 데이터 스트리밍 플랫폼이다. 여러 소스에서 데이터 스트림을 처리하고 여러 사용자에게 전달하도록 설계되었다. 카프카의 특징 높은 처리량과 낮은 지연시간 높은 확장성 고가용성 내구성 개발 편의성 운영 및 관리 편의성 리플리케이션 기능 내부 카프카 클러스터에서 브로커의 장애가 발생해도 리플리케이션 기능으로 인해 데이터 유실 없이 안정적으로 사용 가능 스키마 레지스트리 규모가 커지면서 펍/섭 모델의 한계 같은 비효율적인 문제 발생으로 프로듀서와 컨슈머 간에 서로 데이터 구조를 설명할 수 있는 스키마를 등록 지정해 사용, 스키마에 정의된 데이터만 주고받게 된다. 스키마를 이용해 데이터 변.. 이전 1 다음