Broker

Kafka_Broker는 kafka가 설치되어 있는 서버 단위

• 보통 3개 이상을 권장

Replication

Kafka 클러스터에서 Replication은 데이터 복제를 의미합니다. 이는 데이터의 안정성을 보장하고 데이터 손실을 방지합니다.

브로커의 개수에 따라 복제 개수는 제한된다. → replication 개수는 broker의 개수를 넘지 못한다.

ISR (In-Sync Replicas)

원본 파티션(partion#0)을 Leader partition이라 부르고 나머지 두개의 복제된 파티션은 Follower partition이라 부른다.

특정 파티션의 리더, 팔로워가 모두 복제되어 sync가 맞는 상태를 ISR이라 부른다.

Replication과 ack 옵션

ack는 0, 1, all 옵션중 하나를 골라 사용한다.

옵션 : 0

• Producer는 Leader partition에 데이터를 전송하고 응답값을 받지 않는다. :
  • 속도는 빠르지만 데이터 유실 가능성

옵션 : 1

• Producer는 Leader partition에 데이터를 전송하고 응답값을 받는다 다만 나머지 partition에 복제되었는지 알지 못한다.

옵션 : all

• Producer는 Leader partition에 데이터를 전송하고 follwer partition에서도 응답값을 받는다.
  • 데이터 유실은 없지만 속도가 현저히 느리다.