Kafka Consumer Lag
Kafka Consumer Lag 컨슈머 랙이란 토픽의 마지막(최신) 오프셋과 컨슈머 오프셋의 차이이다. 프로듀서는 계속해서 파티션에 데이터를 집어 넣고 컨슈머를 데이터를 가져간다. 이 경우에 두 offset의 차이를 consumer lag이라고 한다.
Recent posts
Kafka MultiThread Consumer
Kafka MultiThread Consumer
Kafka producer의 다양한 옵션(idempotence, transaction)
Kafka idempotence Producer
Kafka Producer acks
Kafka Producer acks 카프카 프로듀서는 카프카 클러스터에 얼마나 신뢰성있게 데이터를 저장할 것인지 ack 옵션을 선택하여 지정할 수 있다. 카프카 프로듀서는 acks옵션으로 0,1,all(-1) 을 가질 수 있다. 파티션의 복제 개수가 1인 경우에는 데이터 복제가 일...
Kafka ISR
Kafka ISR(In-Sync-Replicas)