최근에 Kafka 관련 이슈를 몇개 경험했는데, 파티션 리스트에 보이던 skew, leader skew가 무슨 의미인지 궁금해서 찾아보다 그림과 함께 이해하기 쉽게 설명한 블로그를 발견했어요.

최근에 Kafka 관련 이슈를 몇개 경험했는데, 파티션 리스트에 보이던 skew, leader skew가 무슨 의미인지 궁금해서 찾아보다 그림과 함께 이해하기 쉽게 설명한 블로그를 발견했어요. 간단히는 토픽의 파티션이 브로커 서버에 균등하게 배포되지 않고, 한쪽으로 치우쳐 균형이 깨졌을 때를 skew라고 하고, leader 파티션이 각 브로커에 균등하게 분산되지 않은 것은 leader skew라고 해요. 브로커에 파티션이 잘 분배되어 있어야 트래픽도 잘 분배되고, 장애상황에서도 피해를 최소화할 수 있기 때문에, skew가 발생한 토픽은 주의깊게 관리할 필요가 있다는 것을 배웠어요.