kafka에서 파티션 증가없이 처리량을 증가시키는 방법

카프카에서 메시지 동시 처리량을 늘릴 수 있는 가장 쉬운 방법 중 하나는 파티션을 증가시키는 것입니다. 다만 늘리면 줄일 수 없는 단점이 있습니다.


링크의 글에서는 Parallel Consumer를 도입하여 파티션 증가없이 처리량을 늘리는 방법을 소개하고 있으며 Parallel Consumer가 무엇인지, 어떻게 동작하는지, 내부구조는 어떤지 간략하게 소개하고 있습니다.


카프카의 성능 향상을 고민중이시라면 읽어보시면 좋을 것 같습니다.


https://d2.naver.com/helloworld/7181840

NAVER D2

d2.naver.com

NAVER D2

더 많은 콘텐츠를 보고 싶다면?

또는

이미 회원이신가요?

2023년 10월 24일 오전 8:37

댓글 0

    함께 읽은 게시물

    Startup Studio ACT Works 과정에 함께 합니다

    ... 더 보기

    조회 368


    구현패턴으로 DB사용비용을 10배줄이기

    ... 더 보기

    kopring-reactive-labs/Docs/eng/08_bulkprocessor.md at main · psmon/kopring-reactive-labs

    GitHub

    kopring-reactive-labs/Docs/eng/08_bulkprocessor.md at main · psmon/kopring-reactive-labs

     • 

    댓글 1 • 저장 34 • 조회 2,750


    제가 리드하고 있는 조직(당근마켓 커뮤니티실)에서 백엔드 엔지니어를 채용 중이에요.


    커뮤니티실에는 동네 이웃들의 이야기와 정보를 공유하는 동네생활팀, 이웃 간의 취미와 관심사를 연결하는 모임팀, 그리고 아파트 단지 생활을 더 편리하고 즐겁게 만들어 줄 단지팀이 있어요. 지금 내 동네에서 일어나고 있는 일들을 더 쉽게 즐기고 공유할 방법들을 찾는 일이라면 무엇이든 도전하여 실행에 옮겨요. 만드는 사람이 불편할수록 쓰는 사람은 편하다는 믿음으로 도전적인 문제를 풀어나갈 분과 함께하고자 해요.

    ... 더 보기

    AI시대 필요한 요구문서와 협업방법

    ... 더 보기

    Confluence Mobile - WEBNORI

    wiki.webnori.com

    Confluence Mobile - WEBNORI

    🤖 최초의 AI 브라우저, Dia 직접 써봤습니다! 🌐

    ... 더 보기