stream으로 대용량 사이즈 데이터 전송하기

데이터 분석 및 추천을 위해 CDC를 이용하여 데이터를 stream으로 보내고 있습니다 이 구성에서 긴글(대용량 사이즈 데이터)은 어떻게 처리되는지 궁금하여 조사한 내용을 공유합니다~ 사실 조사 끝에 결론은 아무것도 하지 않기로 하였습니다 항상 무언가를 하면 눈에 보이는 결과를 내놔야한다는 압박감이 있었고 그래야 내 업적이 빛을 바랜다라고 생각 하였습니다 (아마 우리 모두 그럴듯 합니다 ^^) 개발자에게 있어 중요한 것은 나타나는 현상에 대해 궁금증을 가지고 생각하고 또 생각하며 한꺼풀 한꺼풀 풀어가는 과정이 중요합니다 또한 새로운 것을 알아가는 것도 중요합니다 하지만 더 중요한 것은… 이게 정말 필요한 것이가? 오버 엔지니어링이 아닌가?에 대한 답을 찾는 것이 더 중요하다고 느낀 작업이었습니다