kakaopay
기술
데이터
AI 요약
카카오페이에서 수천만 사용자의 금융 이벤트를 처리하는 실시간 및 배치 데이터 파이프라인을 설계·개발·운영할 데이터 엔지니어를 채용합니다. 대용량 분산 처리 시스템과 스트리밍 처리 운영, 파이프라인 장애(지연·유실·중복) 디버깅 및 개선 경험을 요구하며 서비스와 분석에 바로 활용 가능한 데이터 생성에 중점을 둡니다.
주요 업무
수천만 사용자의 이벤트를 처리하는 실시간/배치 데이터 파이프라인 설계·개발·운영; 수집된 금융 데이터를 가공·결합해 서비스 및 분석에 활용 가능한 데이터 생성; 데이터 스트리밍 처리 시스템 운영 및 지연·유실·중복 문제 진단과 개선; 서버 개발자·데이터 분석가 등과 협업하여 데이터 요구사항을 파이프라인으로 구현; 파이프라인의 불편한 부분을 찾아 개선.
자격 요건
필수: 실시간 스트리밍 및 배치 파이프라인 설계 및 운영 경험; 대용량 분산 처리 시스템에 대한 이해 및 실무 적용 경험; 파이프라인 장애(지연, 유실, 중복) 디버깅 및 해결 경험; 프로덕션 환경에서 데이터 파이프라인을 직접 운영해 본 경험. 우대: 대용량 트래픽 환경에서 파이프라인 병목 진단 및 개선 경험; 백엔드 서버 개발 경험; 데이터 품질 모니터링 또는 알럿 체계 구축 경험; 데이터 엔지니어링 관련 경력 3년 이상.
기술 스택
실시간 스트리밍배치 파이프라인대용량 분산 처리 시스템데이터 가공/ETL데이터 품질 모니터링/알럿백엔드 서버 개발