baemin
[Tech] 데이터엔지니어(마케팅플랫폼)
개발데이터인프라·DevOpsAI·머신러닝
AI 요약
우아한형제들 BUDS 팀에서 전사 타겟팅 서비스(Baemin User Data System)의 데이터 마트·데이터 파이프라인 및 타겟팅 시스템을 개발·운영할 데이터 엔지니어(서버개발 포함)를 채용합니다. Hadoop/Spark/Kafka/Flink 등 빅데이터 기술을 활용한 배치 및 실시간 데이터 처리, 머신러닝 모델의 파이프라인화 및 MLOps 구축, 서빙 환경 운영·자동화를 담당합니다.
주요 업무
전사 타겟팅 시스템의 개발 및 운영(데이터 마트·데이터 파이프라인 개발/운영), Hadoop/Spark/Kafka/Flink 등 빅데이터 환경을 이용한 배치·실시간 데이터 프로세싱 구현(피처 가공, 통계 개발), 데이터 과학자들의 머신러닝 모델을 전처리·학습·예측·모델관리까지 파이프라인화, 머신러닝/통계 서빙을 위한 데이터셋 및 서빙 환경 구축, DataOps/MLOps 환경 구축 및 운영 자동화, Global targeting system 개발·운영, 팀 내외부 협업 및 소통.
자격 요건
필수: Hadoop·Spark 기반 빅데이터 처리 기술 경험(3년 이상), NoSQL 구축·운영 경험(ElasticSearch, DynamoDB 등), SQL 및 Python/Java/Scala 중 최소 1개 언어 숙련, 대규모 배치 설계·성능·비용 최적화 경험, AWS/GCP 환경에서의 개발·운영 경험. 우대: Kafka/Flink 스트리밍 애플리케이션 개발 경험, MLflow/Feast 등 ML 프레임워크 사용 및 서빙 환경 구축·운영 경험, ElasticSearch DSL/DynamoDB PartiQL 기반 개발 경험, Spring/Python 기반 API 설계·개발, Global 서비스 운영 경험.
기술 스택
JavaScalaPythonSparkFlinkHadoopKafkaAirflowSpringFrameworkSQLNoSQL (Redis, Elasticsearch, DynamoDB)AWS (및 GCP)MLflowFeastTensorFlowPyTorchElasticSearch DSLDynamoDB PartiQLJenkinsGitLabJupyterZeppelinTerraformDeequSQLFluffSonar