megazone
[메가존클라우드] Data Engineer Junior
정규직(풀타임)대면근무데이터
AI 요약
메가존 클라우드 AIR 부문에서 데이터 파이프라인 및 데이터 플랫폼 구축·운영을 담당할 데이터 엔지니어 채용공고입니다. 클라우드 환경(AWS/Azure/GCP)에서 RDB/API/로그/배치·스트리밍 등 다양한 데이터 소스의 수집·정제·적재(ETL/ELT)를 수행하고, 데이터레이크/레이크하우스, Feature Store, Vector Store 등 AI/ML 및 생성형 AI(LLM/RAG/Agent) 서비스에 최적화된 데이터 파운데이션을 설계·구축·운영하는 역할입니다. Databricks, Snowflake, AWS Glue, Airflow 등 클라우드 데이터 플랫폼 활용 경험과 SQL/Python/Spark 역량을 요구합니다.
주요 업무
산업별 데이터 구조 분석 및 데이터 수집·가공·적재 프로세스 설계·구현. RDB/API/로그/배치·스트리밍 등으로부터 정형·비정형 데이터 수집 및 ETL/ELT 파이프라인 개발·운영. 데이터레이크/레이크하우스 및 AI 모델 학습용 데이터 정제. Feature Store, Vector Store, Metadata 등 데이터 파운데이션 구축. LLM/RAG/Agent 기반 서비스의 데이터 요구사항 설계. 데이터 품질 관리·모니터링 및 데이터 거버넌스(보안·권한·컴플라이언스) 운영. PoC→Production 이관 자동화·표준화 및 재사용 가능한 템플릿·모듈 개발. 시니어 엔지니어/AI 아키텍트와 협업하여 스토리지·컴퓨팅·비용 아키텍처 제안.
자격 요건
클라우드(AWS/Azure/GCP) 환경에서 데이터 수집·정제·적재 실무 경험 또는 파이프라인 구축 이해. SQL, Python, Spark 등 데이터 처리 기술 활용 경험. 데이터 모델링(Dimensional, ERD) 기본 개념 이해. 금융/제조/리테일/헬스케어 등 도메인 데이터 특성에 대한 이해 및 비즈니스 문맥을 데이터 구조로 해석할 수 있는 역량. 원활한 커뮤니케이션 및 협업 능력. Databricks, Snowflake, Airflow 등 신규 데이터 플랫폼 학습 의지.
기술 스택
AWSAzureGCPDatabricksSnowflakeAWS GlueAirflowRedshift데이터레이크레이크하우스SQLPythonSparkETL/ELTFeature StoreVector StoreMetadataLLMRAGAgent데이터 거버넌스/모니터링