Databricks
Staff Software Engineer, Lakeflow Pipelines DR
개발인프라·DevOps
AI 요약
Databricks의 Lakeflow Disaster Recovery 팀 Staff Engineer 채용으로, 멀티 리전 환경에서 스트리밍·배치 ETL 파이프라인의 복구/복제 기능을 설계·구현하는 역할입니다. 분산 시스템, 데이터베이스, 스토리지, 신뢰성 엔지니어링 역량과 Java/Scala/C++/Go/Python 기반 개발 경험이 중요합니다.
주요 업무
크로스리전 복제 및 복구 기능 설계·구현, 스트리밍 테이블 및 materialized view 복구 지원, 파이프라인 의존성과 테이블 버전/트랜잭션 로그 간 분산 일관성 처리, failover/failback 워크플로우 구축, deep clone 및 메타데이터 정합성 처리, 관측성 및 장애 주입 테스트, 복구 시뮬레이션과 game-day 테스트, 장애 모드에 대한 형식적 검토와 안전한 복구 보장.
자격 요건
필수: 분산 시스템, 데이터베이스, 스토리지 시스템, 스트리밍 시스템 또는 신뢰성 엔지니어링에 대한 강한 관심/이해. Java, Scala, C++, Go, Python 또는 유사한 생산용 언어의 강한 소프트웨어 엔지니어링 역량. 일관성, 트랜잭션, idempotency, replication, checkpointing, data lineage에 대한 이해. 다년간의 기술 비전을 수립하고 점진적으로 생산 품질의 결과물을 만들어내는 역량. 우대: 관련 시스템 경력 8년 이상. 추가 우대: 데이터베이스, 분산 시스템, 스토리지 관련 박사 학위 또는 고급 연구 경험.
기술 스택
JavaScalaC++GoPythondistributed systemsdatabasesstorage systemsstreaming systemsreliability engineering
Databricks의 다른 공고
Staff Product Operations Lead, Marketplace Operations
Sr Staff Technical Program Manager- Security
경영지원, 보안AI Engineer – Forward Deployed Engineering, U.S. Public Sector (Federal Focus)
AI·머신러닝, 데이터Sr. Solutions Engineer - Digital Native Business (Strategic Accounts)
영업, 데이터Enterprise Account Executive - RCT
영업Sr. Designated Support Engineer, Apache Spark™
고객지원, 데이터Enterprise Account Executive - Federal
영업Director, Field Engineering Emerging Enterprises & Startups
경영지원, 영업, 고객지원, 개발, 데이터, AI·머신러닝