Jobs
databricks 로고

databricks

Senior Staff Software Engineer - Lakeflow Pipelines Datasets

개발데이터인프라·DevOps연구·R&D

AI 요약

Databricks의 Lakeflow 엔지니어링 팀에서 엑사바이트급 데이터를 처리하는 대규모 ETL 및 데이터 파이프라인 플랫폼을 설계하고 이끌 Senior Staff Engineer를 채용합니다. 10년 이상의 분산 시스템 경험을 바탕으로 차세대 데이터 인프라의 기술적 방향성을 설정하는 역할을 수행합니다.

주요 업무

엑사바이트 규모의 선언적 파이프라인 및 구체화된 뷰 플랫폼 아키텍처 설계, 대규모 기술 과제를 실행 가능한 계획으로 전환 및 단계적 배포, 학술 연구 및 내부 R&D 아이디어를 실제 제품 시스템에 적용, 대규모 프로덕션 클러스터의 성능 진단 및 저수준 최적화, 제품 및 엔지니어링 리더십과 협력하여 기술 전략 수립.

자격 요건

10년 이상의 대규모 분산 시스템 구축 및 운영 경험, 데이터베이스 내부 구조/저장 시스템/분산 컴퓨팅/스트리밍 시스템/언어 및 API 설계/성능 엔지니어링 중 하나 이상의 전문 지식, 강력한 알고리즘 기초 및 실무적 판단력, 다학제간 협업 및 이니셔티브 주도 능력, 컴퓨터 공학 관련 학사/석사/박사 학위(또는 그에 준하는 경험) 소지자.

기술 스택

Apache SparkDelta LakeMLflowETLDistributed SystemsStreaming SystemsDatabase InternalsStorage SystemsDataflow Graphs
AI 점수 65
지원하기

databricks의 다른 공고

알림

알림이 없습니다