
Staff Software Engineer, Big Data Storage
개발데이터인프라·DevOps
AI 요약
Pinterest의 Staff Software Engineer로서 exabyte 규모의 데이터 레이크 스토리지 플랫폼을 설계·구축·최적화하는 역할입니다. Apache Iceberg를 중심으로 Spark, Flink 등 빅데이터 오픈소스 기술을 활용하며, 데이터·ML/AI·인프라 팀과 협업해 대규모 저장소와 메타데이터 관리 역량을 고도화합니다.
주요 업무
exabyte 규모 데이터 레이크 스토리지 플랫폼 설계·구현·최적화, 데이터 레이크 저장소 및 메타데이터 관리 관련 복잡한 기술 프로젝트 리딩, 조직 내 데이터·ML/AI·analytics·infrastructure 팀과 협업하여 저장소/메타데이터 계층 기술 설계, 대규모 ML/AI 및 analytics 워크로드를 위한 고처리량 데이터 접근·스키마 진화·대규모 column backfill 지원, 확장 가능하고 안정적이며 효율적인 빅데이터 저장 시스템의 장기 기술 방향 수립, Apache Iceberg/Spark/Flink 등 오픈소스 커뮤니티 참여 및 기여.
자격 요건
필수: 8년 이상 대규모 production distributed systems 설계·구축 경험, 확장 가능한 storage/metadata/data lake 인프라 경험, 대규모 ML/AI 또는 analytics 워크로드를 위한 storage capability 구축 경험, distributed systems 및 data storage systems에 대한 깊은 지식, Apache Iceberg/Spark/Flink/Presto/Trino/Hive 등 빅데이터 기술 경험, Java/Scala/Python 중 하나 이상의 프로그래밍 역량, 복잡한 기술 이니셔티브 리딩 및 아키텍처 영향력 행사 경험, 우수한 협업·커뮤니케이션·문제해결 능력, Computer Science 또는 관련 분야 학사 학위 또는 동등 경험. 우대/시사: 오픈소스 커뮤니티 기여 경험, 대규모 스토리지/메타데이터 시스템 고도화 경험.
기술 스택
Apache IcebergSparkFlinkPresto/TrinoHiveJavaScalaPython
pinterest의 다른 공고
Sr. Data Scientist, Performance Marketing
데이터, 마케팅Performance Solutions Partner II
영업, 고객지원Staff Data Scientist, Ads Delivery
데이터, AI·머신러닝Client Account Manager II, E-Commerce
영업, 고객지원Sr. Software Engineer, Machine Learning, tvScientific
AI·머신러닝, 개발Staff Software Engineer, Ads Manager Platform
개발Sr. Software Engineer, Web
개발Software Engineer II, Web
개발