anthropic
Software Engineer, Research Data Platform
개발데이터AI·머신러닝연구·R&D
AI 요약
Anthropic의 Research Data Platform 팀에서 연구원들이 프론티어 AI 모델 학습 및 평가에 사용하는 데이터 관리, 쿼리 및 분석 도구를 구축할 엔지니어를 채용합니다. 데이터 파이프라인 구축, API 및 웹 인터페이스 설계, 데이터셋 관리 도구 개발 등을 담당하며 연구 팀과 긴밀히 협업합니다.
주요 업무
- 연구 학습 실행 데이터 추출 및 저장 파이프라인 구축 및 운영
- 데이터 관리, 탐색, 분석을 위한 API, 라이브러리, 웹 인터페이스 설계 및 구축
- 데이터셋 관리, 카탈로깅, 계보(Provenance) 도구 개발
- 연구 팀과 협업하여 워크플로우 이해 및 고영향력 도구 기회 식별 및 솔루션 배포
- 인접 팀과 협력하여 기존 시스템 활용 및 확장
자격 요건
- 상당한 수준의 소프트웨어 엔지니어링 경험 (특히 데이터 집약적 앱 또는 내부 도구 구축)
- 사용자 요구사항을 반복적으로 수집하고 제품을 출시하여 채택시키는 능력
- 유연성과 영향력을 중시하는 결과 중심적 사고
- 머신러닝 연구에 대한 학습 의지 및 사회적 영향에 대한 관심
- (우대) Spark, BigQuery, DuckDB, Parquet 등 대규모 ETL 및 쿼리 엔진 경험
- (우대) 고용량 시계열 데이터 처리 및 데이터 카탈로깅/메타데이터 관리 경험
- (우대) ML 실험 추적 플랫폼 또는 복잡한 데이터 시각화 및 풀스택 웹 개발 경험
기술 스택
SparkBigQueryDuckDBParquetETLTime series dataData visualizationFull-stack web developmentPythonSQL