openai
Backend Software Engineer (Evals)
개발AI·머신러닝
AI 요약
OpenAI의 Support Automation 팀에서 AI 모델을 활용해 내부 업무를 자동화하고, LLM 성능을 측정하는 평가(evals) 인프라를 구축할 백엔드 소프트웨어 엔지니어를 채용합니다. Python 기반의 백엔드 기술력과 AI 에이전트 및 LLM 평가 방법론에 대한 깊은 이해가 요구되는 고도의 기술적 역할입니다.
주요 업무
신뢰할 수 있고 재현 가능한 평가(eval) 파이프라인 설계, 연속적인 평가 모니터링 프레임워크 및 피드백 루프 구축, 지능형 자동화 및 지식 시스템을 위한 백엔드 서비스 및 API 설계/구축/유지보수, 내부 플랫폼 데이터 통합 및 AI 워크플로우 최적화, 데이터/리서치/엔지니어링 팀과 협력하여 OpenAI 모델을 고부가가치 워크플로우에 통합, 백엔드 시스템 및 내부 플랫폼 기능의 전체 개발 수명 주기 관리
자격 요건
4년 이상의 백엔드 엔지니어링 경험 (인턴 제외), Python, FastAPI, Postgres 숙련도, 분산 시스템, API 또는 데이터 처리 파이프라인 설계 및 확장 경험, AI 에이전트 또는 애플리케이션 구축 경험 (evals 설계 및 프롬프팅을 통한 성능 개선 포함), LLM 평가 방법론(멀티 에이전트 워크플로우, 도구 사용, 롱 컨텍스트 등) 숙지, 프로덕션 환경에서의 ML/LLM 모델 성능 측정 경험, 반복적인 실행과 장기적 비전을 동시에 고려하는 실용적인 마인드셋
기술 스택
PythonFastAPIPostgresLLMMLAI AgentsDistributed SystemsAPIs
openai의 다른 공고
Workforce Program Manager, Global Affairs
경영지원Agent Post-Training, API & Power Users
AI·머신러닝, 연구·R&D, 개발Agent Post-Training, Computer Use Research
AI·머신러닝, 연구·R&D, 개발Agent Post-Training, Personality
AI·머신러닝, 연구·R&DAgent Post-Training, Connectors Research
AI·머신러닝, 연구·R&D, 개발Agent Post-Training, Frontier Evals and Environments Research
연구·R&D, AI·머신러닝, 개발Agent Post-Training, Artifacts Research
AI·머신러닝, 연구·R&DB2B Marketing Lead, Korea
마케팅