Agent Reliability Engineer, GTM Engineering

프로덕션 전반의 GTM Agent 상태 모니터링, 오류·지연·비용 과다·silent failure 탐지 및 대응, Slack/ticket/rep report 이슈 트리아지 및 해결, 주간 eval suite 실행과 실패 원인 분석 및 regression test화, 모델/그래프/유스케이스/역할별 비용·지연 추적 및 최적화 제안, rep 및 feature별 사용량·채택률 추적과 주간 health report 작성, reply rates·meetings booked·hours reclaimed·ROI 등 비즈니스 지표 구축, LangSmith 기반 자체 모니터링/알림 체계 구축 및 고객용 사례 콘텐츠 작성.

필수: 프로덕션 Python 및 SQL 역량, traces/logs/warehouse tables 작업 경험, LLM 애플리케이션 운영 경험(Tracing, Evals, Prompt 및 Cache 메커니즘 포함), SRE 또는 프로덕션 운영 감각(percentiles, SLOs, noise와 real pattern 구분), 수치 해석에 대한 비판적 사고, 명확한 글쓰기와 발행에 대한 관심, 주도적으로 부족한 부분을 찾아 실행하는 자세. 우대: LangGraph 또는 LangSmith 경험, eval suite를 처음부터 구축한 경험, BigQuery 또는 dbt 경험, DevRel 관련 글쓰기 경험, Sales 및 Go-to-Market 사용자에 대한 공감 능력.