파일 변환 및 전송에 대한 질문입니다.

Question

영상파일을 서버 - aws s3로 저장하는 로직을 구현중입니다.
서버단에서 영상파일에 대한 편집작업을 한 다음 s3에 원본과 같이 저장시키는 것이 계획이었습니다.
서버에서 ffmpeg, fluent-ffmpeg를 이용한 변환작업은 다음과 같습니다.
- 영상 watermark 작업
- hls를 위한 .m3u8파일 변환 작업
- 썸네일 생성 작업(.ts파일의 0초대를 썸네일 및 미리보기로 생성)- 이부분은 테스트중입니다.

s3 url을 요청하여 영상파일을 실행시키는 계획을 생각했고 이는 로컬에서 성공했습니다.

ec2서버에 배포한다음 위 과정을 실행해보니 변환과정에서 서버단 부하가 너무 심해서 변환하는 시간이 너무길거나 서버가 다운되는 이슈가 생겼습니다.

ec2성능 자체를 올리고 업로드 용량 제한도 다시 설정할 계획이나 여전히 많은 유저가 이 기능을 사용할  경우 서버가 견디지 못할 가능성이 있다고 생각합니다.

지금 생각해보고 있는 대안은 두가지입니다.
대안 1: aws mediaConverter를 이용해 변환한다.
1. 원본 영상을 버킷a로 보낸다.
2. 람다 트리거를 이용해 aws mediaConverter로 변환요청을 보낸다.
3. 변환한 영상을 버킷 b에 저장한다.
4. 클라이언트에서 버킷 b에서 cloudFront를 통해 요청한다.

대안  2: 업로드 전용 ec2를 생성하여 따로 변환한다.(처음 계획했던 과정에 ec2를 새로 생성, 성능 고도화하기)

mediaConverter의 영상변환에 필요한 작업 생성(또는 작업 프리셋 생성)이 너무 어려웠던 기억이 있어 ffmpeg를 이용할 생각을 하였는데 영상변환에 너무 많은 리소스가 들어간다는 생각을 못했습니다.

영상 변환 및 업로드 작업을 경험해본 분들이 있다면 좋은 공유를 받고싶습니다.

장성호 · Answer

Ffmpeg 맛보기만 해봤는데 CPU로 변환작업하니까 너무 오래걸리더라구요… 관련 도메인 애들한테 이야기 들었던 바로는 GPU로 작업하라고 했었습니다. 제가 할 땐 GPU가 없어서 못 했었습니다.