얼마전 meta에서 V-JEPA(Video-Joint Embedding Predictive Architecture)를 공개했습니다.

V-JEPA는 인간처럼 효율적으로 배우는 머신을 만드는게 목표라고 하네요.


자기주도학습으로 세상이 작동하는 것을 학습했다고 하는데,

한 영상 내에서 물체를 인식하고, 물체의 동작이나 상호작용을 이해할 수 있는 모델이라고 합니다.

요새 핫한 생성형 모델은 아니라고 합니다.


영상에서 가려진 부분이 어떻게 되어있을지를 예측할 수 있는 모델인데,

샘플 영상을 보면, 종이를 넘기는 장면에 가려진 부분을 그럴싸하게 채워넣고 있습니다.


더 발전해서 자율 주행 등과 접목하면, 차 뒤편에서 갑자기 뛰어나오는 사람 등을 인식한다거나, 여러 방면으로 쓰일 수 있을 것 같습니다.


Video-JEPA 라고 했지만 이미지만 인식하는 단계라고 합니다. 향후에는 음성을 포함해서 예측할 수 있게 발전시킬 예정이라고 합니다.

V-JEPA: The next step toward advanced machine intelligence

AI at Meta

V-JEPA: The next step toward advanced machine intelligence

더 많은 콘텐츠를 보고 싶다면?

또는

이미 회원이신가요?

2024년 2월 20일 오후 5:31

댓글 0

    함께 읽은 게시물

    국내 바이브코딩 시장을 혼자 독점하고 계신 커서맛피아님을 인터뷰했어요.

    ... 더 보기

    월 8천만원을 벌던 개발자가 바이브코딩 도구를 만드는 이유

    이건 올리브영·다이소·무신사의 레슨

    월 8천만원을 벌던 개발자가 바이브코딩 도구를 만드는 이유

    공공기관 합격하는 사람은 이 포인트를 정확히 알고 갑니다

    ... 더 보기

    AI 시대, 데이터 분석에 대해 새롭게 정의해야 하는 이유

    AI 시대를 맞이하면서 우리는 다양한

    ... 더 보기

    스웨덴 AI 스타트업 ‘러버블(Lovable)’이 설립 8개월 만에 유니콘 기업 반열에 올랐다. AI 기반 코드 생성 플랫폼으로 주목받는 러버블은 최근 시리즈A 투자 라운드에서 2억 달러(약 2,880억 원)를 유치하며 기업가치 18억 달러(약 2조 5,920억 원)를 인정받았다.

    ... 더 보기

    스웨덴発 AI 스타트업 '러버블', 8개월 만에 유니콘 등극…비개발자 시장 정조준 - TokenPost

    TokenPost

    스웨덴発 AI 스타트업 '러버블', 8개월 만에 유니콘 등극…비개발자 시장 정조준 - TokenPost

    조회 259


    난임 스타트업 '오키드헬스'는 배아를 대상으로 향후 발병 소지가 있는 수천 가지 질병을 검사하는 서비스를 제공한다. 이 서비스를 통해 예비 부모는 자녀의 유전 정보를 이전보다 훨씬 더 많이 알 수 있다.

    ... 더 보기

    유전 데이터로 아기 선별해 낳는다?…美 스타트업 '슈퍼베이비' 논란

    n.news.naver.com

    유전 데이터로 아기 선별해 낳는다?…美 스타트업 '슈퍼베이비' 논란

    조회 138