Ferret - 애플의 오픈소스 MLLM

최근 애플이 Cornell 대학교 연구진과 함께 Ferret이라는 멀티 모달 대규모 언어 모델을 오픈소스로 공개했습니다. 이례적으로 자사에서 연구한 AI 모델을 오픈소스로 푼 것에 대해 업계에서는 긍정적인 반응이며 앞으로의 행보 역시 기대된다고 합니다. 한편, Ferret 모델은 이미지를 영역 별로 사용해서 질의 쿼리에 응답할 수 있는 모델입니다. 단순하게 표현하면 ChatGPT처럼 일반적인 언어로 이미지에 대해 질의 했을 때, 이미지를 기반으로 사물을 인식하고 답변하며 인식한 사물에 영역 (Bounding box)을 표시할 수 있습니다.


업계 반응:

  • 애플이 AI 모델을 오픈소스로 공개한 것은 주목할만한 점이다. AI 연구에 진심인가보다.

  • 그동안 애플 하드웨어에서 Nvidia 지원을 생각해봤을 때, Nvidia A100 GPU로 Ferret이 학습된 것도 뜻밖이다.

  • 아직 상업 라이센스는 아니지만, 언제든지 애플 제품에 녹아들 수 있는 가능성이 있다

  • 애플이 AI 서버 증설을 하고는 있지만, 아직 ChatGPT 규모로 바로 상호작용 할 수 있는 수준은 아닐 것이고 그전까지 모델 향상을 위해서 전략적으로 오픈소스로 푼 것일 수도 있다


원글:

  • https://github.com/apple/ml-ferret?tab=readme-ov-file

  • https://appleinsider.com/articles/23/12/24/apples-ferret-is-a-new-open-source-machine-learning-model

Apple shares 'Ferret' machine learning model for image-based queries

AppleInsider

Apple shares 'Ferret' machine learning model for image-based queries

다음 내용이 궁금하다면?

또는

이미 회원이신가요?

2023년 12월 27일 오전 6:25

 • 

저장 1조회 504

댓글 0

    함께 읽은 게시물

    < 감정은 내가 아니다. 감정을 나와 분리하라 >

    1

    ... 더 보기

    바이브 코딩 - 개발자들이 하는거


    바이브 개발 - 일반사람이 하는거


    ... 더 보기

    🍜 짜파게티가 왜 거기서 나와?

    ... 더 보기

    쫓아다니지 말고 대응하라

    두 카페가 있다. 두 카페 모두 점원이 주문을 받고 커피를 내리는 카페였다. 그런데, 어느 날 한 카페에서 키오스크를 도입했다. 그렇다면, 여전히 점원이 주문을 받는 카페보다 키오스크를 도입한 카페가 변화에 더 기민하게 대응하는 것일까? 그럴 수도 있고, 그렇지 않을 수도 있다. 변화에 기민하게 대응한다는 건, 변화를 빨리 도입한다는 것과는 다른 이야기이기 때문이다.

    ... 더 보기

    조회 644


    예상대로 OpenAI에서 GPT-5를 발표했습니다.

    ... 더 보기

    내가 가본 우리나라 - 지도 색칠 사이트

    ... 더 보기