<MoE를 선보인 미스트랄 NYT 인터뷰>

커리어리 친구들, 뉴욕 타임즈에서 흥미로운 취재를 했네요!


작년 하반기 LLM 업계에서 모두가 모델 파라미터가 많을수록 좋다! 라는 의견이 지배적일 때, 토큰 양은 증대시키는 데 모델 파라미터는 작게 가는 MoE (Mixtral of Expert) 기법을 선보여 지금은 AI 업계의 대세로 프랑스의 AI 아이돌이 된 미스트랄을 소개했네요!!


뉴욕 타임스가 미스트랄의 부상을 다루는 기사를 냈는데, 딥마인드 처럼 3인의 창업자가 있네. 추가로 창업자의 배경을 좀 살펴보니.


CEO인 아더 멘츠늗 딥마인드에서 3년 근무했고, 과학 디렉터인 굴리아베 람플(Guillaume Lample)과 티모씨 라크로이스는 메타의 라마 개발자들로 근무한 이력 있네요!! (영문식 발음을 해서 죄송! 불어를 몰라서! 혹시 아시면 댓글로 알려 주세요)


모두 에꼴 폴리테크 출신으로 울 나라로 치면 KAIST 나 포항공대처럼 과학 분야 출신들 입니다. 암튼 마크롱 대통령이 이들을 초청해서 맛있는 식사를 소식했다고 합니다!!


저도 25년전에 지금은 돌아가신 고 김영삼 대통령과 저녁식사를 했던 추억이 방울방울 떠 오릅니다. 물론 저 말고도 한국의 소프트웨어 업계 분들은 모두 같이요~!!


https://www.nytimes.com/2024/04/12/business/artificial-intelligence-mistral-france-europe.html

Europe's A.I. 'Champion' Sets Sights on Tech Giants in U.S.

Nytimes

Europe's A.I. 'Champion' Sets Sights on Tech Giants in U.S.

다음 내용이 궁금하다면?

또는

이미 회원이신가요?

2024년 4월 13일 오전 3:08

댓글 0

    함께 읽은 게시물

    고용노동부에서 주관하는 청년미래플러스 3기를 모집 중이라고 합니다.

    구직자와 재직자 두 가지 트랙을 동시에 모집한다고 하네요.

    • 모집 기간: 6월 15일 ~ 8월 3일

    ... 더 보기



    올해로 개발자 생활이 햇수로 20년째다

    2005년 7월에 일을 시작했으니, 올해로 개발자 생활이 햇수로 20년째다. 중간에 공백이 조금씩 있었으니 꽉 채운 스무 해는 아니지만, 숫자가 주는 무게는 여전하다. 20년이라는 시간이 흘렀다는 사실이 새삼 신기하게 느껴진다.

    ... 더 보기

    3D Chart를 소개합니다 (feat. WWDC 2025)

    ... 더 보기

    Bring Swift Charts to the third dimension (feat. WWDC 2025)

    iOYES

    Bring Swift Charts to the third dimension (feat. WWDC 2025)

    스프링 핵심 기능으로 통합된 Spring Retry

    S

    ... 더 보기

    스프링 핵심 기능으로 통합된 Spring Retry

    www.linkedin.com

    스프링 핵심 기능으로 통합된 Spring Retry

     • 

    저장 1 • 조회 479