Paper page - Exponentially Faster Language Modelling
huggingface.co
1.FastBERT: 고효율 신경 실행으로 추론 속도를 극대화한 BERT 변형
FastBERT는 BERT 모델의 변형으로, 유사한 BERT 모델과 동일한 성능을 유지하면서 추론 중에 뉴런의 단 0.3%만을 사용합니다. 이 모델은 각 계층에서 4095개의 뉴런 중 12개만을 선택적으로 사용하며, 이는 피드포워드 네트워크를 고속 피드포워드 네트워크(FFF)로 대체함으로써 가능해집니다. FastBERT는 기존 피드포워드 구현에 비해 최대 78배 빠른 하이레벨 CPU 코드와 PyTorch 구현을 제공하며, 이는 조건부 신경 실행의 가속 잠재력을 최대한 활용하는 것입니다. 연구자들은 이 모델의 훈련 코드, 벤치마킹 설정, 모델 가중치를 공개하였습니다.
https://huggingface.co/papers/2311.10770
2.PixelDance: 복잡한 동작 합성을 위한 혁신적인 텍스트-비디오 생성 방법
역동적인 동영상 제작은 AI 분야의 중요한 과제입니다. 현재의 텍스트-비디오 생성 방법들은 주로 모션이 최소화된 비디오 클립을 만들지만, 이는 충분하지 않다고 보여집니다. 새로운 접근 방식인 픽셀댄스(PixelDance)는 텍스트 인스트럭션과 함께 첫 번째와 마지막 프레임에 대한 이미지 인스트럭션을 통합합니다. 이 확산 모델 기반의 방법은 복잡한 장면과 복잡한 동작을 포함한 비디오를 효과적으로 합성하여 비디오 생성의 새로운 표준을 제시합니다. PixelDance는 공개 데이터로 학습되었으며, 실험 결과는 이 방법의 뛰어난 성능을 입증합니다.
https://huggingface.co/papers/2311.10982
3.Flutter 3.16의 새로운 기능
Flutter 3.16 버전이 발표되었습니다. 이번 업데이트에서는 Material 3이 새로운 기본 테마로 설정되었으며, 안드로이드에서 Impeller의 프리뷰를 제공하고, DevTools에 확장 기능을 추가할 수 있게 되었습니다. 이와 함께 Flutter Casual Games Toolkit도 중요한 업데이트가 있었습니다. Material 3는 더 많은 컴포넌트와 테마, 업데이트된 시각 요소를 포함하고 있으며, 기존의 Material 2와 달리 Material 3을 기본적으로 사용하게 됩니다. Material 3 컴포넌트의 모양은 주로 [ThemeData.colorScheme]과 [ThemeData.textTheme] 값에 의해 결정됩니다.
https://medium.com/flutter/whats-new-in-flutter-3-16-dba6cb1015d1
4.Flutter Dart 3.2의 새로운 lint 기능
Dart 3.2 버전이 출시되었고, 새로운 기능인 'extension types'이 도입되었습니다. 이 기능은 'view'라는 개념을 클래스에 적용하여 해당 클래스의 일부 인터페이스만 노출하는 데 유용합니다. 예를 들어, 내장된 타입을 수정할 수 없을 때 'view'를 사용하여 새로운 기능을 추가하거나, 특정 타입에 대해 그 인터페이스의 일부만 사용하고 싶을 때 유용합니다. 이로 인해 개발자들은 타입 계층을 직접 수정하지 않고도 필요한 기능을 구현할 수 있게 됩니다.
https://medium.com/flutter-senior/the-new-lint-in-dart-3-2-287dbddede51
—
🥇K-디지털 트레이닝 훈련 기관 유일! 대통령 표창 수상한 모두의연구소의 SW/AI 교육
- 평균 별점 9.5점 「생존코딩」 저자 직강! ‘플러터 모바일 앱 과정’ 지원하기: https://bit.ly/49s8Tul
- AI학교 아이펠에서 만든 ‘데이터 사이언티스트 과정’ 지원하기: https://bit.ly/3QPTnjd
다음 내용이 궁금하다면?
이미 회원이신가요?
2023년 11월 22일 오후 11:48