Paper page - BitNet: Scaling 1-bit Transformers for Large Language Models
huggingface.co
모두의연구소는 함께 공유하고 성장하는 국내 최대 AI 커뮤니티입니다.
1.BitNet: 1비트 트랜스포머를 통한 대규모 언어 모델의 효율적 확장
대규모 언어 모델의 크기 증가에 따른 배포와 환경 문제를 해결하기 위해 BitNet이라는 확장 가능하고 안정적인 1비트 트랜스포머 아키텍처를 제안합니다. BitLinear를 도입하여 1비트 가중치 학습이 가능하게 했습니다. 실험 결과 BitNet은 메모리와 에너지 사용량을 줄이면서도 높은 성능을 보였고, 이는 대규모 언어 모델을 효과적으로 확장할 수 있는 새로운 방법을 제시한다는 것을 의미합니다
https://huggingface.co/papers/2310.11453
2.4K 4D: 실시간 4K 해상도의 동적 3D 장면 뷰 합성을 위한 4D 포인트 클라우드 방식
이 논문은 4K 해상도에서 동적 3D 장면의 실시간 뷰 합성을 목표로 4D 포인트 클라우드 표현인 4K 4D를 제안합니다. 이 표현은 속도와 품질을 극대화하기 위한 하드웨어 래스터화와 하이브리드 외형 모델을 사용하며, 차별화 가능한 깊이 필링 알고리즘을 통해 RGB 비디오에서 모델 학습이 가능하게 했습니다. RTX 4090 GPU를 사용하면 1080p 해상도에서 400 FPS 이상, 4K 해상도에서 80 FPS로 렌더링 가능하며, 기존 방법에 비해 30배 이상 빠르게 최첨단 렌더링 품질을 달성했습니다.
https://huggingface.co/papers/2310.11448
3.인기 지수에서 Java를 추월 중인 C#
TIOBE 지수에 따르면, C#과 Java의 인기 차이가 1.2%로 줄었으며, 이런 추세가 계속된다면 C#이 2개월 후 Java를 넘을 것으로 예상됩니다. 최근 조사에서 Java의 인기 하락의 주된 원인으로 오라클의 유료 라이선스 도입과 코틀린의 무료 제공이 영향을 미쳤다고 평가되었습니다. 반면, Microsoft는 C#을 무료 오픈 소스로 제공하며 개방성을 강화하였습니다. TIOBE 는 이 지수를 통해 프로그래밍 언어의 인기를 측정하며, 개발 전략 결정에 도움을 제공한다고 설명하였습니다.
https://visualstudiomagazine.com/articles/2023/10/17/tiobe-oct23.aspx?m=1
4.Jetbrains, Writerside 공개
Jetbrains 회사는 통합 문서 편집 도구 Writerside 제품을 공개하였습니다. Writerside 제품은 강력한 개발 환경을 제공하여 문서 작성, 테스트, 빌드, 게시가 용이합니다. 내장된 Git UI, 통합 빌드 도구와 자동화된 테스트를 통해 효과적인 문서 작성이 가능하며, Markdown과 XML의 장점을 결합하여 다양한 형식의 콘텐츠를 제작할 수 있습니다. 실시간 검사와 미리보기를 통해 문서의 품질을 보장하며, REST API 문서 생성 기능도 통합되어 있어 문서 작성의 효율성을 높입니다.
https://www.jetbrains.com/ko-kr/writerside/
—
🥇K-디지털 트레이닝 기관 최초! '대통령 표창' 수상한 모두의연구소의 신뢰받는 교육
☑️[D-1] AI 딥러닝을 심도 있게! <AI학교 아이펠> 7기 지원하기 → https://bit.ly/44cSNkr
☑️SW 과정 신규 오픈! <자바스크립트 웹 풀스택> 1기 지원하기 → https://bit.ly/3tmITjj
다음 내용이 궁금하다면?
이미 회원이신가요?
2023년 10월 20일 오전 12:55
어제 출시된 따끈따끈한 ChatGPT Codex를 실제 프로젝트 레포에 써 보았습니다.
테스트가 있으면 스스로 테스트도 실행하고, 만든거 스스로 실행해보면서 버그도 수정하고 하는게 기특하긴 합니다.
G
... 더 보기간만에 개발 떡밥이(신난다) 이번엔 제가 소수 입장에 있는 ORM이군요. 후후..
저는 몇몇 사건을 통해 ORM 반대주의자가 된 사람인데요.