커리어리 친구들, 메타에서도 드뎌 개발자 코드 생성을 위한 코드라마 2를 7B, 13B, 34B도 공개되었습니다. 간단히 말해서, 라마 2 파운데이션 모델에다 코드 관련 데이터셋을 더 추가해서 생성했습니다.
블로그와 논문에서는 성능이 GPT3.5는 한참 넘어서고 GPT4에 가깝다고 주장했습니다. 회사 내부 코드를 파인튜닝해서 온프렘 등으로 사용한다면 보안도 유지되면서 개발자들의 효율 향상에 도움이 많이 될 것 입니다.
또한 각종 오픈 소스 개발 도구에 이제 라마2 기반의 코드 생성해 서비스도 풍성될 것 입니다.
https://ai.meta.com/blog/code-llama-large-language-model-coding/