MS (정확히는 MSR Asia) 에서 Visual ChatGPT라는 것을 공개했습니다...만, 새로운 모델이나 연구라기보단 OpenAI ChatGPT API와 기존의 공개된 모델들을 활용하는 application입니다.
여러가지 다양한 공개된 CV model 들, 예를 들어 Object detection, Pix2pix, BLIP, Stable Diffusion 계열 등을 조합해서 visual representation 값을 활용해서 ChatGPT 대화에 활용할 수 있는 형태입니다.
앞으로 이런 app들이 많이 나올 것 같네요.. ㅎㅎ