미라 무라티의 오픈 모델 전략, 폐쇄형 연구소에 대한 도전
(dev.to)ChatGPT의 설계자 미라 무라티가 설립한 Thinking Machines Lab이 오픈 웨이트 모델 'Inkling'을 공개하며, 거대 폐쇄형 AI 모델의 독점적 전략에 맞서 특정 작업에 특화된 오픈 시스템의 경쟁력을 증명하려는 새로운 전략적 도전을 시작했습니다.
이 글의 핵심 포인트
- 1미라 무라티의 새로운 회사 Thinking Machines Lab이 오픈 웨이트 모델 'Inkling' 출시
- 29750억 개의 전체 파라미터를 보유한 MoE(Mixture-of-Experts) 구조로, 작업당 약 410억 개 파라미터 활성화
- 3텍스트, 이미지, 오디오, 비디오를 포함한 45조 개의 토큰으로 학습된 멀티모달 데이터셋 활용