https://venturebeat.com/2021/01/15/ai-weekly-meet-the-people-trying-to-replicate-and-open-source-openais-gpt-3/
OpenAI는 GPT-3의 코드와 학습된 모델을 공개하지 않고 있습니다. 이에 한 회사가 GPT-Neo라는 오픈소스를 개발하고 있다고 합니다. GPT-3와 동급의 성능을 가지고 있습니다. 이런 규모의 모델을 개발하려면 막대한 자원이 필요합니다. 다행히 CoreWeave라는 클라우드 회사가 후원하고 있습니다.
파라미터의 크기만 700GB라고 하는데요. 사실 무료로 준다고 해도 웬만한 개인이나 회사는 돌리기가 힘들 것 같습니다. 아마 OpenAI보다 더 싼 가격으로 API를 제공하지 않을까요.