OpenAI大事记;GPT到ChatGPT参数量进化
目录
OpenAI大事记
GPT到ChatGPT参数量进化
OpenAI大事记
GPT到ChatGPT参数量进化
ChatGPT是从初代 GPT逐渐演变而来的。在进化的过程中,GPT系列模型的参数数量呈指数级增长,从初代GPT的1.17亿个参数,到GPT-2的15 亿个参数,再到 GPT-3的1750 亿个参数。模型越来越大,训练语料库越来越多,模型的能力也越来越强。
目录
OpenAI大事记
GPT到ChatGPT参数量进化
ChatGPT是从初代 GPT逐渐演变而来的。在进化的过程中,GPT系列模型的参数数量呈指数级增长,从初代GPT的1.17亿个参数,到GPT-2的15 亿个参数,再到 GPT-3的1750 亿个参数。模型越来越大,训练语料库越来越多,模型的能力也越来越强。