📌
LLM(大規模言語モデル)の時系列順一覧
| 名前 | リリース | 開発元 | パラメーター数 |
|---|---|---|---|
| BERT | 2018 | 3.4億 | |
| GPT-2 | 2019 | OpenAI | 15億 |
| GPT-3 | 2020 | OpenAI | 1750億 |
| GPT-Neo | 2021/03 | EleutherAI | 27億 |
| GPT-J | 2021/06 | EleutherAI | 60億 |
| GLaM | 2021/12 | 1.2兆 | |
| LaMDA | 2022/01 | 1370億 | |
| GPT-NeoX | 2022/02 | EleutherAI | 200億 |
| Megatron-Turing NLG | 2022/02 | Microsoft & Nvidia | 5300億 |
| Chinchilla | 2022/03 | DeepMind | 700億 |
| PaLM | 2022/04 | 5400億 | |
| OPT | 2022/05 | Meta AI | 1750億 |
| BLOOM | 2022/06 | Various | 1750億 |
| AlexaTM | 2022/11 | Amazon | 200億 |
| LLaMA | 2023/02 | Meta | 650億 |
| GPT-4 | 2023/03 | OpenAI | 不明 |
引用元
Discussion