# マルチチェックポイント追跡

Pythia-1BはEleutherAIが開発した解釈可能性研究専用の言語モデルで、Pythiaスイートの10億パラメータ規模バージョンであり、The Pileデータセットでトレーニングされています。

Pythia-6.9BはEleutherAIが開発した大規模言語モデルで、Pythiaスケーラブルスイートの一部であり、解釈可能性研究を促進するために設計されています。

PythiaはEleutherAIが開発した一連の因果言語モデルで、説明可能性研究のために設計されており、7000万から120億パラメータまでの8つのサイズを含み、154のトレーニングチェックポイントを提供します

Pythia-28億はEleutherAIが開発したスケーラブルな言語モデルスイートの一員で、大規模言語モデルの解釈可能性研究を促進するために設計されています。このモデルはTransformerアーキテクチャに基づいており、The Pileデータセットでトレーニングされ、28億のパラメータを持っています。

Pythia-1.4BはEleutherAIが開発した12億パラメータの因果言語モデルで、Pythiaスケールスイートの一部であり、解釈可能性研究のために設計されています。

Pythia-160MはEleutherAIが開発した解釈可能性研究専用の言語モデルで、Pythiaスイートの160Mパラメータ規模バージョンであり、Transformerアーキテクチャに基づき、Pileデータセットでトレーニングされました。