Gemma 3 27b Half Full

🚀 マージ済み言語モデル

このプロジェクトは、mergekit を使用して事前学習済みの言語モデルをマージしたものです。複数の強力なモデルを組み合わせることで、より高性能な言語モデルを構築します。

🚀 クイックスタート

このモデルは、事前学習済みの言語モデルをマージすることで作成されています。以下に詳細な情報を示します。

✨ 主な機能

• 複数の事前学習済み言語モデルをマージし、新しいモデルを作成できます。
• Linear マージ手法を使用して、効果的にモデルをマージします。

📦 インストール

このドキュメントには具体的なインストール手順が記載されていないため、このセクションを省略します。

💻 使用例

このドキュメントには具体的なコード例が記載されていないため、このセクションを省略します。

📚 ドキュメント

マージの詳細

マージ手法

このモデルは、Linear マージ手法を使用してマージされています。

マージされたモデル

以下のモデルがマージに含まれています。

• google/gemma-3-27b-pt
• google/gemma-3-27b-it

設定

以下のYAML設定を使用してこのモデルが作成されました。

models:
  - model: google/gemma-3-27b-it
    parameters:
      weight: 0.5
  - model: google/gemma-3-27b-pt
    parameters: 
      weight: 0.5
merge_method: linear 
tokenizer_source: google/gemma-3-27b-it

🔧 技術詳細

このドキュメントには具体的な技術詳細が記載されていないため、このセクションを省略します。

📄 ライセンス

このドキュメントにはライセンス情報が記載されていないため、このセクションを省略します。

📄 その他の情報