Community_Request-02-12Bオープンソース大規模言語モデル - 無料でテキスト生成と対話アプリを実現

ホーム

Community Request 02 12B

Nitral-AIによって開発

複数の12Bパラメータ規模の大規模言語モデルを融合したもので、テキスト生成と対話能力を備えています

大規模言語モデル

Transformers

#マルチモデル融合 #12Bパラメータ規模 #GRPO最適化

ダウンロード数 53

リリース時間 : 3/21/2025

モデル概要

mergekitツールを使用して複数の12Bパラメータ規模の大規模言語モデルを融合し、各モデルの強みを組み合わせて生成品質と多様性を向上させました

モデル特徴

マルチモデルの強み融合

7つの異なる12Bパラメータモデルの強みを組み合わせ、生成品質と多様性を向上

GRPO最適化

Captain-Eris_Violet-GRPO-v0.420に基づく基本最適化

大規模パラメータ

12Bパラメータ規模により強力な言語理解と生成能力を提供

モデル能力

テキスト生成

対話システム

コンテンツ作成

言語理解

使用事例

コンテンツ作成

クリエイティブライティング

小説、詩などのクリエイティブなテキストを生成

多様な文学スタイルの出力

対話システム

インテリジェントアシスタント

個性的なスタイルのチャットボットを構築

自然で流暢な対話体験

🚀 モデルマージプロジェクト

このプロジェクトは、事前学習された言語モデルをmergekitを使用してマージすることで作成されました。マージにより、複数のモデルの特性を組み合わせ、新たなモデルを生成しています。

🚀 クイックスタート

このモデルを使用するには、transformersライブラリを利用します。以下に基本的な情報を示します。

プロパティ	詳細
ベースモデル	ChaoticNeutrals/Captain-Eris_Violet_Toxic-Magnum-12B、kainatq/Kaiden-Sakura-Violet-Square-Azura-crimson-12B、grimjim/Magnolia-v3-12B、Nitral-AI/Captain-Eris_Violet-GRPO-v0.420、inflatebot/MN-12B-Mag-Mell-R1、Nitral-AI/Captain-Eris-BMO_Violent-GRPO-v0.420、nbeerbower/Lyra-Gutenberg-mistral-nemo-12B、Nitral-AI/Wayfarer_Eris_Noctis-12B
ライブラリ名	transformers
タグ	mergekit、merge

📚 ドキュメント

マージの詳細

マージ方法

このモデルは、Model Stockマージ方法を使用してマージされています。ベースモデルとしてNitral-AI/Captain-Eris_Violet-GRPO-v0.420を使用しています。

マージに含まれるモデル

以下のモデルがマージに含まれています。

設定

このモデルを生成するために使用されたYAML設定は以下の通りです。

merge_method: model_stock
base_model: Nitral-AI/Captain-Eris_Violet-GRPO-v0.420
parameters:
models:
  - model: ChaoticNeutrals/Captain-Eris_Violet_Toxic-Magnum-12B
  - model: nbeerbower/Lyra-Gutenberg-mistral-nemo-12B
  - model: kainatq/Kaiden-Sakura-Violet-Square-Azura-crimson-12B
  - model: grimjim/Magnolia-v3-12B
  - model: inflatebot/MN-12B-Mag-Mell-R1
  - model: Nitral-AI/Captain-Eris-BMO_Violent-GRPO-v0.420
  - model: Nitral-AI/Wayfarer_Eris_Noctis-12B
dtype: bfloat16