Loyal Toppy Bruins Maid 7B DARE

🚀 Loyal-Toppy-Bruins-Maid-7B

このリポジトリは、「Loyal-Toppy-Bruins-Maid-7B」のFP16ファイルをホストしています。この7Bモデルは、登録されたキャラクターカードに忠実で魅力的なロールプレイ（RP）を行い、同時に高い知性を発揮することを目的としています。

🚀 クイックスタート

このモデルは、魅力的なロールプレイを行い、キャラクターカードに忠実で、高い知性を持つことを目的としています。以下に、このモデルの概要と使用方法を説明します。

✨ 主な機能

• 多様なモデルの融合：複数の優れたモデルをDARE ties法でマージし、独特な性能を実現しています。
• 高いRP性能：キャラクターカードに忠実で、魅力的なロールプレイを行うことができます。
• 高いスコア：lilblam's LLM Logic Testで20点という高いスコアを獲得しています。

📚 ドキュメント

モデルの説明

このモデルは、以下のモデルをベースに構築されています。

• Starling-LM-7B-alpha：LMSYS Chatbot Arenaで優れた性能を発揮し、GPT-3.5-Turbo-1106を上回っています。
• rwitz/go-bruins-v2：Q-bert/MetaMath-Cybertron-Starlingをベースに、Alpaca RPデータで調整されたモデルです。
• chargoddard/loyal-piano-m7：強力なRP性能とAlpaca形式のトレーニングを持ち、PIPPA、rpbuild、LimaRPなどの多様なデータセットを使用しています。
• Undi95/Toppy-M-7B：創造性に富み、様々なソースから有用なRPデータを持っています。OpenRouterで7Bモデルの中で1位を獲得しています。
• NeverSleep/Noromaid-7b-v0.1.1：Mistralをファインチューニングしたモデルで、他のモデルにはない独特なRPデータを持っています。

マージ方法

モデルはDARE ties法を使用してマージされており、目標とする絶対重みは1.2、高密度（0.5 - 0.6）でマージされています。詳細はMergeKit GitHub Repoを参照してください。

モデルの設定

models: # Top-Loyal-Bruins-Maid-DARE-7B_v2
  - model: mistralai/Mistral-7B-v0.1
    # no parameters necessary for base model
  - model: rwitz/go-bruins-v2 # MetamathCybertronStarling base
    parameters:
      weight: 0.5
      density: 0.6
  - model: chargoddard/loyal-piano-m7 # Pull in some PIPPA/LimaRP/Orca/rpguild
    parameters:
      weight: 0.5
      density: 0.6
  - model: Undi95/Toppy-M-7B
    parameters:
      weight: 0.1
      density: 0.5
  - model: NeverSleep/Noromaid-7b-v0.1.1
    parameters:
      weight: 0.1
      density: 0.5
merge_method: dare_ties
base_model: mistralai/Mistral-7B-v0.1
parameters:
  normalize: false
  int8_mask: true
dtype: bfloat16

プロンプトテンプレート

カスタムフォーマット

SillyTavernで最良の結果を得るには、Noromaidテンプレートを使用します。 SillyTavernの設定ファイル：Context、Instruct。

Alpacaフォーマット

Below is an instruction that describes a task. Write a response that appropriately completes the request.

### Instruction:
{prompt}

### Response:

📄 ライセンス

このモデルはCC BY-NC 4.0ライセンスの下で提供されています。