Pygmalion 2 13b

🚀 Pygmalion-2 13B

Pygmalion-2 13B是基於Llama-2 13B微調的模型，偏向於虛構寫作和對話場景，可通過自然語言指令引導，適用於娛樂用途的虛構寫作。

🚀 快速開始

本模型基於Meta AI發佈的 Llama-2 13B，經過監督微調，可用於對話、角色扮演和故事寫作。它遵循Llama-2的許可協議，可免費用於商業和非商業用途。

✨ 主要特性

• 基於Llama-2 13B架構，具備強大的語言處理能力。
• 經過監督微調，適用於對話、角色扮演和故事寫作。
• 採用獨特的提示格式，易於使用和引導。
• 可通過系統提示進入不同模式並控制回覆長度。

📚 詳細文檔

模型詳情

Pygmalion-2 13B（前身為Metharme）是基於Meta AI發佈的 Llama-2 13B 開發的。Metharme模型旨在嘗試獲得一個可用於對話、角色扮演和故事寫作的模型，並且可以像其他指令模型一樣使用自然語言進行引導。經過深思熟慮，我們得出結論，Metharme提示格式比經典的Pygmalion更優越（且更易於使用）。

該模型通過對常規指令數據、角色扮演、虛構故事和附有合成生成指令的對話的混合數據進行監督微調而訓練得到。

根據Llama-2許可協議，該模型可免費用於商業和非商業用途。

提示方式

模型在訓練時使用了三種不同角色的提示，分別由以下標記表示：<|system|>、<|user|> 和 <|model|>。

<|system|> 提示可用於在幕後注入額外信息，而 <|user|> 提示應用於表示用戶輸入。<|model|> 標記則用於指示模型應生成回覆。這些標記可以多次出現並鏈接起來形成對話歷史。

提示示例

系統提示旨在允許模型“進入”各種模式並控制回覆長度。以下是一個示例：

<|system|>Enter RP mode. Pretend to be {{char}} whose persona follows:
{{persona}}

You shall reply to the user while staying in character, and generate long responses.

數據集

用於微調此模型的數據集包括我們自己的 PIPPA，以及其他幾個指令數據集和從各種角色扮演論壇獲取的數據集。

侷限性和偏差

此模型的預期用例是用於娛樂目的的虛構寫作。任何其他類型的使用都超出了範圍。

因此，該模型未針對安全性和無害性進行微調：基礎模型和此微調版本均在已知包含褻瀆性和低俗或其他冒犯性文本的數據上進行了訓練。即使提示本身不包含任何明確的冒犯性內容，它也可能產生社會不可接受或不良的文本。輸出可能經常在事實方面存在錯誤或具有誤導性。

致謝

我們要感謝 SpicyChat 為該模型的訓練提供贊助。

📄 許可證

本模型遵循Llama-2的許可協議。