Pagnol-xlオープンソースフランス語言語モデル - 無料で自由なテキスト生成をサポート、実用的かつ高効率！

ホーム

Pagnol Xl

lightonaiによって開発

PAGnolは自由テキスト生成を対象とした一連の大規模フランス語言語モデルで、15億のパラメータを持っています。GPTアーキテクチャに基づいており、LightOnとInriaのALMAnaCHチームが共同開発しました。

大規模言語モデル

Transformers

フランス語オープンソースライセンス:MIT #フランス語テキスト生成 #大規模言語モデル #GPTアーキテクチャ

ダウンロード数 71

リリース時間 : 3/20/2024

モデル概要

PAGnolは超大規模のフランス語生成モデルで、自由テキスト生成タスクに特化しており、フランス語自然言語処理アプリケーションに適しています。

モデル特徴

大規模フランス語生成

15億のパラメータを持ち、フランス語テキスト生成に特化しており、さまざまな自然言語処理タスクに適しています。

GPTアーキテクチャに基づく

GPTアーキテクチャを採用しており、良好なテキスト生成能力と言語理解能力を持っています。

複数の規模から選択可能

1.25億から15億のパラメータまでの異なる規模のモデルを提供し、さまざまな計算リソース要件に対応します。

モデル能力

フランス語テキスト生成

自由テキスト創作

言語モデル推論

使用事例

テキスト生成

対話生成

自然で流暢なフランス語の対話応答を生成します。

文脈に合った自然な対話を生成する

コンテンツ創作

フランス語のコンテンツ創作（記事、物語など）を支援します。

首尾一貫した、創造的なフランス語テキストを生成する

🚀 PAGnol: 超大規模フランス語生成モデル

PAGnolは、自由形式のテキスト生成に特化した大規模フランス語モデルのコレクションです。15億のパラメータを持ち、GPTアーキテクチャに基づいています。このモデルはLightOnがInriaのALMAnaCHチームと協力して開発した初の言語モデルです。

🚀 クイックスタート

PAGnolは、2021年初頭にスケーリング則に従って、CCNet上で学習されたCamemBERTモデルとまったく同じ学習データを使用して学習されました。再現性のために公開していますが、最新技術を代表するものではありません。

✨ 主な機能

自由形式のフランス語テキスト生成が可能です。
15億のパラメータを持つ大規模モデルです。

📦 インストール

このモデルを使用するには、Hugging Faceのライブラリをインストールする必要があります。

pip install transformers

💻 使用例

基本的な使用法

from transformers import pipeline

generator = pipeline('text-generation', model='lightonai/pagnol-xl', trust_remote_code=True)

output = generator(
    "Salut PAGnol, comment ça va ?",
    max_length=50,
    do_sample=True,
    temperature=0.7,
)[0]["generated_text"]

>>> "Très bien! Les jours d’été sont là ! Bientôt les premiers festivals..."

📚 ドキュメント

論文: ARXIV, ACL ANTHOLOGY
コード: GITHUB

📄 ライセンス

PAGnolはMITライセンスの下で提供されています。以下のモデルをダウンロードすることで、MITライセンス契約の条件に同意することになります。LightOnおよび/またはInriaは、PAGnolの使用または使用不能によって直接または間接的に生じるあらゆる請求、損害、損失、費用、または債務（利益の損失、事業の中断、または情報の損失に対する直接または間接的な損害を含むが、これらに限定されない）について、いかなる責任も負いません。

利用可能なモデル

lightonai/pagnol-small: 1.25億のパラメータ
lightonai/pagnol-medium: 3.55億のパラメータ
lightonai/pagnol-large: 7.73億のパラメータ
lightonai/pagnol-xl: 15億のパラメータ

引用

@inproceedings{launay-etal-2022-pagnol,
    title = "{PAG}nol: An Extra-Large {F}rench Generative Model",
    author = "Launay, Julien  and
      Tommasone, E.l.  and
      Pannier, Baptiste  and
      Boniface, Fran{\c{c}}ois  and
      Chatelain, Am{\'e}lie  and
      Cappelli, Alessandro  and
      Poli, Iacopo  and
      Seddah, Djam{\'e}",
    editor = "Calzolari, Nicoletta  and
      B{\'e}chet, Fr{\'e}d{\'e}ric  and
      Blache, Philippe  and
      Choukri, Khalid  and
      Cieri, Christopher  and
      Declerck, Thierry  and
      Goggi, Sara  and
      Isahara, Hitoshi  and
      Maegaard, Bente  and
      Mariani, Joseph  and
      Mazo, H{\'e}l{\`e}ne  and
      Odijk, Jan  and
      Piperidis, Stelios",
    booktitle = "Proceedings of the Thirteenth Language Resources and Evaluation Conference",
    month = jun,
    year = "2022",
    address = "Marseille, France",
    publisher = "European Language Resources Association",
    url = "https://aclanthology.org/2022.lrec-1.455",
    pages = "4275--4284",
}