Dialogled Base 16384

🚀 DialogLED：用於長對話理解與總結的預訓練模型

DialogLED是一款專注於長對話理解與總結的預訓練模型。它依託Longformer-Encoder-Decoder（LED）架構，在大量長對話數據上採用基於窗口的去噪作為預訓練任務進行進一步訓練。本項目提供了DialogLED的基礎版本，在預訓練階段輸入長度限制為16,384。

🚀 快速開始

下游任務微調

請參考 我們的GitHub頁面 進行下游任務的微調操作。

📚 詳細文檔

模型論文

DialogLM: Pre-trained Model for Long Dialogue Understanding and Summarization 詳細介紹了該模型的相關內容。