BARTxiv開源摘要生成模型 - 免費部署助力學術論文快速摘要生成

Bartxiv

由JustinDu開發

BARTxiv是基於facebook/bart-large-cnn在arxiv-summarization數據集上微調的摘要生成模型，專注於學術論文摘要生成任務。

下載量 43

發布時間 : 1/2/2023

模型概述

該模型專門用於生成學術論文的摘要，在arxiv-summarization驗證集上取得了rouge1 41.70和rouge2 15.13的成績。

學術論文摘要優化

專門針對arXiv學術論文進行優化訓練的摘要生成模型

基於BART架構

採用BART-large架構，具備強大的序列到序列生成能力

高效微調

在arxiv-summarization數據集上進行了9輪高效微調

學術論文摘要生成

長文本壓縮

關鍵信息提取

學術研究

論文自動摘要

為arXiv等平臺的學術論文生成簡潔準確的摘要

在驗證集上rouge1達到41.70

研究文獻預處理

幫助研究人員快速瞭解論文核心內容

訓練損失	輪數	步數	驗證損失	Rouge1	Rouge2	Rougel	Rougelsum
1.24	1.0	1073	1.24	38.32	12.80	20.55	34.50
1.04	2.0	2146	1.04	39.65	13.74	21.28	35.83
0.979	3.0	3219	0.98	40.19	14.30	21.87	36.38
0.970	4.0	4292	0.97	40.87	14.44	22.14	36.89
0.918	5.0	5365	0.92	41.17	14.94	22.54	37.40
0.901	6.0	6438	0.90	41.02	14.65	22.46	37.05
0.889	7.0	7511	0.89	41.32	15.09	22.64	37.42
0.900	8.0	8584	0.90	41.23	15.02	22.67	37.28
0.869	9.0	9657	0.87	41.70	15.13	22.85	37.77