Long T5 Tglobal Large Pubmed 3k Booksum 16384 WIP15
基于Long-T5架构的大规模摘要生成模型,专门针对书籍和长文档摘要任务进行优化
下载量 17
发布时间 : 9/20/2022
模型简介
该模型是基于Long-T5架构的变体,专门用于处理长文档和书籍的摘要生成任务。它在pubmed和booksum数据集上进行训练,能够处理长达16384个token的输入文本。
模型特点
长文本处理能力
支持处理长达16384个token的输入文本,适合书籍和长文档摘要
专业领域优化
在pubmed医学文献和booksum书籍摘要数据集上进行了专门训练
多数据集表现
在多个摘要数据集上进行了评估,包括samsum、booksum和gov_report
模型能力
长文本摘要生成
书籍内容摘要
技术文档摘要
政府报告摘要
使用案例
学术研究
医学文献摘要
为pubmed等医学文献生成简洁摘要
ROUGE-1得分35.33(booksum数据集)
出版行业
书籍内容摘要
为长篇书籍生成章节或全书摘要
平均生成长度268个token(booksum数据集)
政府文档处理
政府报告摘要
处理长篇政府报告并生成关键点摘要
ROUGE-1得分37.04(gov_report数据集)
精选推荐AI模型
Llama 3 Typhoon V1.5x 8b Instruct
专为泰语设计的80亿参数指令模型,性能媲美GPT-3.5-turbo,优化了应用场景、检索增强生成、受限生成和推理任务
大型语言模型
Transformers 支持多种语言

L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-Tiny是一个基于SODA数据集训练的超小型对话模型,专为边缘设备推理设计,体积仅为Cosmo-3B模型的2%左右。
对话系统
Transformers 英语

C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
基于RoBERTa架构的中文抽取式问答模型,适用于从给定文本中提取答案的任务。
问答系统 中文
R
uer
2,694
98