Long T5 Tglobal Base 16384 Book Summary

🚀 long-t5-tglobal-base-16384 + BookSum

本项目聚焦于文本摘要任务，借助long-t5-tglobal-base-16384模型与BookSum数据集，在多种文本摘要场景中展现出了良好的性能，为长文档摘要等相关应用提供了有效的解决方案。

🚀 快速开始

你可通过以下链接在Google Colab中体验示例： 示例链接

✨ 主要特性

• 多数据集支持：可在kmfoda/booksum、samsum、cnn_dailymail、xsum、billsum、big_patent、launch/gov_report等多个数据集上进行文本摘要任务。
• 参数可配置：提供了如max_length、min_length、no_repeat_ngram_size等多个可配置参数，方便根据不同需求进行调整。

📦 安装指南

文档未提供具体安装步骤，故跳过此章节。

💻 使用示例

基础用法

以下是一个简单的示例，展示如何选择关键令牌：

# let's consider following sentence as an example
example = ['BigBird', 'is', 'now', 'available', 'in', 'HuggingFace', 'for', 'extractive', 'question', 'answering']
# further let's assume, we're trying to understand the representation of 'available' i.e.
query_token = 'available'
# We will initialize an empty `set` and fill up the tokens of our interest as we proceed in this section.
key_tokens = []
# => currently 'available' token doesn't have anything to attend

高级用法

文档未提供高级用法示例，故跳过此部分。

📚 详细文档

标签与数据集

• 标签：summarization、summary、booksum、long-document、long-form
• 数据集：kmfoda/booksum

指标

使用rouge作为评估指标。

小部件示例

提供了多个不同类型的文本示例，用于展示模型的摘要能力，包括地震相关文本、科学论文、转录音频讲座、BigBird博客介绍、关于《瑞克和莫蒂》的评价以及埃菲尔铁塔介绍等。

参数配置

模型索引与结果

🔧 技术细节

文档未提供具体技术细节，故跳过此章节。

📄 许可证

• apache-2.0
• bsd-3-clause