Greek Text Summarization GGUF

🚀 希腊文本摘要量化模型

本项目提供了 kriton/greek-text-summarization 基础模型的静态量化版本，适用于希腊语文本摘要任务。通过量化技术，可在不同硬件条件下高效运行模型。

🚀 快速开始

若你不确定如何使用 GGUF 文件，请参考 TheBloke 的 README 以获取更多详细信息，包括如何拼接多部分文件。

📚 详细文档

关于模型

本项目是对 kriton/greek-text-summarization 模型的静态量化。目前，加权/imatrix 量化似乎暂时不可用（就我所知）。如果在静态量化版本发布大约一周后它们仍未出现，可能我没有对此进行计划。你可以通过开启社区讨论来请求相关内容。

提供的量化版本

（按大小排序，不一定代表质量。IQ 量化通常优于类似大小的非 IQ 量化）

这里有一张由 ikawrakow 提供的对比一些低质量量化类型的实用图表（数值越低越好）：

此外，这里是 Artefact2 对此事的看法： https://gist.github.com/Artefact2/b5f810600771265fc1e39442288e8ec9

常见问题解答 / 模型请求

你可以查看 常见问题解答和模型请求 以获取可能遇到问题的答案，或者如果你希望对其他模型进行量化。

致谢

感谢我的公司 nethype GmbH 允许我使用其服务器，并对我的工作站进行升级，使我能够在业余时间完成这项工作。此外，感谢 @nicoboss 让我使用他的私人超级计算机，使我能够提供更多、质量更高的 imatrix 量化版本。

📄 许可证

本项目采用 apache-2.0 许可证。