# NLP任务优化

这是一个基于KGR10语料库进行预训练的波兰语RoBERTa模型，目前已完成目标训练时长的约5%，将随着训练进度发布增量版本。

PTT5是基于BrWac语料库预训练的T5模型，专为葡萄牙语自然语言处理任务优化，提供三种规格及两种词表选择。

中文ELECTRA是哈工大-讯飞联合实验室基于谷歌ELECTRA架构开发的中文预训练模型，参数量仅为BERT的1/10但性能相近。

基于180G中文数据训练的ELECTRA模型，参数量小但性能优越，适合中文自然语言处理任务

SuperPAL是一个用于摘要-源文本命题级对齐任务的模型，能够实现文本摘要与源文本之间的精细对齐。

这是bert-base-multilingual-cased的定制化精简版本，专门针对保加利亚语优化，能完全复现原始模型生成的表征，保持原始准确率。