🚀 cde-small-v1
cde-small-v1
是一个在多个自然语言处理任务中表现出色的模型,它在分类、检索、聚类等多种任务上进行了评估,为相关领域的研究和应用提供了有价值的参考。
📚 详细文档
模型评估结果
数据集名称 |
任务类型 |
主要指标及数值 |
MTEB AmazonCounterfactualClassification (en) |
分类 |
准确率:87.02985074626866;AP:56.706190238632956;AP加权:56.706190238632956;F1:81.93161953007674;F1加权:87.7650174177188;主要得分:87.02985074626866 |
MTEB AmazonPolarityClassification (default) |
分类 |
准确率:94.664175;AP:91.68668057762052;AP加权:91.68668057762052;F1:94.65859470333152;F1加权:94.65859470333152;主要得分:94.664175 |
MTEB AmazonReviewsClassification (en) |
分类 |
准确率:55.762;F1:55.06427827477677;F1加权:55.06427827477677;主要得分:55.762 |
MTEB ArguAna (default) |
检索 |
主要得分:71.99600000000001;MAP@1:49.004;MAP@10:64.741;MAP@100:65.045;MAP@1000:65.048;MAP@20:64.999;MAP@3:61.344;MAP@5:63.595;MRR@1:50.71123755334281;MRR@10:65.32688703741336;MRR@100:65.63793917015693;MRR@1000:65.64038101143724;MRR@20:65.59178002869953;MRR@3:61.960644855381695;MRR@5:64.12636320531058 等 |
MTEB ArxivClusteringP2P (default) |
聚类 |
主要得分:48.629569816593516;V-measure:48.629569816593516;V-measure标准差:14.01810149072028 |
MTEB ArxivClusteringS2S (default) |
聚类 |
主要得分:40.52366904677561;V-measure:40.52366904677561;V-measure标准差:14.375876773823757 |
MTEB AskUbuntuDupQuestions (default) |
重排序 |
主要得分:61.27347206107508;MAP:61.27347206107508;MRR:74.49105219188321;nAUC_map_diff1:13.442645655149457 等 |
MTEB BIOSSES (default) |
STS |
余弦皮尔逊相关系数:89.09452267906886;余弦斯皮尔曼相关系数:86.73450642504955;欧几里得皮尔逊相关系数:87.1275130552617;欧几里得斯皮尔曼相关系数:86.93812552248012;主要得分:86.73450642504955 等 |
MTEB Banking77Classification (default) |
分类 |
准确率:88.58116883116884;F1:88.54536316207125;F1加权:88.54536316207125;主要得分:88.58116883116884 |
MTEB BiorxivClusteringP2P (default) |
聚类 |
主要得分:44.89554099528695;V-measure:44.89554099528695;V-measure标准差:0.6101675839696261 |
MTEB BiorxivClusteringS2S (default) |
聚类 |
主要得分:37.89775676199564;V-measure:37.89775676199564;V-measure标准差:0.6980439644171996 |
MTEB CQADupstackAndroidRetrieval (default) |
检索 |
主要得分:49.239;MAP@1:31.407;MAP@10:42.788;MAP@100:44.163999999999994;MAP@1000:44.285000000000004;MAP@20:43.531;MAP@3:39.381;MAP@5:41.296;MRR@1:38.91273247496424;MRR@10:48.82553307446011;MRR@100:49.5278584841276;MRR@1000:49.56897938168851 等 |