Jina Embeddings V3

🚀 jina-embeddings-v3

jina-embeddings-v3 是一款多语言模型，可用于特征提取、句子相似度计算等任务。它在多个 MTEB 数据集上进行了测试，展现出了良好的性能。

📚 详细文档

基本信息

评估结果

MTEB AFQMC (default)

• 任务类型：STS
• 评估指标：
  • cosine_pearson: 41.74237700998808
  • cosine_spearman: 43.4726782647566
  • euclidean_pearson: 42.244585459479964
  • euclidean_spearman: 43.525070045169606
  • main_score: 43.4726782647566
  • manhattan_pearson: 42.04616728224863
  • manhattan_spearman: 43.308828270754645
  • pearson: 41.74237700998808
  • spearman: 43.4726782647566

MTEB ArguAna-PL (default)

• 任务类型：Retrieval
• 评估指标：
  • main_score: 50.117999999999995
  • map_at_1: 24.253
  • map_at_10: 40.725
  • map_at_100: 41.699999999999996
  • map_at_1000: 41.707
  • map_at_20: 41.467999999999996
  • map_at_3: 35.467
  • map_at_5: 38.291
  • mrr_at_1: 24.751066856330013
  • mrr_at_10: 40.91063808169072
  • mrr_at_100: 41.885497923928675
  • mrr_at_1000: 41.89301098419842
  • mrr_at_20: 41.653552355442514
  • mrr_at_3: 35.656709340919775
  • mrr_at_5: 38.466097676623946
  • 其他众多评估指标（具体数值见原文档）

MTEB DBPedia-PL (default)

• 任务类型：Retrieval
• 评估指标：
  • main_score: 34.827000000000005
  • map_at_1: 7.049999999999999
  • map_at_10: 14.982999999999999
  • map_at_100: 20.816000000000003
  • map_at_1000: 22.33
  • map_at_20: 17.272000000000002
  • map_at_3: 10.661
  • map_at_5: 12.498
  • mrr_at_1: 57.25
  • mrr_at_10: 65.81934523809524
  • mrr_at_100: 66.2564203928212
  • mrr_at_1000: 66.27993662923856
  • mrr_at_20: 66.0732139130649
  • mrr_at_3: 64.08333333333333
  • mrr_at_5: 65.27083333333333
  • 其他众多评估指标（具体数值见原文档）

MTEB FiQA-PL (default)

• 任务类型：Retrieval
• 评估指标：
  • main_score: 38.828
  • map_at_1: 19.126
  • map_at_10: 31.002000000000002
  • map_at_100: 32.736
  • map_at_1000: 32.933
  • map_at_20: 31.894
  • map_at_3: 26.583000000000002
  • map_at_5: 28.904000000000003
  • mrr_at_1: 37.808641975308646
  • 其他评估指标（文档未完整给出）

📄 许可证

本模型使用 CC BY-NC 4.0 许可证。