IBM Granite Embedding 30M English 開源模型 - 支持英文文本信息高效嵌入

首頁

Granite Embedding 30m English

由ibm-granite開發

IBM Granite Embedding 30M English 是一個基於 transformer 架構的英文文本嵌入模型，由 IBM 開發併發布。

文本嵌入

Transformers

英語開源協議:Apache-2.0 #英文文本嵌入 #多任務評估 #分類優化

下載量 78.53k

發布時間 : 12/4/2024

模型概述

該模型主要用於生成高質量的英文文本嵌入，適用於多種自然語言處理任務，如文本分類、信息檢索等。

模型特點

高質量文本嵌入

能夠生成高質量的英文文本嵌入，適用於多種下游任務。

多任務支持

在多種自然語言處理任務上表現良好，包括文本分類和信息檢索。

輕量級

模型參數規模為30M，相對輕量，適合資源有限的環境。

模型能力

文本嵌入生成

文本分類

信息檢索

使用案例

電子商務

亞馬遜評論分類

用於對亞馬遜商品評論進行分類，識別正面和負面評價。

在MTEB AmazonPolarityClassification數據集上準確率為62.98%。

信息檢索

應用檢索

用於檢索相關應用，提升搜索結果的相關性。

在MTEB AppsRetrieval數據集上NDCG@10為6.20。

語言:

英文許可證: apache-2.0 庫名稱: sentence-transformers 標籤:
語言
granite
嵌入
mteb
transformers 模型索引:
名稱: ibm-granite/granite-embedding-30m-english 結果:
- 數據集: 配置: en-ext 名稱: MTEB AmazonCounterfactualClassification (en-ext) 版本: e8379541af4e31359cca9fbcf4b00f2671dba205 分割: 測試類型: mteb/amazon_counterfactual 指標:
  - 類型: 準確率值: 62.856100000000005
  - 類型: f1 值: 51.5046
  - 類型: 加權f1 值: 69.9775
  - 類型: ap 值: 15.4995
  - 類型: 加權ap 值: 15.4995
  - 類型: 主要分數值: 62.856100000000005 任務: 類型: 分類
- 數據集: 配置: en 名稱: MTEB AmazonCounterfactualClassification (en) 版本: e8379541af4e31359cca9fbcf4b00f2671dba205 分割: 測試類型: mteb/amazon_counterfactual 指標:
  - 類型: 準確率值: 60.925399999999996
  - 類型: f1 值: 55.0092
  - 類型: 加權f1 值: 64.8014
  - 類型: ap 值: 25.0517
  - 類型: 加權ap 值: 25.0517
  - 類型: 主要分數值: 60.925399999999996 任務: 類型: 分類
- 數據集: 配置: 默認名稱: MTEB AmazonPolarityClassification (默認) 版本: e2d317d38cd51312af73b3d32a06d1a08b442046 分割: 測試類型: mteb/amazon_polarity 指標:
  - 類型: 準確率值: 62.983599999999996
  - 類型: f1 值: 62.553599999999996
  - 類型: 加權f1 值: 62.553599999999996
  - 類型: ap 值: 58.3423
  - 類型: 加權ap 值: 58.3423
  - 類型: 主要分數值: 62.983599999999996 任務: 類型: 分類
- 數據集: 配置: en 名稱: MTEB AmazonReviewsClassification (en) 版本: 1399c76144fd37290681b995c656ef9b2e06e26d 分割: 測試類型: mteb/amazon_reviews_multi 指標:
  - 類型: 準確率值: 32.178000000000004
  - 類型: f1 值: 31.5201
  - 類型: 加權f1 值: 31.5201
  - 類型: 主要分數值: 32.178000000000004 任務: 類型: 分類
- 數據集: 配置: 默認名稱: MTEB AppsRetrieval (默認) 版本: f22508f96b7a36c2415181ed8bb76f76e04ae2d5 分割: 測試類型: CoIR-Retrieval/apps 指標:
  - 類型: ndcg_at_1 值: 3.5060000000000002
  - 類型: ndcg_at_3 值: 4.789000000000001
  - 類型: ndcg_at_5 值: 5.314
  - 類型: ndcg_at_10 值: 6.203
  - 類型: ndcg_at_20 值: 6.801
  - 類型: ndcg_at_100 值: 8.588
  - 類型: ndcg_at_1000 值: 12.418999999999999
  - 類型: map_at_1 值: 3.5060000000000002
  - 類型: map_at_3 值: 4.471
  - 類型: map_at_5 值: 4.7620000000000005
  - 類型: map_at_10 值: 5.117
  - 類型: map_at_20 值: 5.281000000000001
  - 類型: map_at_100 值: 5.501
  - 類型: map_at_1000 值: 5.611
  - 類型: recall_at_1 值: 3.5060000000000002
  - 類型: recall_at_3 值: 5.71
  - 類型: recall_at_5 值: 6.984999999999999
  - 類型: recall_at_10 值: 9.801
  - 類型: recall_at_20 值: 12.165
  - 類型: recall_at_100 值: 22.205
  - 類型: recall_at_1000 值: 54.396
  - 類型: precision_at_1 值: 3.5060000000000002
  - 類型: precision_at_3 值: 1.9029999999999998
  - 類型: precision_at_5 值: 1.397
  - 類型: precision_at_10 值: 0.98
  - 類型: precision_at_20 值: 0.608
  - 類型: precision_at_100 值: 0.22200000000000003
  - 類型: precision_at_1000 值: 0.054
  - 類型: mrr_at_1 值: 3.5060000000000002
  - 類型: mrr_at_3 值: 4.471
  - 類型: mrr_at_5 值: 4.7618
  - 類型: mrr_at_10 值: 5.1166
  - 類型: mrr_at_20 值: 5.2806
  - 類型: mrr_at_100 值: 5.5014
  - 類型: mrr_at_1000 值: 5.6113
  - 類型: nauc_ndcg_at_1_max 值: 32.8089
  - 類型: nauc_ndcg_at_1_std 值: 13.0518
  - 類型: nauc_ndcg_at_1_diff1 值: 44.3602
  - 類型: nauc_ndcg_at_3_max 值: 28.5037
  - 類型: nauc_ndcg_at_3_std 值: 12.1308
  - 類型: nauc_ndcg_at_3_diff1 值: 33.0191
  - 類型: nauc_ndcg_at_5_max 值: 25.970100000000002
  - 類型: nauc_ndcg_at_5_std 值: 12.089500000000001
  - 類型: nauc_ndcg_at_5_diff1 值: 30.098200000000002
  - 類型: nauc_ndcg_at_10_max 值: 23.9177
  - 類型: nauc_ndcg_at_10_std 值: 12.1279
  - 類型: nauc_ndcg_at_10_diff1 值: 26.3951
  - 類型: nauc_ndcg_at_20_max 值: 22.2086
  - 類型: nauc_ndcg_at_20_std 值: 11.355
  - 類型: nauc_ndcg_at_20_diff1 值: 24.9668
  - 類型: nauc_ndcg_at_100_max 值: 20.1961
  - 類型: nauc_ndcg_at_100_std 值: 11.368300000000001
  - 類型: nauc_ndcg_at_100_diff1 值: 21.654200000000003
  - 類型: nauc_ndcg_at_1000_max 值: 19.7802
  - 類型: nauc_ndcg_at_1000_std 值: 11.9399
  - 類型: nauc_ndcg_at_1000_diff1 值: 19.8429
  - 類型: nauc_map_at_1_max 值: 32.8089
  - 類型: nauc_map_at_1_std 值: 13.0518
  - 類型: nauc_map_at_1_diff1 值: 44.3602
  - 類型: nauc_map_at_3_max 值: 29.285600000000002
  - 類型: nauc_map_at_3_std 值: 12.4277
  - 類型: nauc_map_at_3_diff1 值: 35.2678
  - 類型: nauc_map_at_5_max 值: 27.6754
  - 類型: nauc_map_at_5_std 值: 12.4042
  - 類型: nauc_map_at_5_diff1 值: 33.330799999999996
  - 類型: nauc_map_at_10_max 值: 26.571299999999997
  - 類型: nauc_map_at_10_std 值: 12.439400000000001
  - 類型: nauc_map_at_10_diff1 值: 31.275399999999998
  - 類型: nauc_map_at_20_max 值: 25.8795
  - 類型: nauc_map_at_20_std 值: 12.1596
  - 類型: nauc_map_at_20_diff1 值: 30.6354
  - 類型: nauc_map_at_100_max 值: 25.3369
  - 類型: nauc_map_at_100_std 值: 12.0245
  - 類型: nauc_map_at_100_diff1 值: 29.8703
  - 類型: nauc_map_at_1000_max 值: 25.239800000000002
  - 類型: nauc_map_at_1000_std 值: 12.0242
  - 類型: nauc_map_at_1000_diff1 值: 29.7235
  - 類型: nauc_recall_at_1_max 值: 32.8089
  - 類型: nauc_recall_at_1_std 值: 13.0518
  - 類型: nauc_recall_at_1_diff1 值: 44.3602
  - 類型: nauc_recall_at_3_max 值: 26.747700000000002
  - 類型: nauc_recall_at_3_std 值: 11.4203
  - 類型: nauc_recall_at_3_diff1 值: 27.9047
  - 類型: nauc_recall_at_5_max 值: 22.3707
  - 類型: nauc_recall_at_5_std 值: 11.4164
  - 類型: nauc_recall_at_5_diff1 值: 23.4182
  - 類型: nauc_recall_at_10_max 值: 19.2758
  - 類型: nauc_recall_at_10_std 值: 11.578800000000001
  - 類型: nauc_recall_at_10_diff1 值: 18.030099999999997
  - 類型: nauc_recall_at_20_max 值: 16.1643
  - 類型: nauc_recall_at_20_std 值: 9.9037
  - 類型: nauc_recall_at_20_diff1 值: 16.0833
  - 類型: nauc_recall_at_100_max 值: 13.644700000000002
  - 類型: nauc_recall_at_100_std 值: 10.986799999999999
  - 類型: nauc_recall_at_100_diff1 值: 11.0515
  - 類型: nauc_recall_at_1000_max 值: 13.9712
  - 類型: nauc_recall_at_1000_std 值: 13.4048
  - 類型: nauc_recall_at_1000_diff1 值: 6.569500000000001
  - 類型: nauc_precision_at_1_max 值: 32.8089
  - 類型: nauc_precision_at_1_std 值: 13.0518
  - 類型: nauc_precision_at_1_diff1 值: 44.3602
  - 類型: nauc_precision_at_3_max 值: 26.747700000000002
  - 類型: nauc_precision_at_3_std 值: 11.4203
  - 類型: nauc_precision_at_3_diff1 值: 27.9047
  - 類型: nauc_precision_at_5_max 值: 22.3707
  - 類型: nauc_precision_at_5_std 值: 11.4164
  - 類型: nauc_precision_at_5_diff1 值: 23.4182
  - 類型: nauc_precision_at_10_max 值: 19.2758
  - 類型: nauc_precision_at_10_std 值: 11.578800000000001
  - 類型: nauc_precision_at_10_diff1 值: 18.030099999999997
  - 類型: nauc_precision_at_20_max 值: 16.1643
  - 類型: nauc_precision_at_20_std 值: 9.9037
  - 類型: nauc_precision_at_20_diff1 值: 16.0833
  - 類型: nauc_precision_at_100_max 值: 13.644700000000002
  - 類型: nauc_precision_at_100_std 值: 10.986799999999999
  - 類型: nauc_precision_at_100_diff1 值: 11.0515
  - 類型: nauc_precision_at_1000_max 值: 13.9712
  - 類型: nauc_precision_at_1000_std 值: 13.4048
  - 類型: nauc_precision_at_1000_diff1 值: 6.569500000000001
  - 類型: nauc_mrr_at_1_max 值: 32.8089
  - 類型: nauc_mrr_at_1_std 值: 13.0518
  - 類型: nauc_mrr_at_1_diff1 值: 44.3602
  - 類型: nauc_mrr_at_3_max 值: 29.285600000000002
  - 類型: nauc_mrr_at_3_std 值: 12.4277
  - 類型: nauc_mrr_at_3_diff1 值: 35.2678
  - 類型: nauc_mrr_at_5_max 值: 27.6754
  - 類型: nauc_mrr_at_5_std 值: 12.4042
  - 類型: nauc_mrr_at_5_diff1 值: 33.330799999999996
  - 類型: nauc_mrr_at_10_max 值: 26.571299999999997
  - 類型: nauc_mrr_at_10_std 值: 12.439400000000001
  - 類型: nauc_mrr_at_10_diff1 值: 31.275399999999998
  - 類型: nauc_mrr_at_20_max 值: 25.8795
  - 類型: nauc_mrr_at_20_std 值: 12.1596
  - 類型: nauc_mrr_at_20_diff1 值: 30.6354
  - 類型: nauc_mrr_at_100_max 值: 25.337
  - 類型: nauc_mrr_at_100_std 值: 12.0245
  - 類型: nauc_mrr_at_100_diff1 值: 29.870400000000004
  - 類型: nauc