Xtremedistil L6 H256 Zeroshot V1.1 All 33

🚀 xtremedistil-l6-h256-zeroshot-v1.1-all-33

本模型是一個輕量級且高效的零樣本分類模型，專為邊緣設備或瀏覽器內使用場景設計，在保證一定性能的同時，顯著提升了推理速度。

🚀 快速開始

本模型使用了與 MoritzLaurer/deberta-v3-large-zeroshot-v1.1-all-33 模型卡片中描述的相同流程進行微調，詳細信息可參考此 論文。

基礎模型為 microsoft/xtremedistil-l6-h256-uncased。該模型僅具有 2200 萬個骨幹參數和 3000 萬個詞彙參數。骨幹參數是推理過程中活躍的主要參數，相較於更大的模型，能顯著提升推理速度。模型大小僅為 25 MB。

本模型經過訓練，旨在提供一種非常小且高效的零樣本分類選項，尤其適用於邊緣設備或使用 transformers.js 的瀏覽器內用例。

📚 詳細文檔

有關使用說明和其他詳細信息，請參考 MoritzLaurer/deberta-v3-large-zeroshot-v1.1-all-33 模型卡片以及此 論文。

🔧 技術細節

為節省時間和計算資源，未對該模型進行零樣本評估。下表展示了模型在所有訓練數據集上的標準準確率（請注意，NLI 數據集為二分類）。

總體而言，該模型比其更大的同類模型效率更高，但性能稍遜一籌。

📄 許可證

本模型採用 MIT 許可證。