M

Minilmv2 L6 H384 RoBERTa Large

Developed by torbenal
MiniLM v2 是微軟基於 RoBERTa-Large 通過知識蒸餾得到的輕量級語言模型,具有高效和緊湊的特點。
Downloads 15
Release Time : 3/15/2022

Model Overview

MiniLM v2 是一個輕量級的語言模型,通過知識蒸餾技術從 RoBERTa-Large 中提取知識,適用於多種自然語言處理任務。

Model Features

輕量高效
通過知識蒸餾技術,模型在保持高性能的同時大幅減小了參數量和計算開銷。
多功能性
適用於多種自然語言處理任務,包括文本分類、問答、語義相似度等。
高性能
在多個基準測試中表現優異,接近甚至超過原始 RoBERTa-Large 模型的性能。

Model Capabilities

文本分類
問答系統
語義相似度計算
文本嵌入
句子表示學習

Use Cases

文本分類
情感分析
用於分析文本的情感傾向,如正面、負面或中性。
在多個情感分析數據集上表現優異。
問答系統
開放域問答
用於回答用戶提出的開放域問題。
在 SQuAD 等問答數據集上表現良好。
語義相似度
句子相似度計算
用於計算兩個句子之間的語義相似度。
在 STS-B 等語義相似度數據集上表現優異。
AIbase
Empowering the Future, Your AI Solution Knowledge Base
© 2025AIbase