AIbase
TW
模型選型
標籤
MLM預訓練

# MLM預訓練

Gte En Mlm Base
Apache-2.0
GTE-v1.5系列中的英語文本編碼器，基於BERT架構改進，支持長達8192的上下文長度，適用於英語文本表示任務。
文本嵌入 支持多種語言
G
Alibaba-NLP
231
7
Bert 1.3b
Apache-2.0
基於Megatron-LM預訓練的Transformer編碼器，專為日語場景設計
大型語言模型 Transformers 支持多種語言
B
retrieva-jp
56
15
Codebert Python
該模型是基於microsoft/codebert-base-mlm在Python代碼上訓練的掩碼語言模型，主要用於代碼評估和生成任務。
大型語言模型 Transformers
C
neulab
1.7M
25
Roberta TR Medium Wp 44k
基於土耳其語的RoBERTa模型，採用掩碼語言建模目標預訓練，不區分大小寫，適用於土耳其語文本處理任務。
大型語言模型 Transformers 其他
R
ctoraman
84
0
Javabert
Apache-2.0
基於Java軟件代碼預訓練的類BERT模型，專為Java編程語言設計，支持代碼填空預測任務。
大型語言模型 Transformers 其他
J
CAUKiel
220
12
AIbase
智啟未來，您的人工智能解決方案智庫
English简体中文繁體中文にほんご
© 2025AIbase