# 輕量級問答

MobileBERT是BERT_LARGE的輕量化版本，採用瓶頸結構設計，在自注意力機制與前饋網絡之間實現平衡。本模型在SQuAD1.1數據集上微調，適用於問答任務。

基於Google BERT-Tiny架構，在SQuAD2.0問答數據集上微調的小型問答模型，體積僅16.74MB

MobileBERT是BERT_LARGE的輕量化版本，在SQuAD2.0數據集上微調而成的問答系統模型。

BERT-Mini是由谷歌研究團隊開發的小型BERT模型，在SQuAD 2.0數據集上針對問答任務進行微調，適用於計算資源受限的環境。