# 多語言代碼理解

CodeModernBERT-Owl-3.0 是 CodeModernBERT 系列中多語言長上下文編碼器模型的最終預訓練版本，針對代碼搜索、代碼摘要、錯誤修復和表示學習等下游代碼相關任務進行了優化。

專為高質量代碼理解和語義檢索設計的最新預訓練模型，支持8種編程語言的長序列處理。

CodeBERTa是一個基於RoBERTa架構的代碼理解模型，專門針對多種編程語言訓練，能夠高效處理代碼相關任務。

CodeT5+是一個開源代碼大語言模型家族，採用編碼器-解碼器架構，支持多種代碼理解與生成任務。本模型為220M參數版本，專門針對Python代碼生成進行了優化。

基於Transformer架構的圖結構預訓練模型，專為編程語言設計，結合代碼序列與數據流信息。