# 16k長上下文

基於Qwen2.5-Math-7B改進的模型，擴展了上下文窗口並優化了推理能力

Jais系列是專為阿拉伯語優化的雙語大語言模型，同時具備強大的英語能力。30B-16K版本擁有300億參數，支持16,384個token的上下文長度。

基於CodeLlama微調的70億參數模型，專為自然語言轉SQL任務設計，支持多種SQL方言和16k上下文長度處理

Code Llama是一個預訓練和微調的生成文本模型系列，專為通用代碼合成和理解而設計。本模型是700億參數的指令調優版本。