# 16k长上下文

基于Qwen2.5-Math-7B改进的模型，扩展了上下文窗口并优化了推理能力

Jais系列是专为阿拉伯语优化的双语大语言模型，同时具备强大的英语能力。30B-16K版本拥有300亿参数，支持16,384个token的上下文长度。

基于CodeLlama微调的70亿参数模型，专为自然语言转SQL任务设计，支持多种SQL方言和16k上下文长度处理

Code Llama是一个预训练和微调的生成文本模型系列，专为通用代码合成和理解而设计。本模型是700亿参数的指令调优版本。