Dallah Llama

🚀 Dallah：适用于阿拉伯语的方言感知多模态大语言模型

Dallah是一款专为阿拉伯语量身定制的先进多模态大语言模型（MLLM），特别专注于理解和生成各种阿拉伯方言内容。它基于LLaVA框架构建，并采用LLaMA - 2架构，整合了文本和视觉数据，以实现全面的多模态交互。

📚 详细文档

模型详情

训练数据

Dallah在包含文本和视觉信息的多样化数据集上进行了微调：

• 文本数据：包含现代标准阿拉伯语和六种主要阿拉伯方言，确保模型在不同地区语言变体方面的熟练程度。
• 视觉数据：由图像 - 文本对组成，使模型能够处理和生成整合两种模态的内容。

性能表现

Dallah在阿拉伯语多模态大语言模型中展现了最先进的性能：

• 在现代标准阿拉伯语和方言阿拉伯语基准测试中均表现出色。
• 能够有效处理涉及文本和视觉元素的复杂多模态交互。

应用场景

Dallah的多模态和方言感知能力使其适用于一系列应用，包括：

• 多语言聊天机器人：通过理解和使用特定阿拉伯方言进行响应，增强用户交互体验。
• 内容创作：协助为不同的阿拉伯语受众生成符合文化和语言习惯的内容。
• 教育工具：通过提供各种方言的示例和解释，支持语言学习。
• 文化保护：在数字平台上记录和推广不同阿拉伯方言的使用。

📄 许可证

引用说明

如果您在研究或应用中使用了Dallah，请引用以下论文：

@inproceedings{alwajih2024dallah,
  title={Dallah: A Dialect-Aware Multimodal Large Language Model for Arabic},
  author={Alwajih, Fakhraddin and Bhatia, Gagan and Abdul-Mageed, Muhammad},
  booktitle={Proceedings of The Second Arabic Natural Language Processing Conference},
  pages={320--336},
  year={2024},
  address={Bangkok, Thailand},
  publisher={Association for Computational Linguistics},
  url={https://aclanthology.org/2024.arabicnlp-1.27}
}