# 128K長テキスト処理

Phi-3.5-mini-instructは、Phi-3で使用されるデータセットに基づいて構築された、軽量で先進的なオープンソースモデルです。高品質で推論に富んだデータに焦点を当てています。128Kトークンのコンテキスト長をサポートし、強力な多言語能力と長いコンテキスト処理能力を備えています。

Typhoon2.1-Gemma3-4Bは命令型のタイ語大規模言語モデルで、40億のパラメータと128Kのコンテキスト長を持ち、関数呼び出し機能をサポートしています。

Qwen2.5は通義大規模言語モデルの最新シリーズで、5億から720億のパラメータを持つ様々なモデルを提供し、コーディング、数学、命令遵守、長テキスト処理において顕著な改善が見られます。

Gemma 3はGoogleが開発した軽量マルチモーダルモデルで、テキストと画像の入力を処理し、テキスト出力を生成することができます。このモデルは128Kの大きなコンテキストウィンドウと140種類以上の言語のマルチ言語サポートを備えています。

Cohere Labs Command R+ は1040億パラメータの多言語大規模言語モデルで、検索強化生成（RAG）やツール使用などの高度な機能を備え、128Kのコンテキスト長をサポートします。

Buddhi-128k-Chatは、128Kのコンテキストウィンドウを持つ汎用の最初のチャットモデルです。Mistral 7B Instructを基に細かく微調整され、革新的なYaRN技術で最適化されており、最大128,000トークンの拡張コンテキスト長を処理できます。