# テキストエンコーダー

T5（Text-to-Text Transfer Transformer）はGoogleが開発した汎用テキスト変換モデルで、様々な自然言語処理タスクを処理できます。

ELECTRAは識別型事前学習による自己教師あり言語表現学習手法で、低計算コストで効率的な訓練を実現します。

dbmdz/distilbert-base-turkish-casedをベースにファインチューニングされたトルコ語テキストエンコーダーで、CLIPのViT - B/32画像エンコーダーと組み合わせて使用するためのものです。