Tecoa4 Clip

🚀 OpenCLIP

OpenCLIPは、ゼロショット画像分類を行うためのライブラリです。このライブラリは、特定のモデルを利用して画像分類タスクを効果的に実行できます。

[論文] [GitHub]

TeCoA (Mao et al. (2023)) CLIP ViT-L/14モデルを使用しています。OpenAIのCLIPを初期化し、ImageNet上で無限ノルムと半径4/255を用いた教師付き敵対的微調整を行っています。

🚀 クイックスタート

モデルの読み込み

以下のコードを使用して、モデルと画像処理ツールを読み込むことができます。

model, _, image_processor = open_clip.create_model_and_transforms('hf-hub:chs20/tecoa4-clip')

📚 引用

もしこのモデルが役に立った場合は、以下の論文を引用していただけると幸いです。

@article{schlarmann2024robustclip,
    title={Robust CLIP: Unsupervised Adversarial Fine-Tuning of Vision Embeddings for Robust Large Vision-Language Models}, 
    author={Christian Schlarmann and Naman Deep Singh and Francesco Croce and Matthias Hein},
    year={2024},
    journal={ICML}
}

📄 ライセンス

このプロジェクトはMITライセンスの下で公開されています。