Tecoa2 Clip

🚀 OpenCLIP

OpenCLIPは、ゼロショット画像分類を行うためのライブラリです。TeCoAモデルを使用して、画像に対する分類を行います。

🚀 クイックスタート

このライブラリは、OpenCLIPを使用したゼロショット画像分類を行うためのものです。TeCoA (Mao et al. (2023)) CLIP ViT-L/14モデルを使用しています。このモデルは、OpenAI CLIPをImageNet上で無限ノルムと半径2/255で教師付き敵対的微調整を行っています。

[論文] [GitHub]

💻 使用例

基本的な使用法

model, _, image_processor = open_clip.create_model_and_transforms('hf-hub:chs20/tecoa2-clip')

📄 ライセンス

このプロジェクトはMITライセンスの下で公開されています。

📚 引用

もしこのモデルが役に立った場合、以下の論文を引用していただけると幸いです。

@article{schlarmann2024robustclip,
    title={Robust CLIP: Unsupervised Adversarial Fine-Tuning of Vision Embeddings for Robust Large Vision-Language Models}, 
    author={Christian Schlarmann and Naman Deep Singh and Francesco Croce and Matthias Hein},
    year={2024},
    journal={ICML}
}