🚀 Swin Transformer(基礎尺寸模型)
Swin Transformer是一個在分辨率為224x224的ImageNet - 1k數據集上訓練的模型。它能用於圖像分類等視覺任務,為相關領域的研究和應用提供了強大的支持。
🚀 快速開始
Swin Transformer模型可用於圖像分類任務。你可以在模型中心查找感興趣任務的微調版本。以下是如何使用該模型將COCO 2017數據集中的圖像分類為1000個ImageNet類別之一的示例:
from transformers import AutoFeatureExtractor, SwinForImageClassification
from PIL import Image
import requests
url = "http://images.cocodataset.org/val2017/000000039769.jpg"
image = Image.open(requests.get(url, stream=True).raw)
feature_extractor = AutoFeatureExtractor.from_pretrained("microsoft/swin-base-patch4-window7-224")
model = SwinForImageClassification.from_pretrained("microsoft/swin-base-patch4-window7-224")
inputs = feature_extractor(images=image, return_tensors="pt")
outputs = model(**inputs)
logits = outputs.logits
predicted_class_idx = logits.argmax(-1).item()
print("Predicted class:", model.config.id2label[predicted_class_idx])
更多代碼示例請參考文檔。
✨ 主要特性
Swin Transformer是一種視覺Transformer。它通過在更深的層中合併圖像塊(灰色部分)來構建分層特徵圖,並且由於僅在每個局部窗口(紅色部分)內計算自注意力,因此對輸入圖像大小具有線性計算複雜度。這使得它可以作為圖像分類和密集識別任務的通用主幹網絡。相比之下,以前的視覺Transformer只能產生單一低分辨率的特徵圖,並且由於全局計算自注意力,對輸入圖像大小具有二次計算複雜度。

來源
📚 詳細文檔
預期用途與限制
你可以使用原始模型進行圖像分類。可前往模型中心查找感興趣任務的微調版本。
BibTeX引用
@article{DBLP:journals/corr/abs-2103-14030,
author = {Ze Liu and
Yutong Lin and
Yue Cao and
Han Hu and
Yixuan Wei and
Zheng Zhang and
Stephen Lin and
Baining Guo},
title = {Swin Transformer: Hierarchical Vision Transformer using Shifted Windows},
journal = {CoRR},
volume = {abs/2103.14030},
year = {2021},
url = {https://arxiv.org/abs/2103.14030},
eprinttype = {arXiv},
eprint = {2103.14030},
timestamp = {Thu, 08 Apr 2021 07:53:26 +0200},
biburl = {https://dblp.org/rec/journals/corr/abs-2103-14030.bib},
bibsource = {dblp computer science bibliography, https://dblp.org}
}
📄 許可證
本項目採用Apache - 2.0許可證。