🚀 Swin Transformer(基础尺寸模型)
Swin Transformer是一个在分辨率为224x224的ImageNet - 1k数据集上训练的模型。它能用于图像分类等视觉任务,为相关领域的研究和应用提供了强大的支持。
🚀 快速开始
Swin Transformer模型可用于图像分类任务。你可以在模型中心查找感兴趣任务的微调版本。以下是如何使用该模型将COCO 2017数据集中的图像分类为1000个ImageNet类别之一的示例:
from transformers import AutoFeatureExtractor, SwinForImageClassification
from PIL import Image
import requests
url = "http://images.cocodataset.org/val2017/000000039769.jpg"
image = Image.open(requests.get(url, stream=True).raw)
feature_extractor = AutoFeatureExtractor.from_pretrained("microsoft/swin-base-patch4-window7-224")
model = SwinForImageClassification.from_pretrained("microsoft/swin-base-patch4-window7-224")
inputs = feature_extractor(images=image, return_tensors="pt")
outputs = model(**inputs)
logits = outputs.logits
predicted_class_idx = logits.argmax(-1).item()
print("Predicted class:", model.config.id2label[predicted_class_idx])
更多代码示例请参考文档。
✨ 主要特性
Swin Transformer是一种视觉Transformer。它通过在更深的层中合并图像块(灰色部分)来构建分层特征图,并且由于仅在每个局部窗口(红色部分)内计算自注意力,因此对输入图像大小具有线性计算复杂度。这使得它可以作为图像分类和密集识别任务的通用主干网络。相比之下,以前的视觉Transformer只能产生单一低分辨率的特征图,并且由于全局计算自注意力,对输入图像大小具有二次计算复杂度。

来源
📚 详细文档
预期用途与限制
你可以使用原始模型进行图像分类。可前往模型中心查找感兴趣任务的微调版本。
BibTeX引用
@article{DBLP:journals/corr/abs-2103-14030,
author = {Ze Liu and
Yutong Lin and
Yue Cao and
Han Hu and
Yixuan Wei and
Zheng Zhang and
Stephen Lin and
Baining Guo},
title = {Swin Transformer: Hierarchical Vision Transformer using Shifted Windows},
journal = {CoRR},
volume = {abs/2103.14030},
year = {2021},
url = {https://arxiv.org/abs/2103.14030},
eprinttype = {arXiv},
eprint = {2103.14030},
timestamp = {Thu, 08 Apr 2021 07:53:26 +0200},
biburl = {https://dblp.org/rec/journals/corr/abs-2103-14030.bib},
bibsource = {dblp computer science bibliography, https://dblp.org}
}
📄 许可证
本项目采用Apache - 2.0许可证。