Miewid Msv3
M
Miewid Msv3
由conservationxlabs開發
MiewID-msv3是一個通過對比學習訓練的特徵提取器,用於在包含64種陸生和水生野生物種的大規模高質量數據集上進行個體重識別。
下載量 974
發布時間 : 10/15/2024
模型概述
該模型是一個野生物種重識別特徵主幹網絡,旨在通過匹配真實樣本數據庫實現跨物種個體重識別,其提取的特徵也可用於基於檢索的物種分類。
模型特點
多物種支持
支持64種陸生和水生野生物種的個體重識別,包括鰭、尾葉、側腹、面部等不同身體部位。
高質量特徵提取
通過對比學習訓練,能夠提取高質量的個體識別特徵,適用於跨物種匹配。
大規模數據集訓練
基於Wildbook平臺、Happywhale Kaggle競賽等多源數據集訓練,覆蓋廣泛的野生物種。
模型能力
野生物種個體識別
跨物種特徵匹配
基於檢索的物種分類
使用案例
野生動物保護
東北虎個體識別
用於識別和追蹤東北虎個體,支持保護工作
平均精度88.9%,首位命中率97.4%
鯨類個體識別
通過尾鰭或背鰭識別鯨類個體,用於種群監測
灰鯨首位命中率90.8%,座頭鯨首位命中率70.3%
生態研究
靈長類動物面部識別
用於黑猩猩、獼猴等靈長類動物的個體識別和行為研究
黑猩猩面部首位命中率83.2%,獼猴面部首位命中率94.7%
🚀 MiewID - msv3模型
MiewID - msv3是一個用於野生動物個體重識別的特徵提取模型。它基於對比學習,在包含64種陸地和水生野生動物的高質量大型數據集上進行訓練,數據涵蓋了動物的鰭、尾葉、側面和麵部等部位。該模型可用於將個體與真實樣本數據庫進行匹配以實現重識別,其特徵也可用於物種分類檢索。
🚀 快速開始
本模型旨在通過與真實樣本數據庫進行匹配,對不同物種的個體進行重識別。模型特徵也可用於通過檢索進行物種分類。
✨ 主要特性
- 適用範圍廣:可用於64種陸地和水生野生動物的個體重識別。
- 特徵豐富:訓練數據包含動物的鰭、尾葉、側面和麵部等部位。
- 功能多樣:不僅能進行個體重識別,其特徵還可用於物種分類檢索。
📦 安裝指南
文檔未提及安裝步驟,暫不提供。
💻 使用示例
基礎用法
import numpy as np
from PIL import Image
import torch
import torchvision.transforms as transforms
from transformers import AutoModel
model_tag = f"conservationxlabs/miewid-msv3"
model = AutoModel.from_pretrained(model_tag, trust_remote_code=True)
def generate_random_image(height=440, width=440, channels=3):
random_image = np.random.randint(0, 256, (height, width, channels), dtype=np.uint8)
return Image.fromarray(random_image)
random_image = generate_random_image()
preprocess = transforms.Compose([
transforms.Resize((440, 440)),
transforms.ToTensor(),
transforms.Normalize(mean=[0.485, 0.456, 0.406], std=[0.229, 0.224, 0.225]),
])
input_tensor = preprocess(random_image)
input_batch = input_tensor.unsqueeze(0)
with torch.no_grad():
output = model(input_batch)
print(output)
print(output.shape)
更多示例
查看更多使用示例,請訪問:https://github.com/WildMeOrg/wbia-plugin-miew-id/tree/main/wbia_miew_id/examples
📚 詳細文檔
模型詳情
模型描述
MiewID - msv3是一個使用對比學習在包含64種陸地和水生野生動物的大型高質量數據集上訓練的特徵提取器,數據包含鰭、尾葉、側面和麵部等部位。
- 模型類型:野生動物重識別特徵主幹
- 模型統計信息:
- 參數(M):51.11
- GMACs:24.38
- 激活值(M):91.11
- 圖像大小:440 x 440
模型來源
- 倉庫:https://github.com/WildMeOrg/wbia-plugin-miew-id
- 主幹網絡:https://huggingface.co/timm/efficientnetv2_rw_m.agc_in1k
訓練詳情
訓練數據
用於這些實驗的數據集是Wildbook平臺(多個用戶)的數據、Happywhale Kaggle競賽多物種數據集以及多個公開可用數據集的組合。Wildbook平臺的一小部分數據可在https://lila.science/datasets獲取。
示例圖像
評估結果
類別 | mAP | Rank - 1 | Rank - 5 | Rank - 10 | Rank - 20 | 來源 |
---|---|---|---|---|---|---|
amur_tiger | 88.9 | 97.4 | 99.6 | 99.6 | 100.0 | lila.science (cleaned) |
beluga_whale | 60.6 | 72.0 | 81.5 | 84.8 | 87.9 | lila.science |
blue_whale | 37.8 | 39.5 | 56.3 | 63.0 | 69.7 | Kaggle (HappyWhale) |
bottlenose_dolphin | 83.5 | 92.4 | 95.2 | 96.3 | 97.0 | Flukebook.org |
brydes_whale | 65.9 | 71.4 | 90.5 | 95.2 | 100.0 | Kaggle (HappyWhale) |
capuchin | 32.2 | 49.0 | 63.9 | 74.0 | 84.1 | Susan Perry\UCLA |
cheetah | 53.5 | 70.8 | 81.1 | 85.9 | 89.3 | African Carnivore Wildbook |
chimp | 33.9 | 50.8 | 66.1 | 70.7 | 76.0 | Chimpanzee CTai & CZoo |
chimpanzee | 66.6 | 80.7 | 88.8 | 91.6 | 95.6 | PrimFace |
chimpanzee_chimpface | 71.0 | 83.2 | 89.7 | 92.8 | 95.4 | ChimpFace |
cuviers_beaked_whale | 50.1 | 51.4 | 72.9 | 85.7 | 91.4 | Kaggle (HappyWhale) |
dog | 70.9 | 78.7 | 87.5 | 90.5 | 92.9 | DogFaceNet |
dolphin_humpback + fin_dorsal | 48.6 | 56.5 | 79.2 | 87.7 | 92.9 | Flukebook.org |
dusky_dolphin | 88.8 | 87.3 | 93.0 | 94.9 | 95.6 | Kaggle (HappyWhale) |
eurasianlynx | 57.7 | 69.8 | 79.3 | 84.2 | 88.7 | Whiskerbook.org |
finwhale | 68.1 | 78.3 | 88.9 | 92.7 | 94.6 | Flukebook.org |
giraffe (Reticulated) | 98.7 | 98.8 | 99.1 | 99.1 | 99.1 | GiraffeSpotter.org |
giraffe_whole (Masai) | 67.3 | 81.0 | 86.9 | 88.6 | 90.3 | GiraffeSpotter.org |
golden_monkey | 75.7 | 89.8 | 95.9 | 97.0 | 97.7 | GoldenMonkeyFace |
green_turtle | 74.5 | 89.0 | 92.8 | 94.1 | 96.4 | iot.wildbook.org |
greywhale | 84.0 | 90.8 | 95.0 | 97.1 | 98.4 | Flukebook.org |
grouper_nassau/potato_cod | 80.9 | 84.0 | 96.0 | 97.3 | 100.0 | REEF/Rowan Watt - Pringle/GrouperSpotter.org |
hawksbill_turtle | 70.3 | 85.2 | 90.9 | 93.3 | 95.5 | iot.wildbook.org |
horse_wild_tunisian + face | 78.5 | 98.5 | 99.5 | 100.0 | 100.0 | THoDBRL2015 |
humpbackwhale | 70.5 | 70.3 | 83.3 | 88.2 | 92.1 | Flukebook.org |
hyena | 65.8 | 80.9 | 89.8 | 92.9 | 94.8 | African Carnivore Wildbook |
hyperoodon_ampullatus | 86.8 | 95.0 | 96.8 | 97.4 | 97.7 | Flukebook.org |
jaguar | 64.7 | 78.5 | 89.1 | 91.1 | 93.9 | Whiskerbook.org |
japanese_monkey | 83.9 | 90.8 | 92.3 | 96.9 | 98.5 | PrimFace |
lemur | 77.4 | 91.8 | 96.7 | 97.9 | 98.4 | LemurFace |
leopard | 59.1 | 77.6 | 88.6 | 90.6 | 93.3 | African Carnivore Wildbook |
leopard_shark | 82.9 | 92.1 | 95.5 | 96.0 | 97.1 | Sharkbook.ai |
lion | 77.9 | 93.2 | 96.3 | 97.6 | 97.9 | African Carnivore Wildbook |
loggerhead_turtle | 58.6 | 82.4 | 90.1 | 92.4 | 94.4 | iot.wildbook.org |
lynx_pardinus | 47.1 | 57.4 | 70.2 | 76.4 | 83.3 | lynx.wildbook.org |
macaque_face | 86.8 | 94.7 | 97.4 | 98.5 | 100.0 | MacaqueFaces |
melon_headed_whale | 89.7 | 92.1 | 95.4 | 97.4 | 98.0 | Flukebook.org |
mobula_birostris | 79.9 | 88.9 | 93.3 | 94.5 | 95.5 | MantaMatcher.org |
nyala | 47.4 | 63.9 | 79.7 | 87.8 | 90.9 | wildlife - datasets |
orca | 77.7 | 86.0 | 91.4 | 93.6 | 94.8 | Flukebook.org |
pilotwhale | 90.0 | 92.6 | 96.8 | 97.3 | 97.7 | Flukebook.org |
pygmy_killer_whale | 90.4 | 84.6 | 100.0 | 100.0 | 100.0 | Kaggle (HappyWhale) |
rhesus_monkey | 73.6 | 86.4 | 95.1 | 97.3 | 98.9 | PrimFace |
salamander_fire_adult | 97.5 | 98.1 | 99.4 | 99.4 | 100.0 | Amphibian - Reptile Wildbook |
salamander_fire_juvenile | 73.6 | 67.6 | 84.3 | 86.3 | 88.2 | Amphibian - Reptile Wildbook |
seadragon_leafy | 95.1 | 97.1 | 100.0 | 100.0 | 100.0 | SeadragonSearch |
seadragon_leafy + head | 92.8 | 92.1 | 95.2 | 98.4 | 98.4 | SeadragonSearch |
seadragon_weedy | 83.8 | 89.8 | 97.7 | 98.3 | 98.3 | SeadragonSearch |
seadragon_weedy + head | 91.3 | 97.0 | 98.5 | 98.5 | 99.0 | SeadragonSearch |
seal | 38.9 | 64.6 | 78.8 | 85.6 | 90.5 | seals.wildme.org |
sei_whale | 69.5 | 75.9 | 87.9 | 91.4 | 96.6 | Kaggle (HappyWhale) |
snow_leopard | 55.5 | 75.7 | 86.7 | 90.1 | 93.4 | Whiskerbook.org |
spinner_dolphin | 98.8 | 98.8 | 100.0 | 100.0 | 100.0 | Flukebook.org |
spotteddolphin | 78.5 | 80.6 | 91.3 | 94.2 | 98.1 | Flukebook.org |
whale_sperm + fluke | 94.8 | 97.4 | 98.0 | 98.2 | 98.8 | Flukebook.org |
whaleshark | 44.0 | 65.2 | 76.4 | 79.6 | 84.2 | Sharkbook.ai |
white_shark + fin_dorsal | 87.1 | 90.4 | 96.3 | 97.5 | 98.8 | Sharkbook.ai |
white_sided_dolphin | 84.2 | 84.0 | 88.0 | 92.0 | 100.0 | Flukebook.org |
wilddog | 74.6 | 86.1 | 90.7 | 92.8 | 94.0 | African Carnivore Wildbook |
zebra_grevys | 91.1 | 96.1 | 97.3 | 97.6 | 97.8 | zebra.wildme.org |
🔧 技術細節
文檔未提供詳細技術細節,暫不展示。
📄 許可證
文檔未提及許可證信息,暫不提供。
Vit Face Expression
Apache-2.0
基於視覺變換器(ViT)微調的面部情緒識別模型,支持7種表情分類
人臉相關
Transformers

V
trpakov
9.2M
66
Facial Emotions Image Detection
Apache-2.0
基於Google的ViT-base模型微調的面部情緒識別模型,在測試集上達到91%的準確率。
人臉相關
Transformers

F
dima806
198.83k
81
Man Woman Face Image Detection
Apache-2.0
基於人臉圖像的高精度性別分類模型,準確率約98.7%
人臉相關
Transformers

M
dima806
50.08k
10
Vit Facial Expression Recognition
基於ViT的面部表情識別模型,在FER2013、MMI和AffectNet數據集上微調,支持七種情緒分類
人臉相關
Transformers

V
mo-thecreator
8,730
16
Vit Facial Expression Recognition
基於ViT的面部表情識別模型,在FER2013、MMI和AffectNet數據集上微調,能夠識別七種基本情緒
人臉相關
Transformers

V
motheecreator
4,221
13
Resmasknet
MIT
ResMaskNet是一種結合殘差掩碼機制與U-Net架構的卷積神經網絡,用於面部情緒識別。
人臉相關
R
py-feat
4,122
0
Attractive Faces Celebs Detection
Apache-2.0
基於Vision Transformer的面部吸引力評分模型,可對輸入的面部圖像返回0到1的吸引力評分,準確率約為83%。
人臉相關
Transformers

A
dima806
2,473
8
Vit Deepfake Detection
該模型由Rudolf Enyimba訓練完成,用於檢測深度偽造圖像,測試準確率達98.70%。
人臉相關
Transformers 英語

V
Wvolf
1,990
13
Facial Expression Detection
基於預訓練模型微調的面部表情識別模型,能有效識別八種不同面部表情。
人臉相關
Transformers

F
HardlyHumans
1,266
1
Miewid Msv3
MiewID-msv3是一個通過對比學習訓練的特徵提取器,用於在包含64種陸生和水生野生物種的大規模高質量數據集上進行個體重識別。
人臉相關
Transformers

M
conservationxlabs
974
2
精選推薦AI模型
Llama 3 Typhoon V1.5x 8b Instruct
專為泰語設計的80億參數指令模型,性能媲美GPT-3.5-turbo,優化了應用場景、檢索增強生成、受限生成和推理任務
大型語言模型
Transformers 支持多種語言

L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-Tiny是一個基於SODA數據集訓練的超小型對話模型,專為邊緣設備推理設計,體積僅為Cosmo-3B模型的2%左右。
對話系統
Transformers 英語

C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
基於RoBERTa架構的中文抽取式問答模型,適用於從給定文本中提取答案的任務。
問答系統 中文
R
uer
2,694
98