Sam2 Hiera Base Plus

🚀 SAM2-Hiera-base-plus

本倉庫包含SAM2模型的基礎變體。SAM2是Meta發佈的最先進的掩碼生成模型。

🚀 快速開始

你可以按照以下步驟使用該模型。首先，安裝打包版本的SAM2。

pip install samv2 huggingface_hub

💻 使用示例

基礎用法

每個模型需要不同的類來進行推理。

from huggingface_hub import hf_hub_download
from sam2.build_sam import build_sam2
from sam2.sam2_image_predictor import SAM2ImagePredictor

hf_hub_download(repo_id = "merve/sam2-hiera-base-plus", filename="sam2_hiera_base_plus.pt", local_dir = "./")
sam2_checkpoint = "../checkpoints/sam2_hiera_base_plus.pt"
model_cfg = "sam2_hiera_b+.yaml"

sam2_model = build_sam2(config, ckpt, device="cuda", apply_postprocessing=False)
predictor = SAM2ImagePredictor(sam2_model)

# it accepts coco format
box = [x1, y1, w, h]
predictor.set_image(image)

masks = predictor.predict(box=box,
multimask_output=False)

高級用法

對於自動掩碼生成：

from huggingface_hub import hf_hub_download
from sam2.build_sam import build_sam2
from sam2.automatic_mask_generator import SAM2AutomaticMaskGenerator

hf_hub_download(repo_id = "merve/sam2-hiera-base-plus", filename="sam2_hiera_base_plus.pt", local_dir = "./")
sam2_checkpoint = "../checkpoints/sam2_hiera_base_plus.pt"
model_cfg = "sam2_hiera_b+.yaml"

sam2 = build_sam2(model_cfg, sam2_checkpoint, device ='cuda', apply_postprocessing=False)

mask_generator = SAM2AutomaticMaskGenerator(sam2)
masks = mask_generator.generate(image)

📚 詳細文檔

SAM2背後的團隊為所有任務製作了示例筆記本。

• 查看圖像預測器示例以獲取完整的提示示例。
• 查看自動掩碼生成示例以生成所有掩碼。
• 查看視頻對象分割示例

📄 許可證

本項目採用Apache 2.0許可證。