Sam2 Hiera Small

🚀 SAM2-Hiera-small

このリポジトリには、SAM2モデルの小型バリアントが含まれています。SAM2は、Metaによってリリースされた最先端のマスク生成モデルです。

🚀 クイックスタート

SAM2-Hiera-smallを使用するには、まず必要なパッケージをインストールする必要があります。その後、コードを実行してモデルを使用できます。

📦 インストール

まず、SAM2のパッケージ版をインストールします。

pip install samv2 huggingface_hub

💻 使用例

基本的な使用法

各モデルは推論に異なるクラスを必要とします。以下はプロンプトを使用する場合のコード例です。

from huggingface_hub import hf_hub_download
from sam2.build_sam import build_sam2
from sam2.sam2_image_predictor import SAM2ImagePredictor

hf_hub_download(repo_id = "merve/sam2-hiera-small", filename="sam2_hiera_small.pt", local_dir = "./")

ckpt = f"./sam2_hiera_small.pt"
config = "sam2_hiera_s.yaml"

sam2_model = build_sam2(config, ckpt, device="cuda", apply_postprocessing=False)
predictor = SAM2ImagePredictor(sam2_model)

# it accepts coco format
box = [x1, y1, w, h]
predictor.set_image(image)

masks = predictor.predict(box=box,
multimask_output=False)

高度な使用法

自動マスク生成の場合のコード例です。

from huggingface_hub import hf_hub_download
from sam2.build_sam import build_sam2
from sam2.automatic_mask_generator import SAM2AutomaticMaskGenerator

hf_hub_download(repo_id = "merve/sam2-hiera-small", filename="sam2_hiera_small.pt", local_dir = "./")
ckpt = f"./sam2_hiera_small.pt"
config = "sam2_hiera_s.yaml"

sam2 = build_sam2(model_cfg, sam2_checkpoint, device ='cuda', apply_postprocessing=False)

mask_generator = SAM2AutomaticMaskGenerator(sam2)
masks = mask_generator.generate(image)

📚 ドキュメント

SAM2の開発チームは、すべてのタスクについてサンプルノートブックを作成しています。

• プロンプトの完全なサンプルについては、画像予測器のサンプルを参照してください。
• すべてのマスクを生成するためのサンプルについては、自動マスク生成のサンプルを参照してください。
• ビデオオブジェクトセグメンテーションのサンプルについては、ビデオオブジェクトセグメンテーションのサンプルを参照してください。

📄 ライセンス

このプロジェクトは、Apache-2.0ライセンスの下で提供されています。