X

Xclip Large Patch14 16 Frames

由microsoft開發
X-CLIP是對CLIP的擴展,用於通用視頻-語言理解,通過對比學習實現視頻分類和視頻-文本檢索任務。
下載量 678
發布時間 : 9/7/2022

模型概述

X-CLIP模型(大型,14像素塊分辨率)在Kinetics-400上進行了全監督訓練,支持零樣本、少樣本或全監督的視頻分類及視頻-文本檢索任務。

模型特點

視頻-語言對比學習
通過(視頻,文本)對的對比方式進行訓練,支持視頻與文本的匹配任務。
高分辨率處理
訓練時每段視頻使用16幀,分辨率為336x336,確保細節捕捉能力。
通用視頻理解
適用於多種視頻理解任務,包括分類和檢索。

模型能力

視頻分類
視頻-文本檢索
零樣本學習
少樣本學習

使用案例

視頻內容分析
視頻分類
對視頻內容進行分類,例如識別動作、場景等。
Top-1準確率87.7%,Top-5準確率97.4%。
視頻-文本檢索
根據文本描述檢索相關視頻片段。
AIbase
智啟未來,您的人工智能解決方案智庫
© 2025AIbase