Ast Finetuned Audioset 10 10 0.4593
音頻頻譜圖變換器(AST)是基於AudioSet微調的模型,將音頻轉換為頻譜圖後應用視覺變換器進行音頻分類。
下載量 308.88k
發布時間 : 11/14/2022
模型概述
該模型將音頻信號轉換為頻譜圖圖像,然後應用視覺變換器(ViT)架構進行音頻分類任務,在多個音頻分類基準測試中取得了優異表現。
模型特點
頻譜圖轉換
將音頻信號轉換為視覺頻譜圖表示,使視覺變換器能夠處理音頻數據
高性能音頻分類
在多個音頻分類基準測試中取得了最先進的結果
基於ViT架構
採用視覺變換器架構處理音頻頻譜圖,展示了跨模態應用的潛力
模型能力
音頻分類
音頻特徵提取
頻譜圖分析
使用案例
音頻內容分析
環境聲音分類
識別和分類各種環境聲音,如動物叫聲、交通工具聲等
在AudioSet等基準測試中表現優異
音樂分類
對音樂片段進行流派或樂器分類
多媒體內容理解
視頻音頻分析
結合視頻內容進行多模態分析
精選推薦AI模型
Llama 3 Typhoon V1.5x 8b Instruct
專為泰語設計的80億參數指令模型,性能媲美GPT-3.5-turbo,優化了應用場景、檢索增強生成、受限生成和推理任務
大型語言模型
Transformers 支持多種語言

L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-Tiny是一個基於SODA數據集訓練的超小型對話模型,專為邊緣設備推理設計,體積僅為Cosmo-3B模型的2%左右。
對話系統
Transformers 英語

C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
基於RoBERTa架構的中文抽取式問答模型,適用於從給定文本中提取答案的任務。
問答系統 中文
R
uer
2,694
98