D

Donut Base Finetuned Rvlcdip

由naver-clova-ix開發
Donut是一種無需OCR的文檔理解Transformer模型,結合視覺編碼器和文本解碼器處理文檔圖像。
下載量 125.36k
發布時間 : 7/19/2022

模型概述

Donut由Swin Transformer視覺編碼器和BART文本解碼器組成,能夠直接從圖像生成文本,無需傳統OCR步驟。本版本是基於RVL-CDIP數據集微調的文檔分類模型。

模型特點

無OCR文檔理解
直接處理圖像輸入,無需傳統OCR預處理步驟
端到端訓練
視覺編碼器和文本解碼器聯合訓練,實現端到端文檔理解
Swin Transformer架構
採用高效的Swin Transformer作為視覺編碼器,處理高分辨率圖像

模型能力

文檔圖像分類
圖像到文本轉換
視覺文檔理解

使用案例

文檔處理
文檔分類
自動分類掃描文檔的類型(如發票、合同等)
在RVL-CDIP數據集上表現良好
文檔信息提取
從結構化文檔中提取關鍵信息
AIbase
智啟未來,您的人工智能解決方案智庫
© 2025AIbase