Mangaocr Hoogberta V2

🚀 Trocr画像テキスト変換モデル

Trocrを使用した画像からテキストへの変換モデルです。サンプル画像を使って簡単にテストできます。

🚀 クイックスタート

このモデルは、画像からテキストを抽出するために使用できます。以下に、サンプル画像のリンクを示します。

• test 1
• test 2
• test 3
• test 4
• test 5
• test 6

💻 使用例

基本的な使用法

from transformers import TrOCRProcessor, VisionEncoderDecoderModel
from PIL import Image

processor = TrOCRProcessor.from_pretrained('dsupa/mangaocr-hoogberta-v2')
model = VisionEncoderDecoderModel.from_pretrained('dsupa/mangaocr-hoogberta-v2')

def predict(image_path):
    image = Image.open(image_path).convert("RGB")
    pixel_values = processor(images=image, return_tensors="pt").pixel_values
    generated_ids = model.generate(pixel_values)
    generated_text = processor.batch_decode(generated_ids, skip_special_tokens=True)[0]

    return generated_text

image_path = "your_img.jpg"
pred = predit(image_path)
print(pred)