Merlin

🚀 梅林（Merlin）：用於3D計算機斷層掃描的視覺語言基礎模型

梅林（Merlin）是一款用於計算機斷層掃描的3D視覺語言模型（VLM），它在預訓練過程中同時利用了結構化電子健康記錄（EHR）和非結構化放射學報告。此Hugging Face倉庫提供了模型權重和示例圖像文件。

[💻 GitHub] [📄 論文]

🚀 快速開始

梅林（Merlin）能夠藉助電子健康記錄和放射學報告進行預訓練，為3D計算機斷層掃描相關任務提供有力支持。

📦 安裝指南

常規安裝

要安裝梅林（Merlin），你可以直接運行以下命令：

pip install merlin-vlm

可編輯安裝

若要進行可編輯安裝，請使用以下命令克隆並安裝此倉庫：

git clone https://github.com/StanfordMIMI/Merlin.git
cd merlin
pip install -e .

有關使用說明，請訪問GitHub 倉庫。

📁 項目結構

.
├── README.md
├── i3_resnet_clinical_longformer_best_clip_04-02-2024_23-21-36_epoch_99.pt <梅林（Merlin）權重>
├── image1.nii.gz <示例圖像>

📄 許可證

本項目採用MIT許可證。

📎 引用

如果您發現此倉庫對您的工作有幫助，請引用原文：

@article{blankemeier2024merlin,
  title={Merlin: A vision language foundation model for 3d computed tomography},
  author={Blankemeier, Louis and Cohen, Joseph Paul and Kumar, Ashwin and Van Veen, Dave and Gardezi, Syed Jamal Safdar and Paschali, Magdalini and Chen, Zhihong and Delbrouck, Jean-Benoit and Reis, Eduardo and Truyts, Cesar and others},
  journal={Research Square},
  pages={rs--3},
  year={2024}
}