Multitask Text And Chemistry T5 Base Standard

🚀 マルチタスクテキストと化学T5

マルチタスクテキストと化学T5は、化学および自然言語の両領域における幅広いタスクを解決するためのマルチドメイン、マルチタスク言語モデルです。Christofidellis et al.によって公開されました。

📚 ドキュメント

モデルの詳細

マルチタスクテキストと化学T5のバリアントは、事前学習ベースとしてt5-baseと標準データセットを使用してトレーニングされています。

開発者

IBM ResearchのDimitrios Christofidellis*、Giorgio Giannone*、Jannis Born、Teodoro Laino、Matteo Manica、およびデンマーク工科大学のOle Wintherです。

配布元

このモデルは、GT4SDにネイティブで統合されています。

モデルの日付

2023年

モデルの種類

Forward reaction prediction、Retrosynthesis、Molecular captioning、Text-conditional de novo generation、Paragraph to actionsのタスクに利用可能なデータセットを集約して、マルチドメインおよびマルチタスクデータセットでトレーニングされたTransformerベースの言語モデルです。

詳細情報の論文またはその他のリソース

マルチタスクテキストと化学T5 Christofidellis et al.(2023)

モデルに関する質問やコメントの送信先

GT4SDリポジトリでIssueを開いてください。

📄 ライセンス

MIT

引用

@inproceedings{christofidellis2023unifying,
  title = 	 {Unifying Molecular and Textual Representations via Multi-task Language Modelling},
  author =       {Christofidellis, Dimitrios and Giannone, Giorgio and Born, Jannis and Winther, Ole and Laino, Teodoro and Manica, Matteo},
  booktitle = 	 {Proceedings of the 40th International Conference on Machine Learning},
  pages = 	 {6140--6157},
  year = 	 {2023},
  volume = 	 {202},
  series = 	 {Proceedings of Machine Learning Research},
  publisher =    {PMLR},
  pdf = 	 {https://proceedings.mlr.press/v202/christofidellis23a/christofidellis23a.pdf},
  url = 	 {https://proceedings.mlr.press/v202/christofidellis23a.html},
}

*同等の貢献