Molecule Description Generation on Mol-Instructions 1.0 (test)
0.549BLEU-2BioT5+
Evaluation Results
| Method | Links | ||||||
|---|---|---|---|---|---|---|---|
| BioT5+2024.02 | 0.549 | 0.497 | 0.758 | 0.701 | 0.747 | 0.715 | |
| Mol-InstructionsParameters=7B2024.02 | 0.217 | 0.143 | 0.337 | 0.196 | 0.291 | 0.254 | |
| AlpacaParameters=7B2024.02 | 0.088 | 0.014 | 0.178 | 0.041 | 0.136 | 0.107 | |
| BaizeParameters=7B2024.02 | 0.064 | 0.015 | 0.189 | 0.053 | 0.148 | 0.106 | |
| Text+Chem T5Parameters=223M2024.02 | 0.062 | 0.036 | 0.126 | 0.075 | 0.119 | 0.139 | |
| LlamaParameters=7B2024.02 | 0.059 | 0.014 | 0.164 | 0.066 | 0.148 | 0.184 | |
| ChatGLMParameters=6B2024.02 | 0.055 | 0.011 | 0.163 | 0.036 | 0.121 | 0.105 | |
| VicunaParameters=7B2024.02 | 0.052 | 0.011 | 0.151 | 0.055 | 0.13 | 0.168 | |
| GalacticaParameters=6.7B2024.02 | 0.024 | 0.008 | 0.074 | 0.015 | 0.063 | 0.065 | |
| MolT5Parameters=248M2024.02 | 0.002 | 0.001 | 0.036 | 0.001 | 0.034 | 0.033 |