🎊 Наш LLM-бенчмарк по растворимости SoluBench сегодня доехал до 📕 JCIM: https://pubs.acs.org/doi/10.1021/acs.jcim.6c00677
Это первый раз в нашей практике, когда за время рецензии в журнале результаты успели устареть минимум дважды — так как на момент сабмита у нас самая свежая модель была Opus 4.6, а сейчас уже во всю работают 4.8 и Fable :))
А еще у нас с JCIM'ом закончилась целая сага с серией desk rejection по причине "не соотвествует тематике журнала🤔".
В общем снова тихо радумаемся, а еще до конца июля постараемся выкатить новый большой датасет!🖥
Полный текст статьи доступен в комментариях:
Post #243
549
Chem ML/AI/Datasets И сегодня еще у нас на ChemRxiv вышел бенчмарк по растворимости для LLM, который мы пилили последние 2 месяца: Can LLMs Reason About Solubility? The SoluBench Benchmark for Pure and Mixed Solvent Systems: https://doi.org/10.26434/chemrxiv.15000632/v1 В…ACS Publications Can LLMs Solve Solubility Tasks? The SoluBench Benchmark for Pure and Mixed Solvent Systems Abstract. Solubility prediction is a fundamental task in chemistry and drug discovery, yet the capability of large language models (LLMs) to solve solubili
- ❤ 20
- 🔥 11
- 👍 8