П.С. Не путайте OmniNA с другой моделью, которая вышла почти в то же время: OmniDNA (https://arxiv.org/abs/2502.03499).
В OmniDNA к ДНК тоже добавляют разные модальности - причем не только текст. Она даже картинки (sic!) по ДНК может генерить. Но в OmniDNA дополнительные модальности добавляют уже после файнтюнинга.
Post #819
1.54K
Вениамин Фишман Читаю статью о ДНК-моделе OmniNA. Идея очень интересная - буквы ДНК пишутся следом за их текстовым обписанием с NCBI (например: this is genome assembly of rhesus monkey иди this is CDS of human EF1a). И на такой смеси ДНК и букв тренируется GPT-модель. Потом…arXiv.org Omni-DNA: A Unified Genomic Foundation Model for Cross-Modal and... Large Language Models (LLMs) demonstrate remarkable generalizability across diverse tasks, yet genomic foundation models (GFMs) still require separate finetuning for each downstream application,...
- 👍 4
- 🤯 3