Российские ученые создали бенчмарк для проверки ИИ при разработке лекарств

Ученые Центра практического ИИ Сбербанка и Института AIRI представили SAASBench — открытый бенчмарк для оценки ИИ-моделей, применяемых при разработке лекарств на основе антител. Это набор тестов, позволяющий сравнивать разные модели по единым правилам. Об этом сообщает издание Lenta.ru.

Антитела — белки иммунной системы, распознающие определенные молекулы. На их основе создают препараты для лечения онкологических, аутоиммунных и инфекционных заболеваний. ИИ-модели помогают выбрать перспективные варианты антител еще до лабораторных экспериментов.

SAASBench проверяет специфичность — способность антитела связываться именно с нужным антигеном, а не с похожими белками человека. В тест вошли 20 клинически одобренных антител, для каждого модель получает шесть возможных мишеней: один правильный антиген и пять похожих белков. Всего исследователи сформировали 120 смоделированных комплексов «антитело — антиген».

Тестирование пяти распространенных вычислительных подходов показало: хорошие результаты в оценке аффинности не гарантируют точности при выборе нужной мишени. «Если модель ошибается заранее, вся команда рискует впустую потратить ресурсы», — отметил директор по ИИ-трансформации Сбербанка Сергей Рябов.

Научная работа опубликована в сборнике конференции ACM SIGKDD ’26 в Республике Корея. Бенчмарк и данные исследования доступны в открытом доступе.