Исследователи из Стэнфордского университета создали мультимодальную ИИ-модель Merlin, которая анализирует трёхмерные КТ-снимки брюшной полости и прогнозирует хронические заболевания за пять лет до их появления. Об этом сообщил журнал Nature.
Merlin обучен на более чем 15 тысячах КТ-снимков, 1,8 млн диагностических кодов и 6 млн токенов радиологических отчётов. Модель оценивали на 752 задачах шести типов — от классификации находок до сегментации 20 органов и генерации отчётов. Внешнюю валидацию провели на 44 098 снимках из трёх независимых клиник и двух публичных датасетов. Средняя точность диагнозов Merlin по сотням кодов превысила 81%, а для 102 кодов — 90%. Модель предсказывает развитие шести хронических заболеваний в пятилетнем окне с точностью 75%, обнаруживая в снимках паттерны, невидимые глазу радиологов. При этом нейросеть успешно справляется и со снимками грудной клетки, на которых не обучалась, — на уровне специализированных моделей для этой области.
«Существующие медицинские ИИ-модели работают в основном с двумерными изображениями — рентгеновскими снимками и отдельными срезами. Merlin — визуально-языковая модель (VLM), которая обрабатывает объемные 3D-данные целиком, сопоставляя их с текстами отчетов и электронными медицинскими картами», — говорится в сообщении исследователей.
Технологии, использующие тепло для работы устройств, активно развиваются и находят применение в разных сферах. Интернет-газета «ЖУК» сообщала о разработке учёных из Сеульского национального университета — плоского носимого источника питания, работающего от тепла человеческого тела. Исследователи создали «псевдопоперечный термоэлектрический генератор» на эластичной силиконовой основе с внедрёнными в неё теплопроводящими наночастицами меди.