В Новосибирском госуниверситете открылась «Большая математическая мастерская», которая является частью форума «Технопром».
На мероприятии выступают студенты и школьники, причем не только из России, но и из-за рубежа. Одна из команд, которая принимать участие, намерена разработать ИИ, способный видеть и слышать.
По задумке это будет универсальная система с человеческими способностями восприятия. Этим проектом занимаются ученые Новосибирского госуниверситета, которые хотят улучшить ИИ, а сам проект получил название «Менон».
Они используют метод мультимодального RAG (retrieval augmented generation), который позволяет добавить в модель внешние знания о мире для обучения восприятию зрительной и аудиальной информации.
Применение такого ИИ станет возможным в решении сложных задач в области экономики, автономного вождения, медицинской диагностики, управлении БПЛА и так далее.