Компания утверждает, что Tribe v2 создавали не для рекламы или интерфейсов, а как инструмент для нейробиологов — чтобы те могли проверять гипотезы без новых экспериментов на людях.
Meta* представила модель Tribe v2, которая умеет предсказывать, как человеческий мозг отреагирует на визуальный и звуковой контент. В компании говорят, что разработали её как исследовательский инструмент для работы в нейробиологии.
По словам Meta*, модель способна прогнозировать мозговую активность почти в ответ на любой зрительный или аудиостимул. Для обучения нейросети использовали записи МРТ головного мозга четырёх человек, а также данные о мозговой активности более чем 700 добровольцев.
Во время экспериментов участникам показывали изображения, видео и текст, а также давали слушать подкасты и другой аудиоконтент. На основе этих данных Tribe v2 научилась достаточно точно предсказывать, какие участки мозга будут активироваться при восприятии того или иного материала.
В Meta* утверждают, что модель умеет делать такие прогнозы без дополнительного дообучения — в том числе для языков, которых не было в исходном датасете.
Компания рассчитывает, что Tribe v2 пригодится нейробиологам для предварительной проверки гипотез без необходимости каждый раз проводить эксперименты с участием людей. Модель уже выложили в открытый доступ на Hugging Face и GitHub.
*Meta, которой принадлежит Instagram, признана в России экстремистской организацией и запрещена.
