Meta* представили TRIBE v2 — новую модель, которая объединяет видео, аудио и текст для предсказания активности человеческого мозга. Разработка предлагает новый подход к изучению работы мозга через симуляцию его реакции на различные стимулы. TRIBE v2 (Tri-modal Brain Encoder)
использует мультимодальную архитектуру, объединяющую данные из трёх источников: видео, аудио и текста. Модель обучалась на массиве данных, включающем более 1000 часов записей фМРТ 720 участников, и способна предсказывать активность мозга в 20 484 вершинах кортикальной поверхности («точки» на поверхности коры головного мозга, которые модель отслеживает для анализа активности) и 8 802 вокселах подкорковых структур («объёмные элементы» внутри более глубоких структур мозга,
таких как таламус, базальные ганглии или гиппокамп). Иными словами, TRIBE v2 предсказывает активность мозга не только на поверхности коры, но и глубоко внутри мозга, охватывая 3D-структуру нейронной активности. Это делает её одной из самых точных моделей для анализа
нейронной активности. Ключевая особенность TRIBE v2 — использование предобученных нейросетей для обработки каждой модальности. Видео анализируется с помощью V-JEPA 2, аудио — через Wav2Vec-Bert, а текст — с использованием Llama 3.2. Эти данные объединяются трансформером с 1 миллиардом параметров, который моделирует временные зависимости и интеграцию модальностей. Такой подход
позволяет модели предсказывать реакцию мозга даже в условиях отсутствия одной из модальностей благодаря механизму "modality dropout". Анимация: Meta* TRIBE v2 воспроизводит результаты классических экспериментов. Например, модель точно идентифицирует специализированные области коры, такие как FFA (распознавание лиц), PPA (восприятие локаций) и VWFA (обработка письменных знаков). Она также успешно воспроизводит карты активации для сложных нейролингвистических задач, таких как
различие между речью и другими звуками или обработка сложных предложений. Кроме того, модель демонстрирует высокую степень генерализации, предсказывая реакцию мозга на новые стимулы без дополнительного обучения. TRIBE v2 объясняет около 54% вариации сигнала, а в отдельных областях достигает 80%, что превосходит возможности традиционных методов, таких как fMRI.
Примечательно, что модель способна предсказывать групповой усреднённый ответ на стимулы точнее, чем записи активности отдельных участников. Это открывает новые перспективы для нейронаучных исследований, позволяя изучать мозг in-silico и тестировать гипотезы без необходимости проведения дорогостоящих экспериментов. Модель также демонстрирует действие законов масштабирования: точность её предсказаний растёт с увеличением объёма данных.
Это делает TRIBE v2 перспективной платформой для дальнейшего развития, особенно с учётом её способности адаптироваться с минимальным количеством данных. Несмотря на свои достижения, TRIBE v2 имеет ограничения. Она не учитывает такие сенсорные входы, как обоняние и осязание,
и рассматривает мозг как «пассивного наблюдателя», а не активного агента. Кроме того, модель ограничена временным разрешением фМРТ, что затрудняет анализ быстрых нейронных процессов. Однако потенциал для масштабирования и интеграции новых данных делает её мощным инструментом для будущих исследований. * Компания
Meta (Facebook и Instagram) признана в России экстремистской и запрещена
Сообщает www.ixbt.com
Новость из рубрики: Технологии и Hi-Tech
Поделиться новостью:
Топ Новости Недели
- Цифровой мост между странами и культурами: как смотреть русское телевидение онлайн в Германии, получать доступ к каналам в прямом эфире и сохранять связь с родным информационным и культурным пространством...
- От древнего символа победы к современному инструменту финансовой стабильности: инвестиционные монеты с Георгием Победоносцем как способ сохранения капитала, защиты от инфляции и участия в мировом рынке драгоценных металлов...
- Полная стратегия современного трудоустройства: почему создание ATS-совместимого резюме, его профессиональная проверка и разработка точного таргетированного резюме становятся главным инструментом получения работы в цифровую эпоху...
- Цифровая вселенная чтения: как электронные библиотеки превращают доступ к книгам в безграничный источник знаний, образования и интеллектуального развития...
- От фабрики до торговых точек: полное руководство по мебели оптом от производителя, включая выбор поставщика, производственные технологии, логистику, ассортимент, партнерские программы, маркетинг, современные тенденции и перспективы мебельного рынка...
- От мастерской до промышленного производства: полный анализ профессионального инструмента для сборки и производства корпусной мебели, его типов, технологий, методов использования, оптимизации процессов, повышения качества и современных тенденций мебельной ...
- От обновлений игр до глобальных чемпионатов: комплексный обзор новостей киберспорта и игровой индустрии, включая турниры, команды, стриминг, медиаплатформы, технологические инновации, аналитические тренды и будущее виртуальных соревнований...
- Как создать надежное и эстетичное укрытие для машины: полный и детальный разбор четырехскатного навеса для автомобиля, особенностей конструкции, этапов строительства, выбора материалов и современных решений для обустройства парковочного пространства...
- Когда производственный экран перестает работать: полный и глубокий разбор ремонта промышленных мониторов, диагностики дисплейных систем, обслуживания операторских панелей и будущего визуальных интерфейсов в промышленной автоматизации...
- Когда высокотехнологичное оборудование останавливается: подробное руководство по ремонту промышленной электроники, диагностике сложных систем управления, обслуживанию производственных линий и будущему индустриальной автоматизации...
- Цифровая бухгалтерия нового поколения: как электронная отчетность через интернет полностью меняет работу компаний и предпринимателей на любой системе налогообложения и превращает сложную бюрократию в удобный онлайн-процесс...
- Искандер Турсунов — эксперт по недвижимости Азербайджана и аналитик городского развития Баку...
- Почему оригинальная косметика OnlyBio Art & Natural становится выбором осознанных потребителей: глубокий разбор натуральных ингредиентов, экологичной философии бренда, эффективности ухода и будущего органической косметики...
- Почему оригинальная техника Apple — это не просто гаджеты: масштабный разбор преимуществ, экосистемы, надежности и влияния на современный цифровой мир...
- Аутсорсинг персонала как стратегический инструмент современного бизнеса: сущность, механизмы организации труда, преимущества для компаний и влияние на современный рынок занятости...
- Учебная практика как ключевой этап профессионального становления студентов: значение, структура, реальные задачи и влияние практического опыта на будущую карьеру и развитие образования...
- Практика как фундамент профессионального становления: почему учебная практика становится ключевым этапом подготовки современных студентов и будущих специалистов...
- Комплексные образовательные траектории и современные подходы к развитию компетенций в области систем менеджмента и стратегического общего управления организациями...
- Революция в офтальмологии и восстановлении зрения: глубокий разбор технологии лазерной коррекции LASIK, принципов работы процедуры, этапов операции, периода восстановления и современных альтернативных методов лечения...
- Комплексная архитектурная разработка частного жилья нового поколения: индивидуальное проектирование домов с уникальной планировкой, инженерными решениями, современными технологиями и гармонией пространства...
06:00, 03 Апр Google представила открытые ИИ-модели Gemma 4 с поддержкой видео, аудио и 140 языков Компания Google представила новое семейство открытых моделей искусственного интеллекта Gemma 4, основанных на технологиях, ранее использованных в её ...
15:00, 01 Апр Суд разрешил новые претензии к Meta* по делу о скачивании пиратских книг для ИИ Суд США разрешил авторам добавить новые обвинения против Meta* в деле о нарушении авторских прав. При этом судья раскритиковал юристов истцов за слаб...
17:22, 28 Мар Про ремонт стиральных машин с разбором причин неисправностей, методов диагностики, самостоятельного устранения поломок, профилактического обслуживания и влияния современных технологий на долговечность бытовой техники Стиральная машина является одним из самых востребованных бытовых приборов в современном доме. Она значительно упрощает повседневную жизнь, экономит в...
17:00, 29 Мар Выборы депутатов Думы Торжокского округа: высокую активность демонстрируют представители старшего поколения В Тверской области проходят выборы депутатов Думы Торжокского муниципального округа первого созыва. Жителям муниципалитета предстоит определить 23 де...
16:56, 28 Мар Глубокий и всесторонний разбор преимуществ наушников Marshall с анализом фирменного звучания, легендарного дизайна, современных технологий, пользовательского опыта и влияния бренда на индустрию персонального аудио Наушники давно перестали быть просто устройством для прослушивания музыки. Сегодня это полноценный элемент образа жизни, отражающий вкусы, стиль и от...
21:00, 30 Мар В «Сенеже» представили проекты развития для 16 муниципалитетов России В Мастерской управления «Сенеж» президентской платформы «Россия – страна возможностей» были представлены проекты развития для 16 муниципалитетов Росс...
03:00, 02 Апр Oppo представили новый дуэт смартфонов Reno4 Мощные новинки поступят в китайские магазины по цене 442 $ и 535 $. 5 июня в компании Oppo представили новый дуэт смартфонов Reno4: Reno4 и Reno4 Pro...
15:00, 24 Мар Российский автономный шаттл представили на курорте «Манжерок» На курорте «Манжерок» в Горном Алтае российская компания Navio представила автономный шаттл. Как рассказали в пресс-службе, транспортное средство пре...
21:00, 26 Мар Ученые связали «возраст мозга» со сном и риском деменции Исследователи из Калифорнийского университета в Сан-Франциско и Медицинского центра Бет Израэль Диконесс установили связь между «возрастом мозга», оп...
03:00, 30 Мар Смартфоны рушат работу мозга и превращают человека в психопата Ученые нашли еще одно доказательство того, что смартфоны вредят здоровью Новое исследование показало, что у людей, которые не могут оторваться от сма...
15:00, 26 Мар Что нужно есть, чтобы замедлить старение мозга на 2,5 года? Ягоды, зелень, орехи и оливковое масло — основа диеты для замедления старения мозга Серое вещество мозга, которое отвечает за память, мышление и прин...
04:00, 27 Мар Петербургские учёные сообщили о системе «охлаждения мозга» у динозавров Компьютерные технологии позволили группе Павла Скучаса сделать это открытие. Исследовательская группа СПбГУ под руководством доцента Павла Скучаса за...
21:00, 03 Апр В Общественной палате представили фильм о работе и подвигах неонатологов Премьера документального фильма «Невидимые герои» о работе врачей-неонатологов прошла в Общественной палате России в рамках конференции, посвященной ...
23:00, 01 Апр Китайцы представили концепт своего Фрилендера. Это совсем другой автомобиль Знаменитое имя Freelander, знакомое поклонникам внедорожников с 1997 года, возвращается в новом обличье. На этот раз оно становится не просто моделью...
23:00, 29 Мар Археологи нашли останки клеток мозга человека V века до нашей эры Метод углеродного датирования определил возраст останков мужчины в деревушке «Хеслингтон». Археологи из Археологического университета Йорка (Великобр...
11:00, 29 Мар В Китае представили обновленный минивэн Denza D9, который заряжается за 5 минут Обновленный минивэн по-прежнему будет предлагаться в версиях подключаемый гибрид (PHEV) и электрическая (BEV), сообщает Carnewschina. Минивэн сохрани...
15:00, 26 Мар Нижегородские учёные создали приложение, определяющее биологический возраст мозга Исследователи из нижегородского Университета Лобачевского (ННГУ) разработали онлайн-платформу «Калькулятор когнитивного биологического возраста», кот...
18:00, 02 Апр В Нью-Йорке представили флагманский кроссовер Subaru Getaway с динамикой спорткара Это трехрядный семиместный автомобиль на одной платформе с Toyota Highlander EV, сообщает The Drive. Продажи стартуют в конце 2026 года. Дизайн Getaw...
21:00, 19 Мар «Норникель» и МИСИС представили инновационные прозрачные солнечные панели для архитектурных конструкций Компания «Норникель» совместно с Национальным исследовательским технологическим университетом МИСИС разработала инновационные прозрачные солнечные па...
13:00, 22 Мар Пентагон рассекретил детали работы «мозга армии»: как ИИ Maven меняет войну Министерство обороны США впервые публично продемонстрировало возможности своей передовой системы искусственного интеллекта — Maven Smart System (MSS)...
22:00, 03 Апр Учёные разработали метод точечного управления связями между областями мозга приматов Исследователи из Института невронаук Дель Монте при Университете Рочестера представили метод, позволяющий управлять коммуникацией между конкретными о...
05:00, 21 Мар Вице-премьеру РФ Дмитрию Патрушеву представили ход работ по ликвидации промышленных отходов на Байкале С момента начала работы БЦБК в 1960-х годах на его полигонах накопилось более 6 миллионов кубических метров отходов производства. Эти опасные веществ...
14:00, 25 Мар Автор телеграм-канала "Мамкина модница" Инна Комбарова рассказала про лечение рака мозга Автор телеграм-канала "Мамкина модница" Инна Комбарова рассказала, что у неё случился рецидив онкологического заболевания после года ремиссии.Комбаро...
23:00, 02 Апр Тизеры и видео Vivo X50 и X50 Pro опубликованы в Сети Камера 60-кратного увеличения может покорить пользователей Huawei Mate 30 Pro. В Сети опубликованы тизеры и видео видео Vivo X50 и X50 Pro. На снимка...
16:00, 25 Мар OpenAI закрывает приложение для генерации видео Sora Компания OpenAI приняла решение закрыть приложение для создания видео на основе искусственного интеллекта Sora. «Мы прощаемся с Sora. Всем, кто созда...
14:00, 31 Мар "Это не она". В сети завирусилось видео с "неузнаваемой" Анджелиной Джоли В сети обсуждают недавнее появление Анджелины Джоли на красной дорожке. 50-летняя актриса стала гостьей вечеринки бренда Tom Ford в Шанхае, и у покло...
06:00, 03 Апр Истребитель Су-35С провел ночное боевое дежурство. Лучшее видео из зоны СВО Экипаж сверхманевренного истребителя Су-35С Воздушно-космических сил России провел ночное боевое дежурство в зоне специальной военной операции. Самые...
12:00, 20 Мар Бывший муж основательницы Wildberries Владислав Бакальчук стал гендиректором «М.Видео» Владислав Бакальчук возглавил «М.Видео». Совет директоров компании принял решение о его назначении на должность генерального директора, сообщили в ри...
11:00, 29 Мар В гамме Lamborghini появится четвёртая модель Генеральный директор Lamborghini Стефан Винкельманн заявил: в модельном ряду итальянского бренда сегодня не хватает двухдверного «гран туризмо» — куз...
17:00, 21 Мар В серию iPhone 18 может вернуться модель Plus Apple готовит к выпуску серию iPhone 18, в которую может войти неожиданное возвращение давно заброшенной модели — iPhone 18 Plus. По данным аналитика...
20:00, 26 Мар Модель управления результатом Марии Дроновой Ведущий экономист крупной российской металлоторговой компании рассказала, как мотивировать команду на рост прибыли и превратить затраты в инвестиции....
20:00, 01 Апр До 14 дней работы: в М.Видео стартовали продажи HUAWEI Band 11 и WATCH Ultimate 2 М.Видео объявила о старте продаж фитнес-браслетов HUAWEI Band 11 и умных часов HUAWEI WATCH Ultimate 2. Разберем чуть подробнее, чем каждый вариант и...
03:00, 29 Мар Tesla разрабатывает новую модель: что об этом известно Илон Маск сообщил, что Tesla ведет разработку нового автомобиля, и что он «круче, чем минивэн». Конкретных подробностей о модели глава компании не пр...
16:00, 25 Мар Disney отказался инвестировать $1 млрд. в OpenAI в связи с закрытием генератора видео Sora В декабре 2025 года The Walt Disney Company и OpenAI объявили о заключении трехлетнего лицензионного соглашения, в рамках которого ИИ-генератор видео...
23:01, 31 Мар Школьники Тверской области смогут побороться за победу в акции, сняв видео и анимацию С 6 апреля стартует Всероссийская творческая акция для школьников «Космос в кадре». Она приурочена к празднованию в Российской Федерации в 2026 году ...
04:00, 27 Мар Японские химики сняли видео движения молекул со скоростью 1600 кадров в секунду Проблемой электронного машиностроения было наличие шума от датчиков изображения с высокой чувствительностью. Японские химики из Токийского университе...
12:00, 22 Мар Модель заколола богатого мужа и приготовила обед из его ребер 23-летнюю фотомодель египетского происхождения Омайму Нельсон осудили за убийство, расчленение и каннибализм её 56-летнего мужа Билла Нельсона, пишет...
03:00, 29 Мар Volga может выпустить собственную модель: что об этом известно Олег Мосеев, ранее возглавлявший Ассоциацию российских автомобильных дилеров (РОАД), поделился подробностями развития марки Volga. По его информации,...
01:00, 27 Мар Учёные из стволовых клеток собрали модель эмбриона человека Журнал Nature описал новое исследование ранней стадии развития плода. Коллектив биологов решился на новый эксперимент, который должен раскрыть белые ...
03:00, 26 Мар В России создали модель для точного прогноза доставки лекарственного аэрозоля В Минобрнауки РФ сообщили, что ученые Томского политехнического университета совместно с коллегами разработали пространственную модель, которая прогн...
15:00, 25 Мар Изменение скорости потоковой передачи видео может помочь избавиться от пауз и раздражающего круга буферизации Согласно новому исследованию Ланкастерского университета, зрители предпочитают смотреть видео на немного более низкой скорости, чем терпеть повторную...
19:00, 27 Мар В сети появилось видео со звездой сериала "Постучись в мою дверь" Ханде Эрчел, арестованной по делу о наркотиках В сети появились видео со звездой сериала "Постучись в мою дверь" Ханде Эрчел. Сегодня 32-летнюю актрису задержали по делу о наркотиках: полиция арес...
13:00, 31 Мар «Кровоизлияние в мозг»: модель из России Екатерина Блинова впала в кому в Таиланде Модель из России Екатерина Блинова впала в кому после аварии в Таиланде. Девушке 29 лет. По предварительным данным, у нее диагностировано кровоизлиян...
20:00, 19 Мар Женская дублёнка: как выбрать идеальную модель, сохранить тепло и подчеркнуть стиль Женская дублёнка — это не просто элемент зимнего гардероба, а продуманное сочетание функциональности, эстетики и долговечности. На протяжении десятил...
12:00, 22 Мар Тритон объяснил наклон оси Нептуна: новая модель приливной эволюции спутника Группа астрономов из нескольких институтов США и Европы предложила новую теорию, объясняющую происхождение большого наклона оси вращения Нептуна. Сог...
19:00, 03 Апр Volga показала свою вторую модель — статусный седан C50 с адаптивным круиз-контролем Летом 2026 года российские дилеры начнут продажи второй модели перезапущенного бренда Volga. За лаконичным дизайном и просторным салоном седана C50 с...
08:00, 28 Мар Бритни Спирс вернулась в соцсети после ареста за вождение в нетрезвом виде и показала новое видео с 19-летним сыном Бритни Спирс восстановила свой аккаунт в инстаграме*, который она ранее удаляла после ареста из-за вождения в нетрезвом виде. 44-летняя певица вышла ...
14:00, 01 Апр Российскую модель Киру Дихтяр назвали одной из "вербовщиц" миллиардера-педофила Джеффри Эпштейна Российскую модель Киру Дихтяр, которая снималась для Vogue Italia и Harper's Bazaar и принимала участие в шоу The Face Наоми Кэмпбелл, назвали одним ...
14:00, 25 Мар Модель Лиза Адаменко выходит замуж после скандального развода с топ-менеджером "Лукойла", который "совратил" её в 13 лет и "топил" в бассейне Лиза Адаменко, у которой в прошлом был скандальный брак с топ-менеджером "Лукойла" Валентином Ивановым, вновь выходит замуж. Об этом 27-летняя модель...
12:00, 25 Мар Модель Лиза Адаменко выходит замуж после скандального развода с топ-менеджером "Лукойла", который совратил её в 13 лет и топил в бассейне Лиза Адаменко, у которой в прошлом был скандальный брак с топ-менеджером "Лукойла" Валентином Ивановым, вновь выходит замуж. Об этом 27-летняя модель...
19:00, 20 Мар Завод «Москвич» закрыл проект кроссовера «Москвич 5». Модель не оправдала ожиданий Московский автозавод официально прекратил работу над кроссовером «Москвич 5». После тестирования компания решила, что потребительские свойства автомо...
05:00, 04 Апр «Торонто» выложил видео о фанатах в стиле документального фильма о животных: «Прежде чем занять место, болельщик должен собрать припасы. Каждый выражает преданность с помощью цвета» «Торонто» выложил видео на тему преданности болельщиков «Лифс». Ролик выполнен в стиле документального фильма о животных. «В самом сердце Торонто сто...
22:25, 23 Мар Всеобъемлющее руководство по выбору полуприцепа и трала у официального дилера: как правильно подобрать модель, оценить технические характеристики, оформить сделку, получить гарантию и интегрировать транспорт в бизнес Приобретение полуприцепа или трала является важным шагом для любого транспортного бизнеса. От правильного выбора зависит эффективность перевозок, без...