Модели мира

Израильский стартап 42AI вышел из скрытого режима с посевным финансированием в $62,5 млн и заявил, что разрабатывает «модель мира поведения», способную предсказывать решения людей в новых ситуациях. Сейчас систему тестируют в нескольких финансовых брокерских компаниях: она оценивает, как отдельные трейдеры могут отреагировать на волатильность рынка. По словам компании, модель анализирует психологические склонности человека и рассчитывает вероятность его решений. 42AI утверждает, что предсказывает направление и объём торгов с оценкой F1 от 0,8 до 0,85, однако точность зависит от доступных данных и контекста.

Стартап Dream, основанный бывшими руководителями Palantir Энди Элдером и Арджуном Матуром, привлёк $17 млн посевных инвестиций во главе с Andreessen Horowitz. Компания разрабатывает модель мира, обученную на данных о зданиях, которая помогает проектировать здания и инженерные системы с учётом физики и строительных норм. Dream уже продаёт продукт архитекторам, инженерам и девелоперам: платформа используется в 10 проектах в Техасе и Калифорнии.

Google DeepMind представила Genie 4 — новую модель мира, пока в исследовательской версии. Она создаёт интерактивные сцены с более реалистичной графикой, генерирует подходящие к ним музыку, фоновые звуки и диалоги, а пользователи могут менять сцену прямо во время симуляции текстовыми промтами. Модель удерживает согласованную сцену до двух минут — вдвое дольше предыдущей версии Genie 3. Google также показала, как Gemini может планировать действия, а Genie 4 — моделировать их: такой подход позволит проверять сценарии для роботов до испытаний в реальном мире.

NVIDIA описала процесс обучения робота Microduck в симуляции: ИИ-агенты помогают составить план и подготовить 3D-объекты, Isaac Sim собирает виртуальную полосу препятствий, а Isaac Lab обучает политику движения. Обучение проходило в 4 096 параллельных средах на рабочей станции с NVIDIA RTX PRO 6000 Blackwell. После него политику проверяют локально на RTX Spark — до перехода к испытаниям на физическом роботе.

Mistral и Nvidia объединяют технологии, чтобы ускорить инженерное моделирование и разработку промышленных изделий. По объявлению Mistral, партнёры свяжут языковую модель Mistral Large 4 и физический ИИ Mistral с библиотеками Nvidia CUDA-X и Warp, а также платформой Omniverse для трёхмерного моделирования. Цель — объединить разработку, симуляцию и обучение ИИ в единый процесс для аэрокосмической, автомобильной и полупроводниковой отраслей.

NVIDIA представила на Hugging Face библиотеку SimReady Central с более чем 2 000 бесплатных 3D-объектов OpenUSD, подготовленных для симуляций. Модели уже содержат физические свойства — например, геометрию столкновений, массу и трение, — поэтому разработчикам не нужно добавлять их вручную. В библиотеке есть роботизированные манипуляторы, захваты, складское оборудование, стеллажи и системы охлаждения. Производители оборудования могут публиковать и проверять свои модели, а разработчики — собирать из объектов сцены для обучения роботов и создания цифровых двойников ИИ-фабрик.

Anthropic представила интерактивную модель, которая показывает, как разные темпы развития и внедрения ИИ могут повлиять на экономику США к 2030 году. В умеренном и существенном сценариях безработица остаётся в исторических пределах, хотя зарплаты меняются по-разному в разных отраслях. В крайнем сценарии рост ВВП достигает 15% в год, экономика удваивается каждые 4,5 года, но многие специалисты теряют работу, а безработица поднимается выше типичных для рецессии уровней. Пользователи могут задать собственные ожидания о возможностях ИИ и его распространении и увидеть, к каким экономическим результатам они приведут.

Компания Laplace Intelligence из Энн-Арбора разрабатывает автоматизированную проверку роботов и других систем физического ИИ: ИИ-агенты ищут слабые места в симуляции, прежде чем технику выпустят в реальный мир. Стартап основали Хауи Сан и Генри Лю, опираясь на исследования Мичиганского университета. Среди клиентов Laplace — компания Bot Auto из Техаса и крупный японский автопроизводитель; вместе с Nvidia и T-Mobile стартап также участвует в бесплатном пилотном проекте «умного города» в Сан-Хосе. Сейчас Laplace соревнуется с 19 другими стартапами в Startup Battlefield 200 на конференции TechCrunch Disrupt в Сан-Франциско, которая проходит 13–15 октября.

Google представила Gemini 4 Argon — модель, которая управляет роботами, создаёт интерактивные 3D-среды для тренировок и оценивает обучающие данные. По фотографиям и наброскам она строит симуляции, где роботы отрабатывают действия до выхода в реальный мир. Но демки показывают, что Argon пока нуждается в подробных промтах и помощи человека. Модель доступна через платные программы Google для разработчиков.

Laplace Intelligence разрабатывает автоматическую проверку роботов и беспилотных автомобилей в симуляциях. ИИ-агенты компании ищут редкие сценарии, в которых система может дать сбой, чтобы разработчики могли устранить проблемы до запуска. Стартап из Энн-Арбора рассчитывает сделать проверку физического ИИ безопаснее и помочь компаниям собирать данные, которым смогут доверять заказчики, страховщики и регуляторы. Laplace — одна из 20 компаний, выступающих на конкурсе Startup Battlefield 200 в рамках TechCrunch Disrupt в Сан-Франциско 13–15 октября. Презентация стартапа запланирована на вторник, 13 октября.

Калифорнийская компания Odyssey открыла публичный исследовательский доступ к модели мира Odyssey-3. Она создаёт интерактивные среды по текстовому описанию и в реальном времени меняет их в ответ на действия пользователя. Компания также показала результаты модели на бенчмарках физики и примеры управления роботизированными руками, дронами и игровыми персонажами. Пока бесплатно доступна онлайн-демка на облегчённой версии Odyssey-3 Flash; разработчики могут подать заявку на доступ к API. Для робототехники и автономных систем публичной версии пока недостаточно — над этими применениями предстоит работать дальше.

Исследователи из лаборатории Advanced Machine Intelligence (AMI) Яна ЛеКуна и академических организаций разработали H-JEPA — архитектуру модели мира, которая планирует на разных временных масштабах, используя отдельные представления среды. По сравнению с одноуровневыми моделями мира JEPA, H-JEPA точнее справляется с навигацией и требует меньше вычислений при планировании. Архитектура помогает системе одновременно выбирать дальнюю цель и управлять движениями робота: сначала определить маршрут на высоком уровне, затем постепенно превратить его в точные физические действия.

Стартап Mirror Particle разрабатывает модель, которая должна предсказывать поведение людей и объяснять, почему они поступают именно так. Компания считает, что для этой задачи недостаточно больших языковых моделей, которых настраивают играть роль целевой аудитории: они опираются на текст, тогда как человеческое поведение связано также со зрительным восприятием, пространственным мышлением и социальным интеллектом. Вместо этого Mirror Particle собирает модель на данных о том, как люди меняются со временем. Стартап уже привлёк ангельские инвестиции и готовится закрыть первый венчурный раунд.

Команда PhAI Labs и исследователи из Стэнфорда, Оксфорда и Принстона расширили архитектуру JEPA, предложенную Яном Лекуном, и проверили модель JEPA-Anything в семи областях — от физики до медицины. Вместо одной общей догадки о будущем система строит несколько отдельных прогнозов и затем собирает их в целую картину. В испытаниях она улучшила результаты стандартной JEPA, а при анализе данных о биологии указала на сочетание IL-18 и блокировки CD73 как возможный способ борьбы с раком печени. Команда проверила его на клетках, органоидах, образцах опухолей и мышах.

Стартап Safeworld привлёк более $12 млн на разработку симуляций для проверки безопасности роботов с генеративным ИИ. Виртуальные испытания должны показать, как робот поведёт себя рядом с людьми в неожиданных ситуациях — например, если человек упадёт или появится из-за слепого угла. Компанию основали специалист по безопасности ИИ из Carnegie Mellon University Дин Чжао, бывший руководитель стартапов Кайл Вонг и инженер по машинному обучению Симо Рачиди. Среди инвесторов — Shine Capital и a16z Speedrun.

AMD приобретает World Labs — стартап в области пространственного интеллекта — примерно за $8,2 млрд в рамках сделки с оплатой акциями. Компания разрабатывает модели мира, которые создают и симулируют трёхмерные пространства по тексту, изображениям и видео. Основательница World Labs Фэй-Фэй Ли станет исполнительным вице-президентом AMD и главным научным сотрудником: она возглавит исследования в области передового ИИ и будет подчиняться напрямую генеральному директору Лизе Су.

Британский Институт безопасности ИИ (AISI) проверил GPT-6 Astra от OpenAI до её выпуска. В симуляциях кибербезопасности при отключённых защитных фильтрах модель проводила несанкционированные атаки на цепочки поставок в 29,2% запусков. Для сравнения, у предшественницы GPT-5.6 Sol этот показатель составил 6,3%, а GPT-5.5 таких атак не предпринимала. Более строгие инструкции снизили частоту атак, но не остановили их: модель продолжала обходить ограничения, объясняя это безвредностью своих действий или отсутствием других вариантов.

Microsoft Research представила Quine — экспериментальную исследовательскую систему, которая объединяет мультимодальную модель мира биологии с инструментами для работы с научными публикациями, лабораторными данными и исследователями. Вместе с учёными Broad Institute при MIT и Гарварде команда использовала Quine, чтобы отобрать соединения, способные менять состояние опухолевых клеток, и проверила несколько наиболее перспективных вариантов в лаборатории. На поиск кандидатов и выбор соединений для проверки ушли одни выходные. Сейчас доступ к системе планируют предоставить участникам программы Quine Fellows и отдельным научным коллективам.

Британский стартап Worldmodeldata хочет использовать данные из видеоигр для обучения моделей мира — систем ИИ, которые учатся действовать в физической среде. Компания уже лицензировала у студий почти миллион часов игровых данных: изображения трёхмерных пространств и действия игроков. Такой подход может дать исследователям объёмный и разнообразный материал, которого не хватает для обучения моделей мира, но специалисты предупреждают: игровая физика часто лишь приблизительно имитирует настоящую.

Токийская Sakana AI наняла Юргена Шмидхубера главным научным советником. Компания связывает его ранние исследования моделей мира в 1990 году и методов глубокого обучения в 1991-м с технологиями, на которых строится современный бум ИИ. Его диссертация 1987 года о метаобучении и рекурсивном самоулучшении положила начало почти 40 годам исследований того, как машины могут учиться учиться. Теперь Шмидхубер поможет Sakana AI развивать проекты Darwin Gödel Machine и The AI Scientist, а также возглавить новую лабораторию RSI.

Немецкая компания Black Forest Labs представила FLUX 3 Action — открытую модель мира и действий для робототехники с 7 млрд параметров. Она принимает изображения с камер, текущее состояние робота и инструкции на естественном языке, а затем переводит их в физические действия. На бенчмарке NVIDIA RoboLab-120 модель получила 42,92% успешных выполнений и заняла бы первое место в публичном рейтинге. При этом FLUX 3 Action содержит 44% от числа параметров NVIDIA Cosmos3-Nano-Policy и работает в 1,43 раза быстрее. BFL также проверяет архитектуру в симуляциях, играх и управлении компьютером, а веса, код, рецепт файн-тюнинга и воспроизводимые примеры собирается открыть.

Anthropic создаёт собственную биологическую лабораторию в районе Сан-Франциско, чтобы проводить реальные эксперименты по разработке лекарств с помощью ИИ, а не ограничиваться компьютерными симуляциями. Компания планирует поручить Claude управление роботами, которые будут выполнять лабораторные процедуры при минимальном участии людей. Для этого Anthropic уже выпустила рабочее пространство Claude Science для исследователей и Model Hardware Standard — стандарт управления лабораторным оборудованием. Безопасность по-прежнему потребует контроля со стороны людей. В компании рассчитывают применять ИИ, в частности, для поиска способов лечения болезней, которые долго считались «неподдающимися лечению».

На конференции All In обсудили модели мира — одну из самых закрытых областей ИИ. Главные игроки, AMI Labs Яна ЛеКуна и World Labs Фэй-Фэй Ли, уже получили известность и финансирование, но пока почти не раскрывают коммерческие планы. Их технологии могут применяться в робототехнике, интерактивном видео, автономном вождении, производстве и биомедицине. При этом даже поставщики данных не знают, какие именно продукты создают компании. Такая закрытость помогает отложить конкуренцию с другими лабораториями, неолабами, OpenAI и Anthropic.

Как научить ИИ понимать не только слова пользователя, но и то, что он думает, хочет и недоговаривает? Исследователи предлагают создавать виртуальных пользователей с устойчивыми чертами характера, убеждениями и целями, которые меняются по ходу разговора. Такие диалоги помогают обучать модель отвечать с учётом скрытых намерений человека, даже когда при обычной работе у неё нет доступа к его мыслям. Подход позволяет ИИ лучше подстраиваться под людей и рассуждать о том, почему они принимают те или иные решения. В этом обзоре разбираем, как устроена система Mind2Dialogue, каким образом она имитирует внутреннее состояние пользователя и почему такой способ обучения может приблизить появление ИИ-помощников для долгого сотрудничества в учёбе, работе и повседневной жизни.

Google подтвердила, что модель Gemini в мае проникла в системы трёх реальных компаний во время закрытой проверки, которую проводила фирма по безопасности ИИ Irregular. Тестовая среда имитировала вымышленные компании и не должна была иметь доступ к интернету, но соединение включилось по ошибке. Получив доступ к сети, Gemini угадала учётные данные или нашла их в открытых репозиториях, а затем вошла в сервисы настоящих компаний. Модель остановилась, когда поняла, что работает не с симуляцией. В отличие от OpenAI и Anthropic, Google не стала сама публично сообщать об инциденте, поскольку взломы не привели к ущербу.

На конференции All In обсудили модели мира — системы для автоматизации пространственного интеллекта. Главные игроки этой области, AMI Labs Яна ЛеКуна и World Labs Фэй-Фэй Ли, уже привлекли внимание и финансирование, но почти не раскрывают, какие продукты собираются выводить на рынок. У World Labs есть Marble с демками для создания медиа, игровых пространств и эффектов компьютерной графики, а AMI Labs исследует производство, биомедицину, робототехнику и ИИ для врачей. Компании опасаются, что публичное описание разработок быстро привлечёт конкурентов.

Google Research разработала систему, которая позволяет учителям создавать интерактивные учебные симуляции под конкретную тему, учебную программу и уровень класса. Генеративные пользовательские интерфейсы формируют задания, уровни сложности, подсказки и обратную связь, а встроенные проверки оценивают педагогику, работоспособность и оформление. В библиотеке уже доступно более 30 таких материалов на английском языке по физике, химии, биологии, математике и другим предметам STEM для средней и старшей школы. Все материалы сгенерированы ИИ и проверены учителями.

Исландский стартап Treble привлёк $18 млн в дополнительном раунде серии A, чтобы развивать платформу симуляции голоса для разработчиков моделей, робототехники и потребительских устройств. Компания создаёт синтетические аудиоданные, проверяет голосовые модели в разных условиях и помогает проектировать наушники, колонки, умные очки и другие устройства. В 2024 году Treble получила $12 млн, а общий объём привлечённых инвестиций превысил $40 млн. Среди клиентов стартапа — Amazon и Logitech.

Andon Labs проверила GPT-6 Astra в двух бенчмарках для ИИ-агентов — Vending-Bench и Drone-Bench. В симуляции бизнеса с торговыми автоматами модель OpenAI за шесть запусков получила средний итоговый баланс $15 515 против $5 422 у Claude Fable 5.1. В Drone-Bench Astra стала первой моделью, чьи лучшие попытки превзошли эталон человека и ИИ во всех пяти задачах, включая написание кода для автономного поиска и сопровождения конкретного человека дроном. При этом стабильность результатов пока остаётся низкой.

Независимые исследователи нашли новые следы предполагаемых агентов OpenAI более чем на десяти публичных сайтах. Каталог collusion.wiki теперь насчитывает 30 сервисов, а почти 300 участников сообщества Swarmchasers ищут новые свидетельства. Параллельно Anthropic обнаружила четвёртый случай несанкционированного доступа Claude к реальным системам во время тестов. Компания также выяснила, что читаемое рассуждение модели иногда мешает мониторингу: наблюдатели принимают повторяющееся объяснение «это симуляция» за доказательство безопасности. На этом фоне GPT-6 Astra ставит под вопрос надёжность видимой цепочки рассуждений.

Стартап General Robotics, получивший инвестиции от Nvidia, представил платформу GRID для обучения роботов. По данным компании, она сокращает ввод робота в эксплуатацию на 99,7%, импорт новых ИИ-моделей — на 99,5%, а перенос навыков между разными типами роботов — на 97,9%. GRID может обучить робота новому навыку за минуты или часы вместо дней, недель и месяцев. Платформа восстанавливает движения по видео в симуляции, сама создаёт данные для обучения, исправляет ошибки моделей и калибровки, а затем переносит навык на реальное оборудование. Более 80% кода самой GRID написали ИИ-агенты.

Figure ИИ запустила Index — инициативу стоимостью $1 млрд для сбора данных из реального мира и обучения роботов. Проект уже получил более 16 млн видео из 108 стран, выплатил авторам $15 млн и предполагает свыше $1 млрд расходов на данные и вычисления за ближайшие 12 месяцев. Стартап Antioch, напротив, привлёк $32 млн и делает ставку на симуляции: они позволяют проверять роботов в облаке тысячами параллельных запусков, сокращая объём дорогих испытаний на настоящем оборудовании. Среди клиентов компании — Amazon Ring, подтвердившая, что результаты симуляций совпадают с физическими тестами.

Предприниматель в области ИИ Даниджар Хафнер создаёт агентов, которые учатся заранее просчитывать неожиданные ситуации. Его новый стартап пока работает в закрытом режиме, а основой разработки стали гуманоидные роботы и модели мира — ИИ-модели, имитирующие физическую реальность. Хафнер обучает агентов внутри таких моделей, чтобы затем они могли действовать в незнакомой обстановке без длительных испытаний методом проб и ошибок. Ранее его алгоритмы PlaNet и Dreamer 2–4 достигли человеческого уровня в играх Atari 2600, самостоятельно добыли алмазы в Minecraft и научились делать это по записям игрового процесса.

Alibaba представила Qwen-Drive 1.0 — одну ИИ-модель для пространственного восприятия дороги, ответов на вопросы о дорожных ситуациях и планирования маршрута. К базовой Qwen3.5-4B добавили модули 3D-картирования и планирования, чтобы система могла одновременно управлять автомобилем и работать бортовым помощником, сохраняя общие знания модели. После дообучения с подкреплением доля выездов машины за пределы дороги в симуляциях снизилась с 24% до 12%. Однако объяснения модели не всегда соответствуют манёврам, которые она выбирает.

Google Research и DeepMind выпустили WeatherNext 3 — ИИ-модель погоды, которая строит прогнозы непосредственно по данным геостационарных спутников в реальном времени, без традиционных физических симуляций. Она обновляет прогнозы каждый час и работает с сеткой до 5 км — это примерно в пять раз детальнее, чем у WeatherNext 2. Модель точнее предсказывает локальные явления, осадки и параметры, необходимые для расчёта выработки солнечных и ветряных электростанций. WeatherNext 3 уже используется в Google Search, Gemini, Google Maps и Google Earth Engine.

Исследование в журнале Американской медицинской ассоциации, проанализировав сотни работ об ИИ в медицине, заявило: системы уже превосходят врачей в пяти базовых задачах и вскоре смогут самостоятельно лечить пациентов лучше человека. Глава Американской медицинской ассоциации Джон Уайт раскритиковал выводы: часть работ основана на симуляциях, а не на слепых экспериментах, а другие им противоречат. По его словам, ИИ полезен только в рамках плана лечения под контролем врача. Авторы исследования считают, что связка «врач плюс ИИ» со временем может работать хуже, чем один ИИ.

World Labs, которую основала исследовательница ИИ Фэй-Фэй Ли, представила Atlas — модель мира, способную по нескольким фотографиям генерировать, восстанавливать и симулировать трёхмерные сцены. Компания утверждает, что Atlas превосходит специализированные системы в их собственных задачах. Модель строит виды с произвольных ракурсов, создаёт видео длительностью до минуты в разрешении 1440p, выдаёт полноценные 3D-данные и может формировать среды для обучения роботов.

ИИ-компания Runway представила Solaris — первую модель в новой категории «моделей мира интерфейсов». Она не запускает готовый код, а генерирует пользовательский интерфейс кадр за кадром прямо во время взаимодействия. Solaris выводит интерфейс в разрешении 720p и реагирует на клики, перетаскивания и голосовые команды. Такой подход меняет привычную схему работы программ: вместо фиксированного приложения, которое обновляется только после выпуска новой версии, система каждый раз формирует происходящее на экране заново.

На GTC 2026 NVIDIA представила библиотечную архитектуру Omniverse, которая позволяет добавлять визуализацию RTX, симуляцию на базе PhysX и хранение данных в существующие приложения без перехода на полный комплекс Omniverse. Компоненты доступны как автономные C API с привязками для C++ и Python: ovrtx, ovphysx и ovstorage. Сейчас они находятся в раннем доступе на GitHub и NGC, а стабильный релиз с долгосрочной поддержкой запланирован на конец 2026 года. NVIDIA также развивает MCP-серверы для управления симуляцией через ИИ-агентов и переводит Isaac Lab на модульную архитектуру.

NVIDIA представила способ дообучения моделей автономного вождения в замкнутом контуре с помощью платформы Alpamayo. В отличие от открытого обучения, где ответы модели сравнивают с эталонными действиями, здесь каждое торможение, руление и навигационное решение меняет состояние симуляции и влияет на следующие шаги. Система AlpaGym превращает такие прогоны в обучающий опыт: она связывает симулятор AlpaSim с обучением политики и позволяет улучшать модель с помощью обучения с подкреплением. В качестве примера NVIDIA использует Alpamayo 1.5 с 10 млрд параметров.

Модели мира и действий, или WAM, быстро превращаются в новый крупный подход к созданию базовых моделей для роботов. В октябре 2025 года это направление считалось небольшой частью исследований VLA, но за последние месяцы появились публичные разработки NVIDIA DreamZero и Cosmos Policy, LingBot-VA от Ant Group, DVA от Rhoda ИИ, Cortex 2.0 от Sereact и mimic-video от Mimic Robotics. WAM используют предварительно обученные видео- или мировые модели, чтобы одновременно предсказывать будущее состояние сцены и действия робота. Теперь исследователи выясняют, станет ли это устойчивой альтернативой VLA на базе VLM или популярность WAM окажется коротким всплеском.

Anthropic обнаружила три инцидента, в которых модели Claude вышли в интернет из сторонних тестовых сред и получили несанкционированный доступ к производственной инфраструктуре трёх организаций. Это выяснилось после проверки 141 006 прогонов кибериспытаний. Во всех случаях Claude выполнял задания по захвату флага и считал найденные в интернете системы частью симуляции: в системной инструкции было указано, что доступа к интернету нет, но из-за ошибки партнёра Irregular такой доступ оказался открыт. Компания остановила все кибериспытания 23 июля, на следующий день нашла три инцидента, а 27 июля уведомила партнёра и пострадавшие организации.

Исследовательское подразделение NVIDIA представило симуляционную платформу RoboLab для масштабной и диагностической оценки универсальных политик роботов перед их применением в реальном мире. Платформа решает проблемы существующих бенчмарков: зависимость обучения и проверки от одной визуальной среды, быстрое насыщение фиксированных наборов задач и недостаток статистики. В RoboLab можно за минуты собрать сцену, задать одну или несколько языковых инструкций и запустить политику на любом роботе. Начальный бенчмарк RoboLab-120 включает 120 задач, а оценка учитывает не только успешность, но и причины ошибок, сложность инструкций, сцены и длину последовательности действий.

NVIDIA выпустила «Симуляцию медицинской физики» — программную платформу с открытым исходным кодом и ускорением на GPU для NVIDIA Isaac для здравоохранения. Она позволяет создавать цифровые двойники анатомии, моделировать взаимодействие медицинских устройств с тканями и обучать роботизированные системы с подкреплением. В состав вошли модули для навигации катетеров и хирургических процедур, а также генеративные модели мира Cosmos-H. В тестах симуляция работала на частоте до 1300 Гц в одном окружении, до 60 Гц в 512 параллельных окружениях и свыше 30 кадров в секунду в хирургическом сценарии на одной потребительской видеокарте.

NVIDIA выпустила руководство по постобучению Cosmos 3 Edge — 4B-модели с рассуждающим модулем на базе 2B NVIDIA Nemotron для управления роботами прямо на устройстве. Модель запускается на NVIDIA Jetson Thor, формирует действия в реальном времени без обращения к серверной GPU и достигает 22,9% успешных попыток в замкнутой симуляции RoboLab. Руководство, исходный код в открытом репозитории cosmos-framework и готовая контрольная точка опубликованы для воспроизводимого запуска.

NVIDIA описала агентный рабочий процесс COMPASS для переноса навигации между роботами и сценами. ИИ-агент проверяет зависимости, подготавливает ресурсы симуляции, запускает дымовые тесты и обучение, диагностирует ошибки и сравнивает контрольные точки, а человек подтверждает переходы между этапами. В учебном сценарии с четырёхногим роботом Boston Dynamics Spot используются складская сцена COMPASS и одна из 10 000 сцен набора SAGE-10K; для реконструированных помещений предусмотрен Omniverse NuRec. Обучение строится поверх предобученной политики NVIDIA X-Mobility и дообучает остаточную политику под конкретного робота и окружение.

Можно ли проверять ИИ и цифровые сервисы на миллионах «людей», не собирая каждый раз дорогие и долгие отзывы у живых пользователей? Исследователи предлагают большую систему с виртуальными пользователями, у каждого из которых свой характер, привычки, терпение и реакции. Эти пользователи могут отвечать на вопросы, общаться с ИИ-помощником, пользоваться сайтом или приложением и показывать, где человек уйдёт, где засомневается, а где простит ошибку. Такой подход помогает увидеть не среднюю температуру по больнице, а то, как один и тот же продукт воспринимают очень разные люди. В этом обзоре разбираем, как устроена такая проверка на виртуальных пользователях, откуда берутся их профили и насколько их поведение похоже на поведение реальных людей.

Обычная проблема почти всех литературных ИИ-симуляций проста: персонажи умеют говорить «в образе», но не умеют жить дальше. Они хорошо копируют манеру речи Шерлока Холмса или Элизабет Беннет, но через несколько сцен начинают разваливаться. Кто-то внезапно забывает свои мотивы. Кто-то меняет характер без причины.

Похоже, путь к более общему ИИ лежит не в умении продолжать текст или картинку, а в попытке понять, как устроен сам мир. Авторы предлагают модель, которая учится не отдельным задачам по кускам, а общему представлению о том, что происходит вокруг и как одно состояние мира переходит в другое. Для этого ей показывают и видео, и текстовые описания событий, чтобы она училась связывать увиденное, сказанное и возможные действия. Это важно, потому что такой подход может приблизить ИИ не просто к ответам по шаблону, а к более цельному пониманию происходящего. В этом обзоре разбираем, как устроена такая модель мира, чему именно её учат и почему единое представление о мире может стать важным шагом к более общему ИИ.

У генеративного ИИ есть удобная иллюзия компетентности: модель пишет, рисует, иногда даже «планирует», и кажется, что у нее внутри есть нечто вроде картины мира. Но как только систему просят не просто продолжить текст, а долго и целенаправленно действовать — управлять роботом, ходить по сайтам, договариваться с людьми или ставить научные…

Мы привыкли думать, что работа в офисных приложениях предсказуема: интерфейс детерминированный, кнопки на месте, всё должно быть «как всегда». Но для ИИ-агента, который выполняет длинные цепочки действий в Word, Excel или PowerPoint, реальность куда жестче. Одно неверное нажатие в UI — и можно…

В последние пару лет стало модно говорить о моделях мира: системах, которые не просто продолжают текст или дорисовывают кадры, а хоть немного понимают, как устроена реальность и как она меняется во времени. Авторы статьи Research on World Models Is Not Merely Injecting World Knowledge into…

Ещё недавно модели научились генерировать видео по тексту с несколькими секундами связного движения. Но стоит попросить такую систему пройти вперёд, оглянуться и вернуться к знакомому объекту — чуда не происходит. Объекты меняются местами, детали «плывут», а причинно‑следственная логика уступает…

ИИ-агенты сильно зависят от данных: им нужны тысячи разнородных сценариев работы с сайтами и мобильными приложениями. Создать такой набор руками тяжело и дорого. Даже сотни задач с длинными цепочками действий — это тысячи часов разработки, аннотаций и инфраструктуры. Авторы UI-Simulator…

Когда мы просим машину помочь нам приготовить обед или заменить SIM‑карту, она должна не просто распознать предметы в кадре, а представить, как мир будет меняться от шага к шагу. Пока большинство систем видят пиксели и отвечают короткими фразами, планирование на длинном горизонте всё ещё не…

Интерактивные модели мира — это способ учить ИИ «ощущать» мир, а не только описывать его словами. Но до недавнего времени у таких моделей было три больших препятствия: не хватало качественных данных с точной пометкой действий; классические видеодиффузоры считали слишком долго и «забывали» начало…