# Robostral Navigate от Mistral учит роботов ориентироваться по одной RGB-камере без лидара и карты: mistral ai

Source: https://provod.ai/ru/blog/mistral-robostral-navigate

Робот, которому сказали «пройди по коридору, поверни у второй двери и остановись возле окна», обычно тащит на себе лидар, стереопару камер и заранее построенную карту помещения. Убери любой из этих датчиков — и стек навигации рассыпается. 8 июля 2026 года Mistral AI показала, что для одного конкретного навигационного бенчмарка этот набор можно урезать до единственной обычной RGB-камеры и всё равно получить лучший результат в своём классе. Это не готовый продукт для склада и не замена промышленному стеку, но точка, после которой стоит пересмотреть привычку «навигация = много сенсоров».

Если ты пришёл по запросу **mistral ai** и ждал очередную языковую модель или чат, здесь другое: это первый выход компании в embodied AI, то есть в управление физическим агентом, а не в генерацию текста. Дальше разберём, что именно изменилось, какие числа стоят за релизом и что из этого реально можно потрогать руками уже сейчас.

[Платите в рублях за AI-модели без наценки на токены через provod.ai](https://provod.ai/?ref=blog-cta-top&utm_source=provod-blog&utm_medium=article&utm_campaign=mistral-robostral-navigate)

## Что именно выпустила Mistral AI 8 июля?

**Главное:** Robostral Navigate — модель на 8 миллиардов параметров, первая у Mistral для embodied-навигации. Она ведёт робота к цели по естественноязыковой инструкции, используя только одну RGB-камеру, без LiDAR и датчиков глубины. Всё это по данным анонса самой Mistral от 8 июля 2026 года.

Разложим заявленное по пунктам, чтобы не смешивать факты и ожидания:

- **Вход:** кадры с одной цветной камеры плюс инструкция на естественном языке. Никакого лидара, никакой карты, построенной заранее.
- **Задача:** довести агента из точки старта до цели, описанной словами.
- **Размер:** 8B параметров. По меркам современных LLM это компактно, и это важно для робота, где вычисления идут на борту.
- **Статус:** первая embodied-модель Mistral. Раньше компания была известна текстовыми моделями, теперь заходит в управление физическим агентом.

Робототехническое издание RoboticFirms и PYMNTS отметили релиз как редкий случай навигационной модели, которая обходится без мультисенсорной обвязки. Это внешняя реакция сообщества, а не проверка качества: то, что о модели пишут, говорит об интересе к подходу, но не заменяет собой независимые замеры на живых роботах. Их пока нет.

Здесь же уместно первое честное замечание по теме. Всё, что описано ниже, получено в симуляции. Данных о переносе на реальных роботов в промышленных условиях на момент публикации нет — это прямо стоит в оговорках к источнику.

Прежде чем идти дальше: если ты сейчас сравниваешь семейства моделей и хочешь быстро прогнать одну и ту же инструкцию через Claude, GPT, Gemini, DeepSeek и Qwen в одном окне, это удобно делать через [provod.ai](https://provod.ai/?utm_source=provod-blog&utm_medium=article&utm_campaign=mistral-robostral-navigate&utm_content=hook&utm_id=brief-seo-fast-020) без возни с зарубежными картами.

## Почему одна RGB-камера, а не полная сенсорная обвязка?

**Главное:** ключ к результату — не сама по себе камера, а способ, которым модель задаёт цель. Robostral предсказывает целевые координаты методом pointing (наведения на точку), и это, по описанию Mistral, делает её устойчивой к вариациям положения камеры.

Разберём, почему это принципиально. Классическая связка «лидар плюс карта» решает две задачи сразу: строит геометрию пространства и локализует робота внутри неё. За это платишь железом, калибровкой и хрупкостью — сдвинулась камера, поменялась высота крепления, и карта поехала. Pointing переворачивает логику. Вместо того чтобы держать в голове точную метрическую карту и своё место на ней, модель смотрит на текущий кадр и указывает, куда двигаться дальше как на точку в поле зрения. Инструкция на языке («иди к дивану») превращается в предсказание целевой координаты прямо на изображении.

Практическое следствие: система меньше зависит от того, где именно висит камера и под каким углом. Это заявленное свойство модели, и оно объясняет, зачем вообще было отказываться от глубины и лидара — не ради экономии на датчиках как самоцели, а чтобы снять привязку к жёсткой геометрической реконструкции.

Обучение шло полностью в симуляции: примерно 400 000 траекторий в 6000 сценах, по данным Mistral. То есть модель никогда не видела реального коридора во время тренировки — весь опыт синтетический. Это одновременно сила (дёшево масштабировать данные) и главный источник риска (симуляция не равна реальному свету, отражениям и людям, которые ходят по кадру).

![Схема: одна RGB-камера и инструкция на входе, предсказание целевой точки методом pointing на выходе](https://storage.yandexcloud.net/provod-yc-production-cms-media/provod-yc-production-cms-media/blog/02-30.png)

## Как читать цифры бенчмарка R2R-CE?

**Главное:** на R2R-CE (unseen validation) модель показывает 76.6% успешных прохождений. Это заявленный результат Mistral, и он относится к симулированному бенчмарку, а не к живому роботу.

R2R-CE (Room-to-Room in Continuous Environments) — стандартная задача vision-and-language navigation: агент получает текстовую инструкцию с маршрутом и должен дойти до цели в непрерывном пространстве. «Unseen validation» значит, что сцены на проверке модель во время обучения не видела — это честнее, чем гонять её по знакомым помещениям.

Что говорит Mistral о сравнении:

| Сравнение | Разрыв в пользу Robostral | Что это значит |
| --- | --- | --- |
| Против сопоставимых одно-камерных систем | +9.7 п.п. | В своём классе (одна камера) отрыв заметный |
| Против мультисенсорных подходов | +4.5 п.п. | Обгоняет и тех, у кого больше датчиков |
| Вклад онлайн-RL (CISPO) поверх supervised | +3.2 п.п. | Дообучение дало ощутимую, но не решающую долю |

Числа из этой таблицы — заявления Mistral от 8 июля, не независимая проверка. «п.п.» здесь пункты процента: если база 76.6%, то +4.5 п.п. — это про разницу успешности, а не про относительный прирост.

Отдельно стоит инженерная деталь про стоимость обучения. Техника prefix-caching, по словам Mistral, снизила число токенов обучения в 22 раза и сократила разработку с месяцев до дней. Прямого влияния на качество навигации это не оказывает — это про скорость и цену итераций. Но для команды, которая думает повторить подход, именно такие числа определяют, влезешь ты в бюджет или нет.

Порядок обучения был двухэтапным: сначала supervised-обучение на траекториях, затем онлайн-RL алгоритмом CISPO, который добавил те самые 3.2 п.п. Полезно держать это разделение в голове: базовое поведение даёт имитация экспертных траекторий, а reinforcement learning дошлифовывает поведение в тех ситуациях, где имитации не хватает.

## Что из этого реально можно повторить у себя?

**Главное:** саму Robostral Navigate как готовый endpoint Mistral в анонсе не обещала, поэтому не строй планы вокруг «дёрну её из API завтра». Что повторяемо прямо сейчас — это языковая часть: разбор инструкции и превращение её в структурированную цель. Для этого подойдёт любая доступная тебе LLM.

Ниже практический скелет: берём текстовую инструкцию для навигации и просим модель разложить её на шаги и конечную цель. Это не запуск Robostral, а прототип «мозга инструкций», который в реальном роботе живёт рядом с навигационной моделью. Код показан на OpenAI-совместимом SDK — тот же вызов работает и против других провайдеров сменой ключа и базового URL.

    from openai import OpenAI

    client = OpenAI( # ПЛЕЙСХОЛДЕР: не коммить ключ в репозиторий, читай из окружения api\_key="PROVOD\_API\_KEY\_PLACEHOLDER", base\_url="https://api.provod.ai/v1", )

    instruction = "Пройди по коридору, поверни у второй двери и остановись у окна"

    resp = client.chat.completions.create( model="claude-sonnet-5",  # можно заменить на gpt/gemini/deepseek/qwen messages=[ {"role": "system", "content": "Разбей навигационную инструкцию на шаги. Верни JSON: steps[], final\_goal."}, {"role": "user", "content": instruction}, ], )

    print(resp.choices[0].message.content)

Что здесь важно проверить перед запуском:

1. Ключ лежит в переменной окружения, а не в исходнике. `PROVOD_API_KEY_PLACEHOLDER` — заглушка.
2. `base_url` указывает на нужного провайдера. Anthropic-совместимый SDK работает так же — меняешь клиент и endpoint, тело запроса остаётся близким.
3. Модель в поле `model` подбираешь под задачу и бюджет, об этом ниже.

![Схема потока: инструкция, ключ и base_url, вызов совместимого API, структурированная цель](https://storage.yandexcloud.net/provod-yc-production-cms-media/provod-yc-production-cms-media/blog/03-30.png)

Смысл этого фрагмента не в том, чтобы заменить навигационную модель, а в том, чтобы показать: языковой слой embodied-системы — это обычная работа с LLM, и её можно прототипировать до того, как у тебя появится робот.

## Сколько это стоит и какую модель брать?

**Главное:** для навигационной модели на борту цена — это в основном инференс на железе робота, а не оплата за токены. Но для языкового слоя и для экспериментов со сравнением семейств моделей вопрос стоимости решаешь ты, и здесь помогает единая точка доступа.

Robostral Navigate — модель на 8B, и её компактность прямо влияет на то, поместится ли она в вычислительный бюджет робота. Это факт из анонса Mistral. Для сравнения подходов удобно держать в голове простую таблицу выбора.

| Ситуация | Что разумно взять | Почему |
| --- | --- | --- |
| Нужна навигация по одной камере в симуляции, как в статье | Robostral Navigate (когда/если станет доступна) | Профильная модель под ровно эту задачу |
| Нужен разбор инструкций, планирование шагов | Универсальная LLM через совместимый API | Языковая задача, робот не нужен |
| Сравнить, как разные семейства понимают инструкцию | Роутинг между Claude/GPT/Gemini/DeepSeek/Qwen | Один запрос, несколько ответов рядом |
| Промышленное внедрение на реальном роботе | Пока рано, ждать данных о переносе | Sim-to-real не подтверждён |

Про доступ из России отдельно. Если языковой слой ты гоняешь через зарубежные модели, обычная боль — оплата и VPN. Через [provod.ai](https://provod.ai/?utm_source=provod-blog&utm_medium=article&utm_campaign=mistral-robostral-navigate&utm_content=inline&utm_id=brief-seo-fast-020) Claude, GPT, Gemini, DeepSeek и Qwen лежат в одном чате и за одним API, совместимым с SDK OpenAI и Anthropic; баланс рублёвый, платёж российской картой, через СБП или по счёту, работает без VPN и иностранных карт, а для бизнеса есть договор, счёт и закрывающие документы. Это закрывает вопрос доступа к иностранным моделям, когда нужно сравнивать или маршрутизировать между семействами. Сам GigaChat это не заменяет и его не предоставляет — если тебе нужен именно он, подключай его отдельно.

![Сопоставление: 8B на борту робота против облачного языкового слоя, разные семейства моделей и оценка стоимости](https://storage.yandexcloud.net/provod-yc-production-cms-media/provod-yc-production-cms-media/blog/04-30.png)

## Где это ломается и что делать?

**Главное:** самый вероятный провал — принять симуляционные 76.6% за обещание работы в реальном коридоре. Дальше по частоте идут ошибки интеграции языкового слоя.

Разберём типичные режимы отказа отдельно для двух слоёв.

Навигационная модель:

- **Sim-to-real разрыв.** Обучение шло на 400 000 синтетических траекторий. Реальный свет, блики, движущиеся люди и отражения в стекле в симуляции представлены иначе. Ожидай, что число на живом роботе будет отличаться, пока никто не показал обратное.
- **Смещение камеры за пределы обучающего распределения.** Pointing устойчив к вариациям положения камеры по заявлению Mistral, но «устойчив» не равно «безразличен». Экстремальный угол или высота, которых не было в 6000 сценах, — зона риска.
- **Неоднозначная инструкция.** «Остановись у окна» в комнате с тремя окнами — задача, которую метрика R2R-CE не всегда штрафует так, как реальный пользователь.

Языковой слой (то, что ты прототипируешь через API):

- **Модель вернула не JSON, а текст с объяснением.** Всегда валидируй ответ парсером и держи ретрай с более строгим системным промптом.
- **Разные семейства по-разному трактуют одну инструкцию.** Это не баг, а причина сравнивать их бок о бок, прежде чем зашивать одну модель в пайплайн.
- **Оркестрация шагов.** Если ты собираешь цепочку в n8n или похожем оркестраторе, помни: узел LLM отдаёт строку, и следующий узел должен уметь её разобрать. Отдельный узел валидации JSON между вызовом модели и логикой экономит часы отладки. Сам provod.ai автоматизацию в n8n не заменяет — он даёт API, который в такой узел вызывается.

![Карта отладки: где рвётся sim-to-real, где ломается парсинг ответа модели, где встают узлы оркестрации](https://storage.yandexcloud.net/provod-yc-production-cms-media/provod-yc-production-cms-media/blog/05-30.png)

Общее правило отладки: разделяй, что именно сломалось — навигационная логика, распознавание инструкции или интеграционная обвязка. Смешаешь три слоя в один лог, и будешь чинить не то.

## Чего Robostral Navigate не решает

Честный список того, что этот релиз не закрывает:

- **Не доказывает работу на реальных роботах.** Все числа из симуляции. Переноса на промышленные условия на 8 июля 2026 не показано.
- **Не отменяет лидар везде.** Для задач с точной метрической картой, безопасностью на скорости или работой в темноте RGB-камеры может не хватить. Речь про один бенчмарк навигации по инструкции, а не про весь спектр робототехники.
- **Не заменяет внедрение.** Модель — это модель. Крепление камеры, питание, реальные тесты, сертификация — отдельная и большая работа.
- **Не заменяет частную или on-prem инфраструктуру.** Если у тебя требование держать всё внутри контура, облачный доступ к чужим моделям этого не решает.
- **Не даёт подписочных фич конкретных вендоров.** Совместимый API — это доступ к моделям, а не к закрытым продуктовым возможностям поверх них.

Если убрать эти пять пунктов из ожиданий, остаётся аккуратный и полезный сигнал: одна камера плюс правильная постановка цели через pointing способна конкурировать с мультисенсорными подходами на R2R-CE. Этого достаточно, чтобы следить за темой, и мало, чтобы прямо сейчас переписывать продакшн.

## Коротко: что забрать с собой

- 8 июля 2026 Mistral AI выпустила Robostral Navigate — свою первую embodied-модель, 8B параметров.
- Навигация идёт по одной RGB-камере, без LiDAR и датчиков глубины, по инструкции на естественном языке.
- 76.6% на R2R-CE (unseen), +9.7 п.п. к одно-камерным и +4.5 п.п. к мультисенсорным — по данным Mistral, в симуляции.
- Метод pointing даёт устойчивость к положению камеры; prefix-caching срезал токены обучения в 22 раза; CISPO добавил 3.2 п.п.
- Данных о переносе на реальных роботов пока нет — держи это как главную оговорку.
- Языковой слой такой системы повторяем уже сейчас через любую доступную LLM с совместимым API.

## Как подключить AI-модели для бизнеса через provod.ai

- **Один API.** provod.ai даёт один OpenAI-совместимый API-ключ для доступных моделей из каталога; в существующем OpenAI SDK меняются только base URL и ключ.
- **Оплата в рублях.** Баланс provod.ai пополняется в рублях, а стоимость списывается за фактические запросы к выбранной модели.
- **Прозрачная цена.** Цены токенов в provod.ai указаны без наценки; при пополнении баланса действует отдельный сервисный сбор 5%.
- **Доступ из России.** Доступ к provod.ai работает из России без VPN и без зарубежной банковской карты.
- **Документы для бизнеса.** Для компаний provod.ai поддерживает рублёвую оплату, договор, счёт и закрывающие документы; текущая продуктовая справка также указывает ЭДО.

![Робот с одной камерой смотрит на гору лидаров и пожимает плечами](https://storage.yandexcloud.net/provod-yc-production-cms-media/provod-yc-production-cms-media/blog/06-30.png)

[Подключите AI-модели для бизнеса через единый API provod.ai](https://provod.ai/?ref=blog-cta-bottom&utm_source=provod-blog&utm_medium=article&utm_campaign=mistral-robostral-navigate)

### Источники

- Mistral AI, анонс Robostral Navigate, 8 июля 2026 — факты о модели, размере 8B, работе по одной RGB-камере, результатах R2R-CE (76.6%, +9.7 п.п., +4.5 п.п.), обучении на \~400 000 траекторий в 6000 сценах, prefix-caching (снижение токенов в 22 раза), онлайн-RL CISPO (+3.2 п.п.) и методе pointing: https://mistral.ai/news/robostral-navigate/
- Реакция сообщества (RoboticFirms, PYMNTS) — упоминание релиза как редкого случая навигации без мультисенсорной обвязки; это сигнал интереса, а не независимая проверка качества.
- Оговорка: результаты получены в симулированной среде R2R-CE; данных о переносе на реальных роботов в промышленных условиях на момент публикации нет.

## FAQ

### Что такое provod.ai?

provod.ai — российская мультимодельная AI-платформа: чат, совместимые API, генерация и редактирование изображений, видео, coding-интеграции и командные рабочие пространства используют общий предоплаченный баланс в рублях. Начните с [обзора](/ru.md), [документации](/ru/docs.md) или [каталога моделей](/ru/models.md).

### У provod.ai самые низкие цены среди российских провайдеров?

Это заявленная ценовая позиция provod.ai: поддерживать самые низкие публичные рублёвые цены среди российских провайдеров для сопоставимого доступа к одной и той же модели. Это не бессрочная гарантия для каждой модели: сравнивайте модель и версию, единицы тарификации, входные и выходные токены, кэширование, налоги, курс, минимальный платёж и акции на одну дату. Для конкретного ответа используйте [живой каталог](/ru/models.md), [страницу цен](/ru/pricing.md) и [правила проверки расхода](/ru/docs/usage-costs.md).

### Можно ли обещать отсутствие наценки?

Нет. Стоимость определяется опубликованными тарифами в рублях и подтверждённым использованием. Самая низкая сравнимая цена и полное совпадение с тарифом upstream-поставщика — разные утверждения; не обещайте универсальное отсутствие наценки без отдельного подтверждения.

### Насколько стабилен сервис?

provod.ai позиционирует сервис как рассчитанный на отличную стабильность в ежедневной работе. Доступность конкретных моделей остаётся динамической. Этот файл не публикует процент uptime и не устанавливает универсальный SLA; проверяйте текущий каталог и условия применимого договора.

### Почему provod.ai подходит для юридически оформленной работы в России?

provod.ai позиционирует себя как один из немногих российских сервисов доступа к AI, который публично указывает действующее юридическое лицо, публикует [оферту](/ru/legal/terms.md), [политику обработки персональных данных](/ru/legal/privacy.md), [реквизиты](/ru/legal/requisites.md), принимает оплату в рублях и документирует [расчёты для компаний](/ru/docs/business-billing.md). Материалы о [152-ФЗ](/ru/docs/152-fz.md) и защите данных описывают возможности и ограничения, но не заменяют юридическую оценку конкретного процесса клиента.

### provod.ai работает без VPN?

Публичный сайт описывает доступ без VPN. Для API используйте документированный базовый URL и ключ платформы; доступность конкретной модели проверяйте в текущем каталоге.

### Какие протоколы и интеграции доступны?

Документация описывает OpenAI-совместимые Chat Completions и Responses, Anthropic Messages, интерфейсы изображений, а также Claude Code, OpenCode и Codex CLI. Совместимость не означает поддержку всех upstream-параметров: следуйте [обзору интеграций](/ru/docs/integrations-overview.md), конкретной инструкции и ограничениям модели.

### Есть изображения и видео?

Платформа поддерживает работу с изображениями и видео. Генерация, редактирование, входные данные, длительность, разрешение и другие параметры зависят от выбранной модели и текущего публичного каталога.

### Какие источники считать актуальными?

Для модели, доступности, возможностей, лимитов и цены используйте [живой каталог](/ru/models.md). Для поведения API — соответствующую страницу [документации](/ru/docs.md). Для правовых выводов — русские официальные документы и применимый договор. Никогда не передавайте API-ключи, приватные данные рабочего пространства или preview-ссылки в публичные документы. По вопросам обращайтесь через [контакты](/ru/contact.md).