Открытый фреймворк для создания embodied-агентов, которые используют LLM-планировщики, VLA-модели манипуляции и память для выполнения задач на симуляторах и реальных роботах.
TianxingChen/Embodied-AI-Guide
Китайскоязычная база знаний и подборка материалов по Embodied AI: алгоритмы, инфраструктура, управление и оборудование, а также практическое руководство по RoboTwin 2.0.
- Звёзды
- 16,564
- Форки
- 1,059
- Открытые issues
- 3
- Последний коммит
- 7 дней назад
Что это?
Embodied-AI-Guide — китайскоязычная база знаний по Embodied AI — области, в которой роботы и другие физические агенты учатся воспринимать реальный мир и действовать в нём. Материал организован в виде энциклопедического указателя: здесь описаны основные технические направления (модели VLA, обучение с подкреплением и имитацией, симуляторы, датасеты, бенчмарки, управление всем телом, сенсоры и тактильное оборудование), а также приведены ссылки на статьи, курсы, лаборатории, рассылки и тематические подборки по каждому направлению.
В руководстве также есть практический трек на базе RoboTwin 2.0 — платформы для симуляции с двумя манипуляторами, 50 задачами и более чем 100 000 заранее собранных траекторий. В нём разбираются установка окружения, загрузка данных, обучение политики ACT и её оценка по таблице лидеров. Также отмечено, что код политики находится в субмодуле XPolicyLab. Глоссарий примерно из 20 терминов и таблица маршрутов обучения с учётом опыта помогают новичкам выбрать, с чего начать.
Материалы в основном написаны на упрощённом китайском. Лицензия проекта разрешает только некоммерческое использование.
Ключевые возможности
- 01Разделы в энциклопедическом формате об алгоритмах, инфраструктуре, управлении и оборудовании
- 02Практическое руководство по RoboTwin 2.0: от настройки окружения до оценки политики
- 03Загрузка заранее собранного датасета для 50 задач симуляции с двумя манипуляторами
- 04Подборки статей, конференций, рассылок и исследовательских лабораторий
- 05Глоссарий примерно из 20 терминов по Embodied AI и маршрут обучения с учётом опыта
Сценарии использования
- Разработчик, который только знакомится с обучением роботов и хочет получить структурированное представление об этой области
- Первый запуск обучения и оценки политики для манипуляции в симуляции без физического робота
- Поиск недавних статей о VLA и связанных репозиториев с открытым исходным кодом
- Выбор маршрута изучения аппаратного обеспечения или управления с учётом опыта в разработке ПО или робототехнике
Быстрый старт
- 1
Клонируйте репозиторий RoboTwin вместе с подмодулем XPolicyLab
git clone --recurse-submodules https://github.com/RoboTwin-Platform/RoboTwin.git - 2
Скачайте заранее собранные данные для задачи beat_block_hammer
bash scripts/download_xpolicylab_data.sh beat_block_hammer - 3
Установите среду выполнения policy ACT из папки policy в XPolicyLab
bash install.sh - 4
Следуйте официальному руководству по установке, чтобы настроить среду платформы RoboTwin
Что важно знать
- Для обучения по руководству ACT требуется GPU как минимум с 16 ГБ видеопамяти.
- В официальных рекомендациях советуют не использовать GPU серий A, H и V для сбора данных и оценки policy.
- Лицензия проекта разрешает только некоммерческое использование.
Темы
Частые вопросы
- Что такое Embodied-AI-Guide?
- Китайскоязычная база знаний и подборка материалов по Embodied AI: алгоритмы, инфраструктура, управление и оборудование, а также практическое руководство по RoboTwin 2.0. Embodied-AI-Guide — китайскоязычная база знаний по Embodied AI — области, в которой роботы и другие физические агенты учатся воспринимать реальный мир и действовать в нём. Материал организован в виде энциклопедического указателя: здесь описаны основные технические направления (модели VLA, обучение с подкреплением и имитацией, симуляторы, датасеты, бенчмарки, управление всем телом, сенсоры и тактильное оборудование), а также приведены ссылки на статьи, курсы, лаборатории, рассылки и тематические подборки по каждому направлению.
- Embodied-AI-Guide можно использовать бесплатно? Какая у него лицензия?
- Embodied-AI-Guide распространяется с открытым исходным кодом под лицензией Other. Перед использованием в коммерческих продуктах проверьте условия лицензии.
- Embodied-AI-Guide всё ещё поддерживается?
- Активно поддерживается. Последний коммит в Embodied-AI-Guide — 14 окт. 2026 г..
- Для чего можно использовать Embodied-AI-Guide?
- Разработчик, который только знакомится с обучением роботов и хочет получить структурированное представление об этой области Первый запуск обучения и оценки политики для манипуляции в симуляции без физического робота Поиск недавних статей о VLA и связанных репозиториев с открытым исходным кодом Выбор маршрута изучения аппаратного обеспечения или управления с учётом опыта в разработке ПО или робототехнике
- Как установить Embodied-AI-Guide?
- Клонируйте репозиторий RoboTwin вместе с подмодулем XPolicyLab: git clone --recurse-submodules https://github.com/RoboTwin-Platform/RoboTwin.git Скачайте заранее собранные данные для задачи beat_block_hammer: bash scripts/download_xpolicylab_data.sh beat_block_hammer Установите среду выполнения policy ACT из папки policy в XPolicyLab: bash install.sh Следуйте официальному руководству по установке, чтобы настроить среду платформы RoboTwin
- Где скачать Embodied-AI-Guide?
- Исходный код и инструкции по установке — на GitHub: https://github.com/TianxingChen/Embodied-AI-Guide
Описание создано ИИ на основе README проекта. Статистика GitHub обновляется ежедневно.
Похожие проекты
Подборка книг, курсов, симуляторов, библиотек, конференций, журналов и соревнований по робототехнике.
Платформа для симуляции в робототехнике и embodied AI: объединяет мультифизический движок, фотореалистичный рендерер и кроссплатформенный компилятор с интерфейсом на Python.
Python-привязки и слой политик для роботов на базе Rust-движка инференса ApxInf, запускающий VLA-модели, например PI-0.5, на Jetson Thor/Orin и GPU RTX.
Подборка обучающих материалов, сгруппированных по языкам программирования: они шаг за шагом показывают, как создавать приложения с нуля.
Коллекция Java-кода с реализациями классических и современных паттернов проектирования и подробными примерами для каждого из них.