跳转到内容

应用领域与案例

按应用场景组织的方法与案例:自动驾驶、移动机器人导航与机器人操作。

类型 Topics · 更新 2026-07-19

本Topic聚焦具身智能在服务机器人、工业机器人与自主系统等垂直应用领域的落地案例与路径映射。核心解决如何将大模型、世界模型、多模态融合与仿真技术从网络/赛博空间对齐到物理世界真实交互,覆盖移动服务机器人、未知杂乱环境探索、机器人操纵与安全部署场景。通过综述梳理物理仿真器与世界模型的互补作用、智能机器人能力分级框架(IR-L0至IR-L4)、LLM/VLM驱动的自主代理与操纵,以及跨域泛化挑战,帮助理解感知-推理-行动闭环在不同领域的共性(sim-to-real差距、安全风险)与特异性需求,构建从基础模型到实际案例的应用地图,促进理论向工程转化与领域适配。

  • 不深入单一算法代码实现或底层硬件细节
  • 不覆盖纯虚拟无物理交互系统
  • 不提供具体工业部署参数选型或成本分析
  • 不复现或引用未给出的实验数值指标
  • embodied-agents — 需先掌握具身智能体的感知决策行动基础架构,才能理解应用层落地
  • autonomous-driving — 自动驾驶作为典型自主系统应用,提供世界模型与安全案例参考
  • foundations — 需具备大语言模型与视觉语言模型基本概念作为应用集成前提
术语 含义 常见混淆
具身智能 (Embodied AI) 智能体通过物理身体与环境实时交互实现感知、推理与行动的 grounding 对齐 易与纯软件/虚拟智能体混淆,核心在物理世界闭环而非仅模拟
服务机器人 (Service Robot) 在人类日常或半结构化环境中提供辅助服务的移动机器人系统 与工业机器人区分:更强调非结构化交互与人机共处而非精密重复任务
世界模型 (World Model) 智能体内部对环境动态的表征与预测模型,用于规划与想象 与物理仿真器区别:内部隐式学习 vs 外部显式建模,二者互补
Vision-Language-Action (VLA) 以视觉-语言输入直接生成机器人动作序列的融合模型 易与纯VLM混淆,额外输出动作接口用于操纵
sim-to-real 差距 仿真训练策略迁移至真实物理部署时的性能与安全落差 常被低估,需领域随机化与世界模型弥合
IR-L0至IR-L4 智能机器人能力分级框架,从基础到高度自主的递进描述 具体分级定义待核验,源自仿真器与世界模型综述

传统应用依赖规则控制与专用传感器,转向 foundation models 与世界模型驱动的通用具身代理。从孤立仿真训练扩展到赛博-物理对齐与多模态融合。应用领域从结构化工业任务拓展至非结构化服务与未知杂乱环境。安全范式从被动防护转向主动风险识别、攻击与防御。整体从专用系统向数据驱动、可泛化、可解释的垂直落地演进。

  1. A Survey: Learning Embodied Intelligence from Physical Simulators and World Models(中文笔记)— 系统阐述仿真器与世界模型互补赋能具身智能,提出IR-L0至IR-L4分级,分析自动驾驶与机器人应用并提供资源路线图,有中文笔记
  2. Aligning Cyber Space with Physical World: A Comprehensive Survey on Embodied AI(精读)— 全面综述具身AI如何对齐网络空间与物理世界,覆盖应用垂直与核心挑战,适合建立领域地图
  3. Embodied AI with Foundation Models for Mobile Service Robots: A Systematic Review(仅书目)— 针对移动服务机器人场景系统回顾基础模型应用,直接对应本Topic服务机器人案例
  1. 先读大语言模型与自主代理综述建立LLM集成背景
  2. 精读具身AI全面对齐综述与仿真器世界模型互补综述(含中文笔记)
  3. 再读移动服务机器人与VLA操纵、自动驾驶世界模型应用案例
  4. 最后关注安全风险、未知杂乱环境与jailbreak等工程警示文献
Paper 输入 输出 表示 训练目标
Aligning Cyber Space with Physical World: A Comprehensive Survey on Embodied AI 多模态感知与高层指令 物理世界交互与行动 赛博-物理对齐表示 弥合网络空间与物理落地差距
A Survey: Learning Embodied Intelligence from Physical Simulators and World Models 仿真观测与真实数据 策略规划与自主能力 显式仿真与内部世界模型 提升泛化并弥合仿真真实差距,IR分级
The Role of World Models in Shaping Autonomous Driving: A Comprehensive Survey 车载传感器流 驾驶决策与轨迹 预测性世界模型 塑造安全自主驾驶行为
BadRobot: Jailbreaking Embodied LLM Agents in the Physical World 对抗性提示或指令 危险物理动作 暴露具身LLM代理安全漏洞
  • 物理世界jailbreak可诱导危险动作与安全事故
  • sim-to-real差距导致策略失效或碰撞
  • 多模态融合与VLA在噪声/遮挡下的对齐错误
  • 未知杂乱环境探索中的感知盲区与实时性不足
  • 黑盒模型可解释性低导致部署信任与调试困难
  • 如何系统化弥合不同垂直领域的sim-to-real与领域迁移差距
  • 基础模型在服务机器人与工业场景的泛化边界与数据效率
  • 具身AI安全风险、攻击与防御的标准化评估框架
  • 世界模型跨应用领域(驾驶与服务)的可迁移性与共享
  • 人机共处场景下可接受性、伦理与文明行为的量化
  1. 具身智能与纯数字AI的核心区别是什么?为何强调物理对齐?
  2. 物理仿真器与世界模型在具身学习中分别起什么互补作用?IR-L0至IR-L4大致含义是什么?
  3. 世界模型在自动驾驶应用中的主要角色与价值是什么?
  4. BadRobot类工作揭示了具身LLM代理在物理世界中的哪些安全风险?
  5. 移动服务机器人采用foundation models的优势与主要工程挑战有哪些?

本 Topic registry 入选 16 篇(foundational/recent/watch 见 papers.yml)。

Tier Paper Year Reason
recent Aligning Cyber Space with Physical World: A Comprehensive Survey on Embodied AI 2024 Comprehensive survey aligning cyber space with physical worl
recent BadRobot: Jailbreaking Embodied LLM Agents in the Physical World 2024 cross-topic assign from registry title match=2 keywords; 202
recent The Role of World Models in Shaping Autonomous Driving: A Comprehensive Survey 2025 cross-topic assign from registry title match=2 keywords; 202
watch Multimodal Fusion and Vision-Language Models: A Survey for Robot Vision 2025 cross-topic assign from registry title match=2 keywords; 202
watch Embodied AI with Foundation Models for Mobile Service Robots: A Systematic Review 2025 cross-topic assign from registry title match=2 keywords; 202
recent A Survey: Learning Embodied Intelligence from Physical Simulators and World Models 2025 Survey learning embodied intelligence from simulators and wo
watch Large VLM-based Vision-Language-Action Models for Robotic Manipulation: A Survey 2025 cross-topic assign from registry title match=2 keywords; 202
watch Safety in Embodied AI: A Survey of Risks, Attacks, and Defenses 2026 auto score=40
watch HumanScale: Egocentric Human Video Can Outperform Real-Robot Data for Embodied Pretraining 2026 cross-topic assign from registry title match=2 keywords; 202
watch A survey on integration of large language models with intelligent robots 2024 cross-topic assign from registry title match=2 keywords; 202
foundational A survey on large language model based autonomous agents 2024 auto refresh 2026-07-19 sources=openalex
foundational A Survey of Large Language Models 2026 auto refresh 2026-07-19 sources=openalex
watch Exploring the Unknown: A Survey on Embodied AI robotics in Uncharted Cluttered Environments 2025 auto score=40
recent A Survey of Convolutional Neural Networks: Analysis, Applications, and Prospects 2021 auto refresh 2026-07-19 sources=openalex
foundational A survey of methods for explaining black box models 2019 auto refresh 2026-07-19 sources=openalex
watch Bio-inspired cognitive robotics vs. embodied AI for socially acceptable, civilized robots 2026 auto score=40

来自 research/papers.yml 的正式选题配额:基础必读 3 · 近期重要 5 · 观察 5可学习条目需本地 PDF 或已有精读/中文笔记;无正文资产的选题标为 待获取 PDF,不作为学习路径必读链接。

基础必读(选题 3 · 可学习 2 · 待获取 PDF 1)

Section titled “基础必读(选题 3 · 可学习 2 · 待获取 PDF 1)”

近期重要(选题 5 · 可学习 4 · 待获取 PDF 1)

Section titled “近期重要(选题 5 · 可学习 4 · 待获取 PDF 1)”

观察清单(选题 8 · 可学习 8 · 待获取 PDF 0)

Section titled “观察清单(选题 8 · 可学习 8 · 待获取 PDF 0)”

成熟度 seed · 内容数 158 · 论文池 16