AI大模型技术演进:从LLM到VLM再到VLA的产业映射
- 来源:东吴证券
- 发布时间:2026/08/03
- 浏览次数:8
- 举报
汽车行业深度报告:AI系列深度09期,从LLM到VLM再到VLA意味着什么?.pdf
AI大模型正从数字世界向物理世界延伸,LLM、VLM、VLA三类模型构成逐层扩展的技术脉络。东吴证券这份深度报告系统梳理了从语言基础模型到视觉-语言-动作模型的演进逻辑,揭示物理AI将成为增量更大的发展方向。研究目的与核心框架报告旨在厘清LLM、VLM、VLA的技术继承关系与本质差异,为汽车产业及具身智能投资提供分析框架。研究将三类模型置于同一技术脉络中考察:LLM以文本为输入输出,VLM在语言底座上接入视觉模态,VLA进一步将动作作为输出模态进入物理世界。核心机制与数据约束三者核心机制呈递进关系:LLM依托Transformer自注意力机制进行自回归预训练;VLM增加视觉编码器与模态对齐模块...
技术脉络:三类模型的继承与分化
LLM、VLM、VLA可理解为同一技术脉络上逐层扩展模态和输出能力的三类大模型。LLM以文本为输入输出,核心解决语言理解、生成和推理;VLM在语言底座上加入视觉理解,使图像和文字在同一语义空间交互;VLA进一步把动作作为输出模态,使模型能够驱动机器人或车辆在物理世界中行动。三者存在继承关系,但不能简单归结为同一种next-token机制。
从概念脉络看,LLM由Transformer、GPT等奠定,核心是以海量文本和自监督训练形成语言基础模型;VLM由CLIP、Flamingo等推动,通过图文对齐、视觉编码器和模态投影把视觉信息接入语言模型;VLA由Google DeepMind在RT-2中明确命名,核心是把视觉、语言与动作统一到策略模型中。
核心机制:数据难度与表征方式逐级抬升
从数据和表征看,三者难度逐级抬升。LLM训练依赖文本语料,VLM增加图文对和视觉编码,VLA则需要机器人示教、遥操作轨迹、动作反馈和真实环境数据。动作不是普通输入模态,而是会改变物理世界的控制输出;因此,VLA既可把动作离散化为token自回归生成,也可用扩散策略或流匹配生成连续动作轨迹。
VLA的动作建模可拆为三类机制。第一类是离散动作token,将机械臂或机器人动作离散化为序列,并用自回归方式逐步预测,RT-2和OpenVLA属于该路线。第二类是连续动作生成,通过扩散策略或流匹配直接生成连续动作轨迹,更适合高频、精细控制,π0采用流匹配实现约50Hz动作输出。第三类是双系统分工,由高层VLM负责场景理解和任务意图生成,低层动作模型负责实时控制,NVIDIA GR00T N1和智元GO-1体现了相关探索。
应用边界:从数字世界到物理世界的跨越
从应用边界看,LLM主要处理知识、代码、对话和软件任务;VLM把能力扩展到图像理解、图文问答、视觉检索和多模态交互;VLA则进入机器人、自动驾驶和具身执行,需要处理实时性、安全性和物理反馈。NVIDIA的慢思考VLM加快思考动作模型、π0的连续动作生成、RT-2的动作token化,均体现VLA内部路线仍在分化。
数字AI底座模型发展路径已逐渐清晰、价值在于确定性,但其难以实现物理世界的建模闭环;物理AI将成为物理世界的AI解决方案,从而在AI的当前发展阶段成为增量更大的方向,智能驾驶作为最先跑通闭环的代表场景,应重点关注。
产业映射:海外与国内厂商的分层布局
产业映射上,海外OpenAI、Google、Meta、Anthropic等主导LLM/VLM,Google、Physical Intelligence、NVIDIA、Figure等布局VLA和机器人;国内DeepSeek、阿里、字节、百度、腾讯、智谱、月之暗面、MiniMax等布局LLM/VLM,智元、银河通用等聚焦VLA与机器人本体。后续竞争核心将从模型能力延伸到数据、硬件、动作控制与场景闭环。
国内格局可概括为三类:基座型,DeepSeek、阿里、字节、百度、腾讯、智谱、月之暗面、MiniMax、上海人工智能实验室/商汤,主攻LLM/VLM;具身型,智元、银河通用等,主攻VLA与机器人本体;跨界型,字节、阿里、腾讯等,以基座能力下沉具身或通过投资卡位。
编辑:流星雨- 相关标签
- 相关专题
- 热门文档
- 热门文章
- 本年热门
- 本季热门
- 本月热门
- 1 关于2025年国民经济和社会发展计划执行情况与2026年国民经济和社会发展计划草案的报告——2026年3月5日在第十四届全国人民.pdf
- 2 中国网络视听协会:中国网络视听发展研究报告(2026) .pdf
- 3 市场监管局:2025直播电商行业发展白皮书.pdf
- 4 房地产行业第8_9周周报(2026年2月14日_2026年2月27日):26年春节新房成交量低于23_25年,二手房成交量高于23_25年;上海优化限购、公积金和房产税政策.pdf
- 5 中国新就业形态研究中心-2025中国蓝领群体就业研究报告.pdf
- 6 中国股票策略:中国最佳商业模式研究(第二版).pdf
- 7 互联网行业:第57次中国互联网络发展状况统计报告.pdf
- 8 2026年政府工作报告.pdf
- 9 中国2026年展望:探索新动能.pdf
- 10 2025中国新就业形态报告.pdf
- 1 中国新就业形态研究中心-2025中国蓝领群体就业研究报告.pdf
- 2 腾讯研究院-从超级个体到超级团队:AI时代组织变革的涌现路径.pdf
- 3 腾讯研究院:2026丰饶之后:AI Coding 观察报告.pdf
- 4 中国临床肿瘤学会指南工作委员会-医疗行业中国临床肿瘤学会(CSCO)非小细胞肺癌诊疗指南2026.pdf
- 5 兰花科创-600123-优质无烟煤龙头,煤化一体静待周期反转与技改红利释放.pdf
- 6 机械设备行业:拥抱科技,重视AI为主线的设备及硬件等投资机会.pdf
- 7 TGV玻璃基板行业动态报告:玻璃基板崛起,赋能先进封装.pdf
- 8 电力设备行业跟踪周报:锂电储能业绩亮眼、拓展AI第二增长曲线.pdf
- 9 玻璃基封装行业专题:玻璃基板有望成为先进封装新平台.pdf
- 10 投资策略-激光通信行业深度:行业现状、终端结构、市场规模及相关公司深度梳理.pdf
- 1 储能与电力设备行业2026年中期策略报告:全球需求共振,算电协同启新.pdf
- 2 纺服行业周报:运动品牌Q2流水放缓,安踏、361度表现韧性强.pdf
- 3 行业景气度跟踪报告(2026年7月):景气,右侧AI景气持续,左侧细分方向亦值得关注.pdf
- 4 易观分析-具身智能行业:2026年中国具身智能重点行业应用与场景价值分析报告.pdf
- 5 中国汽车工业协会-汽车行业:2025中国汽车后市场年度发展报告.pdf
- 6 产业深度:生根与重构——2026年全球人工智能技术、政策、产业与投融资趋势全景洞察报告.pdf
- 7 硕远咨询-银发旅游行业:2026年银发旅游研究报告.pdf
- 8 能源电子行业月报:功率器件交期持续拉长,行业景气度稳步提升.pdf
- 9 AI医疗行业2026年6月月报:AI诊断与药研资本化提速,医疗智能体加速落地.pdf
- 10 千瓜数据-消费行业:2026年上半年热门行业数据简报.pdf
- 本年热门
- 本季热门
- 本月热门
- 1 2025年医药行业2026年度策略报告:创新药产业链景气度持续提升
- 2 2026年大族激光公司研究报告:PCB消费电子利好有望助力2025_27年盈利持续增长
- 3 2026年春季港股及海外中资股投资策略:分化与回归
- 4 2026年航空行业夏航季民航时刻计划详解:稳中求进,国内控总量、国际促复苏
- 5 2026年春季A股投资策略:为第二阶段上涨蓄力,时代资产不退场
- 6 2026年春季北交所化工新材料行业投资策略:周期迎拐点,成长正当时
- 7 2026年中银香港公司研究报告:高股息护航,财富与出海共促成长
- 8 2026年春季海外宏观展望:结构性“滞胀”
- 9 2026年固收增厚产品系列报告之一:可转债基金的再定位与再解析
- 10 2026年春季转债投资策略:主线清晰,冲击已过,仓位致胜
- 1 2026年6月人形机器人行业月报:资本化提速与量产渐近
- 2 2026年6月A股市场研判:AI引领向上,聚焦算力与景气延伸
- 3 2026 AI重塑影视产业:漫剧爆发与产业链重构深度解析
- 4 2026年全球人工智能技术、政策、产业与投融资趋势全景洞察
- 5 氧化锆断供与HBM瓶颈:全球产业趋势跟踪周报(2026年6月29日)
- 6 2026年7月A股量化择时:AI识图聚焦半导体与芯片赛道
- 7 2026 ASCO年会国产创新药双抗ADC临床数据梳理
- 8 A股2026年6月策略:景气强化与震荡上行配置建议
- 9 宁德时代发布钠电储能方案,7月中国电池排产环比增长
- 10 2026年中期医药生物行业投资策略:AI新药加速推进
