计算机行业大模型专题报告：多模态引领新篇章.pdf
- 上传者：大三班
- 时间：2023/12/18
- 浏览次数：225
- 下载次数：23
- 0人点赞
- 举报
计算机行业大模型专题报告：多模态引领新篇章。大模型概述：具备强大生成能力，训练趋于标准化。通用大模型追求高泛化能 力，可以高质量完成自然语言理解和生成任务。大模型训练流程趋于标准化，大 致可分为通用能力培养和行业能力提升两大阶段，其中通用能力培养阶段主要包 括无监督预训练、价值观对齐等核心步骤，行业能力提升阶段主要包括监督微调、 行业数据预训练、模型偏好对齐等步骤。当前海外通用大模型主要有 OpenAI 的 GPT-4、谷歌的 Gemini、Anthropic 的 Claude 2、Meta 的 Llama 2 等。
大模型技术：形成三大技术路线，GPT 路线得到认可。Transformer 引入自注 意力机制，彻底解决了远距离信息丢失和并行计算效率的问题。基于底层 Transformer，模型形成编码器、解码器、编码器-解码器三大主流技术路线， OpenAI 的 GPT 模型采用解码器路线，得到广泛关注和认可，最新的 GPT-4 模 型在环境科学、历史、生物等高文本量的学科中取得前 10%的成绩，引领行业 发展。但当前大模型和通用人工智能在通用性、认知能力、工具能力、多模态协 同等方面仍有较大差距，技术具备较大发展潜力。
多模态：视觉能力为核心，能力升级带动应用落地。多模态主要包括视觉和语 音，其中视觉能力对模型感知能力和应用开发潜力提升具有重要价值，成为当前 多模态大模型发展的核心方向。多模态能力打开模型学习空间，突破文本对模型 训练的限制，在高质量文本数据规模年化增速不及 5%的情况下，保障模型规模 高速增长。语音能力方面，大模型可以利用 STT+TTS+GPT 模式快速实现语音 对话，整体技术成熟度较高，门槛相对较低。视觉能力方面，视觉理解领域主要 形成模块化和一体化两大路线，其中模块化设计灵活度更高并具备更高性价比， 而一体化（原生）架构下模型多模态融合能力更突出。视觉生成领域，主要利用 扩散模型实现图片和视频生成，底层技术来看，图像和视频生成技术具有一致性。 大模型视觉理解和生成能力提升，有望重塑部分行业，带动全新应用落地。其他 模态上，代码大模型快速发展，国内外厂商加速布局，国内厂商位于行业第一梯 队。短期来看，海外高质量源生多模态大模型技术和商业化进程高速推进，国产 多模态大模型有望加速追赶，推动行业保持高速发展。
- 相关标签
- 相关专题
- 全部热门
- 本年热门
- 本季热门
- 华为鲲鹏产业体系研究深度报告：鲲鹏展翅，挥下千亿市场.pdf 174 6积分
- 国产计算机基础软硬件行业深度报告：重构中国IT产业生态.pdf 134 6积分
- 计算机行业研究及2020年投资策略（103页）.pdf 112 6积分
- 计算机行业AIGC专题报告：ChatGPT研究框架.pdf 104 6积分
- 计算机行业专题报告：多模态大模型技术演进及研究框架.pdf 99 5积分
- 国产操作系统产业分析报告：国魂所系，任重道远.pdf 98 4积分
- 网络安全服务行业研究报告：网络安全行业的制高点 94 7积分
- 计算机行业深度专题：信创产业发展研究.pdf 94 8积分
- 计算机行业深度分析：国产软件大阅兵.pdf 91 3积分
- 计算机操作系统的历史演进和未来趋势.pdf 77 5积分
- 计算机行业算力租赁专题研究报告：大模型发展的关键引擎，看好AI算力高景气持续.pdf 56 4积分
- 计算机行业算力网络深度报告：全国一体化算力网络建设加速.pdf 54 6积分
- 计算机行业专题报告：信创框架报告.pdf 37 5积分
- 计算机行业算力服务专题报告：从“东数西算”到“东推西训”.pdf 31 4积分
- 计算机行业算力深度报告：产业链全梳理.pdf 31 4积分
- 计算机行业专题报告：华为算力进展不断.pdf 29 3积分
- 计算机行业2023下半年AI算力产业链投资策略：始于光器件，洞察大AI算力架构.pdf 28 4积分
- 计算机行业专题报告：再次强调教育是AI最佳落地场景之一.pdf 26 2积分
- 计算机行业动态：海外模型应用复盘，国内AI奇点已至.pdf 25 8积分
- 计算机行业大模型专题报告：多模态引领新篇章.pdf 23 5积分
- 计算机行业算力深度报告：产业链全梳理.pdf 31 4积分
- 计算机行业深度报告：基于2023年福布斯AI，50应用流量的跟踪研究，海外AI应用发展行至何处？.pdf 22 4积分
- 计算机行业专题报告：AI浪潮之下，液冷投资机会全梳理.pdf 20 3积分
- 计算机行业分析报告：国产AI算力行业报告，浪潮汹涌，势不可挡.pdf 19 2积分
- 计算机软件行业专题研究：Sora开启创意领域iPhone时刻，关注全球文生图视频投资机会.pdf 17 2积分
- 计算机行业产业复盘与未来推演：AI应用，追本溯源之后，我们相信什么？.pdf 17 5积分
- 计算机行业专题报告：AI浪潮，海外日新月异，国内奋力追赶.pdf 13 2积分
- 2024年计算机行业投资策略：冬渐去、春将来，待看，AI 开花，数据挂果，可控链潮起.pdf 11 4积分
- 计算机行业专题报告：万物静息鸿蒙里，开源放量百花齐放开.pdf 11 5积分
- 计算机行业专题报告：昇腾万里，鲲鹏展翅，华为算力乘风起.pdf 10 3积分
