- 1、本文档共40页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
证券研究报告从Sora看多模态大模型发展——人工智能行业深度报告行业评级:看好2024年2月
摘要1、OpenAI发布视频生成模型Sora,视频生成能力实现大幅提升:?2024年2月16日,OpenAI发布视频生成模型Sora,能生成各种持续时间(甚至长达1分钟)、宽高比和分辨率的视频和图片。Sora模型基于DiffusionTransformer技术,采用视频压缩网络(Videocompressionnetwork)、潜空间patch(Spacetimelatentpatches)、直接在原始大小训练(Trainingondataatitsnativesize)以及重新标注技术(Re-captioningtechnique)技术,可以图像和视频作为输入,实现制作无缝循环视频、95%给静态图片添加动画、扩展视频时间线、视频到视频编辑、视频拼接等功能;2、国内外厂商相继发力布局多模态大模型领域,2024年文生视频有望进入商业化探索阶段:?目前除OpenAI之外,谷歌、字节跳动等厂商均已推出具备文生视频能力的多模态模型。基于对StableVideoDiffusion、谷歌W.A.L.T以及其它文生视频模型的分析,我们认为高质量数据以及底层通用大模型是文生视频能力的重要决定因素,随着Transformer架构的引入,以及3D建模领添加标题域模型的迭代,2024年文生视频有望在时间长度、画面清晰度、内容逼真程度等方面实现显著迭代,打开商业化应用空间。3、海外已有部分文生视频商业化案例,未来有望覆盖全球千亿级视频内容生成市场:?PrescientStrategicIntelligence数据显示,2025年全球数字视频内容市场规模有望达到3271.9亿美元,2021~2025年CAGR约为13.7%。目前海外已有Synthesia、Runway等厂商在文生视频领域形成成熟商业方案,应用于企业产品介绍、操作指南、客户服务等场景。我们认为以Sora为代表的多模态模型有望显著降低视频等数字内容的创作成本,市场空间广阔。4、建议关注标的:?(1)大模型厂商:科大讯飞、科技、微软、谷歌;(2)多模态应用厂商:万兴科技、虹软科技、焦点科技、Adobe;风险提示2?1、AI技术迭代不及预期的风险;2、AI商业化产品发布不及预期;3、政策不确定性带来的风险;4、下游市场不确定性带来的风险;
01多模态AI综述Partone3
01AI模型:必将从单模态走向多模态,实现复杂场景下的智能决策JinaAI光谱多模态AI多模态神经搜索单模态多模态跨模态数据:将多模态数据融合处理模型:更多融合人类脑神经机制,提升性能功能:实现智能决策、跨模态任务、运动控制、智能预测反馈……AI实现模态融合4来源:AWS,IBMResearch,浙商证券研究所
012024年,有望出现多模态领域类ChatGPT的爆款应用1234UnifiedModelswithEmergingCapabilitiesTask-Specific模型预训练模型GeneralPurposeAssistants???机器翻译文字填充情绪识别???BERTGPTGPT-2??GPT-3LLaMA??ChatGPTGPT-4语言文本领域???分类检索风格转换???MoCoCLIPDALLE??FlamingoPaLM-E视觉多模态领域特定目的的预训练模型通用多模态助手子类细分方向代表模型子类细分方向代表模型FromClosed-settoOpen-setModels、FromTask-SpecifictoGenericModels、FromStatictoPromptableModelsGLIP、Openseg、OpenSeeD、Unified-IO、X-Decoder、SAM、SEEM、SegGPT监督学习、BiT、ViTCLIP、ALIGNMoCo、DINO、MAESLIP、UniCL联合视觉模型(UnifiedVisionModels)基于语言-文本对的训练、仅有图像的自监督学习、多种方法的融合、多模态融合、区块和像素级别的预训练视觉理解(visualUnderstanding)演变Flamingo、ChatGPT、VicunaUNITER、CoCaGLIP、SAM图像到文字的生成模型、InstructionTuninginLLM、InstructionTuninginLMM基于LLM训练的多模态大模型(VisualGeneration)MultimodalGPT-4、LLaVA、MiniGPT-4文本-图像生成基础模型、SpatialControllable生成、基于文本的编辑模型、文本Promp
您可能关注的文档
- 可编辑培训课件-人工智能行业市场前景及投资研究报告:AI应用投资策略,新质生产力前景.pptx
- 可编辑培训课件-人工智能行业市场前景及投资研究报告:CEO生成式AI变革.pptx
- 可编辑培训课件-人工智能行业市场前景及投资研究报告:GenAI,英伟达Blackwell.pptx
- 可编辑培训课件-人工智能行业市场前景及投资研究报告:浪潮之巅,AI+产业链,技术底座.pptx
- 可编辑培训课件-人工智能行业市场前景及投资研究报告:美国AIGC普涨行情,新质生产力,AI赋能.pptx
- 可编辑培训课件人工智能行业市场前景及投资研究报告:人工智能大模型工业应用准确性,新质生产力,OpenAI,Sora模型.pptx
- 指夹式脉搏血氧仪产品技术要求chaosi.pdf
- 挖掘机的类型与型号.pdf
- 抗震支架施工方案.pdf
- 接地装置安装技术交底.pdf
文档评论(0)