清华大学版（2024）（青海）八下信息科技 第3单元 第3课 文本与图像的多模态模型 课件.pptxVIP

第三单元机器能创作第3课时文本与图像的多模态模型

知识探究主要内容/01/02/03习题测试小结回顾/04布置作业

01准备过程02整体结构03重点说明04名词解释知识探究1.项目子问题或任务引入————我们生活在一个由多种信息构成的世界中，如何让模型生成不同类型的数据？

01准备过程02整体结构03重点说明04名词解释知识探究2.探究内容与要求（1）方法引领：遵循“基础知识→案例分析→综合应用→......”认知规律（2）主要内容①什么是多模态问题？--概念②如何根据文本提示生成图像？--多模态模型的原理③如何优化提示语创作生成符合需求的内容？--优化提示词的方法

01准备过程02整体结构03重点说明04名词解释知识探究3.知识习得（1）自主阅读：阅读书本P74-82（2）知识梳理：①当研究的问题需要同时处理___________的信息时，我们将其称为多模态问题。②从文本和图像中提取特征，然后将这些特征_______到一个共同的_______中，建立__________之间的语义联系，从而实现文本和图像的多模态数据的交互和生成。③尽量避免提出涉及______判断的问题，因为模型不具备____________，同时务必确保问题及潜在回答______________。

01准备过程02整体结构03重点说明04名词解释知识探究4.核心素养培育（1）学会解释：①什么是多模态问题？有哪些工具可以解决多模态问题？②如何根据文本生成图像？（2）学会分析：①为什么生成模型每次生成的图像不一样？②文本和图像是如何实现对应关系的？（3）学会求证：高质量提示语能够提升模型生成效果（4）学会结合具体场景和问题选择合适的工具及解决方案：①当前任务需要生成哪些类型的数据？②可以选择哪些合适的工具？③如何让模型/工具生成符合要求的内容？④在使用多模态工具时，有哪些需要注意和避免的问题？

01准备过程02整体结构03重点说明04名词解释习题测试1.人工智能多模态通常涉及多种数据类型或感知模式的融合。当前，跨模态生成工具还不能生成以下哪种形式的内容？A.文本B.图像C.视频D.触感2.在和大语言模型进行交互时，我们需要注意指令清晰且明确。请在以下选项中选出清晰且明确的指令：A.用一种不存在的语言翻译这首诗。B.基于已经取消的比赛结果预测今年世界杯冠军。C.生成一些内容。D.请根据2023年奥斯卡最佳影片提名名单，为每一部电影提供一段简短的剧情概述，并附上导演的名字。3.关于图像生成，优质的提示词应该包含以下哪些内容？（多选题）A.主体对象B.主体对象的细节描述C.艺术风格D.画面空间布局

01准备过程02整体结构03重点说明04名词解释小结回顾请同学按照下列提示进行总结回顾：1.学到了哪些知识与技能？2.提升了哪些方面的能力？3.生成了怎样的观点？

01准备过程02整体结构03重点说明04名词解释布置作业你目前正在使用一个大语言模型助手和一个文生图工具来进行文案和图像的生成。你的目标是分别生成文本文案和图像图画两种模态的生成类作品来宣传确定的主题。请简述，使用工具编写提示语的过程需要注意哪些问题，生成两类作品的过程中，你会建议如何优化提示语来得到期望的作品。