生成式人工智能服务技术特点与应用研究.pdfVIP

生成式人工智能服务技术特点与应用研究

陶彧，唐珂，陈玉峰，陈金鹰

成都理工大学，四川成都610059

摘要：对国外生成式人工智能服务技术发展现状进行研究基础上，分析了国外生成式人工智能服务技术的工作

原理、硬件基础、训练基础，给出了国外生成式人工智能服务技术在咨询领域、教学领域、办公领域、翻译领域、

生活领域、项目设计领域的应用场景，指出国外生成式人工智能服务技术使用中存在的真实性与可靠性问题、网

站输入限制问题以及收费问题。结果表明，合理利用生成式人工智能服务技术可以提高处理工作和生活中相关问

题的效率，也可为我国自己的生成式人工智能服务技术的提高提供借鉴。

关键词：生成式人工智能；ChatGPT；GPT-4；AI

中图分类号：TP181文献标识码：A文章编号：1672-0164（2024）02-0108-04

Pre-trainedTransformer，生成式预训练大模型，或生成预

1引言

训练转换器）的结合，因此ChatGPT可看作为以GPT为基

国外生成式人工智能服务技术的杰出代表沿于2015年础的聊天机器人。ChatGPT采用了基于GPT-3.5架构的大型

由山姆·阿尔特曼等投资成立OpenAI非营利研发机构，该语言模型，是Google的Transformer架构、自监督学习、微

机构自2018年6月起先后发布了GPT-1、GPT-2、GPT-3、调、以强化学习方式依据人类反馈优化语言模型(Reinforce⁃

GPT-3.5，此后于2023年3月14日发布了新一代AI语言大mentLearningfromHumanFeedback,RLHF)、人工智能（Ar⁃

模型GPT-4。由于基于GPT-3.5架构的ChatGPT采用了生成tificialIntelligence,AI）大模型等多种深度学习技术叠加在

式人工智能服务技术，其特有模仿人类学习和解答问题的[2]

一起的产物。Transformer架构是一种深度神经网络，它利

[1]

能力，上线两个月用户就达1亿人次。在此背景下，2023用自注意力机制处理输入数据，这在文本摘要、语言翻译、

年7月12日，马斯克宣布成立xAI人工智能公司，将深入问题问答等自然语言处理任务领域中都有应用。AI大模型

研究人工智能中的“深度学习的数学”，探索AI的“万物是在对大规模宽泛的数据进行训练后，将结果存储到相关

理论”。2023年07月14日，国家网信办联合国家发改委、参数中，以实现对下游任务的微调，适应一系列下游任务

教育部、科技部、工信部、公安部、广电总局公布《生成的模型。

式人工智能服务管理暂行办法》，提出鼓励生成式人工智能2.1ChatGPT的工作原理

算法、框架、芯片及配套软件平台等基础技术的自主创新，作为一种生成式人工智能服务产品，ChatGPT的原理

鼓励采用安全可信的芯片、软件、工具、算力和数据资源。是采用自回归生成的关联统计方法，基于Transformer的算

在生成式人工智能服务技术迅速发展的时代，正确分析、法框架，先采用无监督学习预训练出一个基础通用模型，

学习和了解国外以ChatGPT为典型代表的生成式人工智能再通过监督学习进行微调适配各种任务，最后采用从人类

服务技术的特点，不仅有助于推动我国自己的生成式人工反馈中强化学习的强化学习方法，使所知道的模型能像人

智能服务技术的发展，也有助于在目前我国尚无该技术产类一样进行对话交流。ChatGPT采用的这种生成式AI自然

品的情况下，利用国外ChatGPT产品为人们节省工作和学语言大模型，其特点是依据输入的单词来预测下一个最有