- 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
- 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 4、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 5、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
超越 MLOps
解析 LLMOps 的新范式
刘喆
个人简介
2010 年 百度大数据 SRE
2011 年 人民搜索 运维部总监
2013 年 AdMaster 大数据平台负责人
2021 年 白海科技 联合创始人兼技术负责人
2014 - 2019 年在 51CTO 、Qcon、Spark 峰会等作过几十次演讲
主要内容
• LLMOps 概述:概念、起源、与 MLOps 的异同
• 白海科技 LLMOps 实践分享
• 面向未来:LLMOps 的应用前景
LLMOps 概述:概念
• Ops for LLM
• MLOps
• 指导路线
标准化
自动化
智能化
LLMOps 概述:起源
• 2022 年 12 月 ChatGPT 出道
• 2023 年 2 月 LLaMa 参数泄漏
从“造模型”到“训模型”
• InstructGPT RLHF方法论
GPT发展历程 RLHF技术
LLMOps 概述:与MLOps 的异同
步骤 MLOps LLMOps
EDA 数字、分布、画图 文本
Data Prep 转格式、清洗 (数字) 转格式、清洗 (文本、图片)
Develop 设计模型、可视化、写代码 多数情况选模型
文本图片居多、环境复杂、
(Re-)Train 数字运算居多、环境简单、单机就够
依赖复杂、GPU、多节点
标准太多,不好评估,测试
Review 标准很明确,很容易量化,测试周期短
周期长
硬件复杂,软件环境更复杂、
Deploy 软件标准化、硬件需求简单,容易标准化
较难标准化
Inference 快 慢
Monitor 故障点少
您可能关注的文档
- 云计算进入AI原生时代+0903.pdf
- 邓艳琴(Clara)-中国的第+15+年.pdf
- 步绍鹏-利用大模型打造更聪明的猴子下一代跨平台软件测试基础设施+Hydra+Lab.pdf
- 赖文昌-火山引擎应用交付在多环境、多云场景中的探索和实践.pdf
- 吴英骏-实时分析与流处理:合作共赢还是竞争对手?.pdf
- 梁宇鹏-大模型时代创业:给高瞻远瞩的你三个建议.pdf
- 王新栋-如何从架构体系视角进行系统性能优化.pdf
- 伍旭飞-大模型时代下向量数据库的创新与挑战.pdf
- 申广宇-线下多终端场景前端技术探索实践pptx.pdf
- 薛文满-字节跳动日志智能化的探索与实践.pdf
- 潘征-用+AI+重构+——+大模型与低代码的“合体变身”.pdf
- 何良-lyComponent+Model+构建一个跨语言的新生态.pdf
- 周路-SOFA研发测试工具链智能化带来质变.pdf
- 邓楠-MatrixOne在SaaS企服领域的应用场景解读-改.pdf
- 续日-Excelize+开源基础库助力企业信息系统协同创新.pdf
- 胡涛-DevChat从实践中来到实践中去的+GPT+智能编程工具设计.pdf
- 张鹏-ChatGLM:认知大模型与应用初探.pdf
- 成超-B站前沿多媒体技术保障用户体验与创作权益.pdf
- 刘轩-BES在大规模向量数据库场景的探索和实践.pdf
- 从0到1精益创新+AIGC产品应用及商业化落地实践.pdf
原创力文档


文档评论(0)