CN119646168A 一种基于改进微调、组合检索RAG和Qwen2.5-72B的政务知识实时对话方法 （四川九锐锋智能科技有限公司）.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN119646168A

(43)申请公布日2025.03.18

(21)申请号202510186266.8

(22)申请日2025.02.20

(71)申请人四川九锐锋智能科技有限公司

地址610041四川省成都市成都高新区南

华路1500号4栋2楼2号

(72)发明人陈安志徐梦阳李贵俊

(51)Int.Cl.

G06F16/3329(2025.01)

G06F16/335(2019.01)

G06N5/04(2023.01)

G06N3/0455(2023.01)

G06N3/082(2023.01)

权利要求书3页说明书7页附图4页

(54)发明名称

一种基于改进微调、组合检索RAG和Qwen2.5-72B的政务知识实时对话方法

(57)摘要

CN119646168A本发明涉及一种基于改进微调、组合检索RAG和Qwen2.5_72B的政务知识实时对话方法，包括：采集政务对话数据并标注，形成监督数据集，即训练集；利用监督数据集对Qwen2.5_72B大模型进行微调，使微调后的Qwen2.5_72B大模型能够更准确地进行政务对话回答；爬取政务相关知识，构建知识问答向量数据保存于LangChain的向量存储器；微调后的Qw