人大社课件数据服务实践 课件任务3.4 文本数据清洗.pptxVIP

项目三文本数据清洗主讲教师:段晓亮Textdatacleaning

国内外各类突发事件的频发，反映在互联网上则是各类新闻、社交网站关于突发事件的大量讨论信息。通过对突发事件文本信息数据进行数据处理与清洗，可以构建突发事件领域语料库，从而训练针对突发事件的领域本体模型，并进行推理应用。任务导入

任务知识目标(2)了解自然语言处理的概念、技术应用常见任务；(1)了解文本数据集的应用任务；(4)掌握文本数据集的处理方法；(3)了解事件的概念、事件抽取任务；(5)了解语料的数据处理需求和处理流程。

任务技能目标(2)能够总结文本数据集处理中出现的问题，及时记录与反馈，积极寻求解决方案；(1)掌握文本数据集的处理流程，能根据应用任务需求合理规划处理流程，高质量完成文本数据集的处理；(3)通过对事件抽取任务的学习，能迁移至其他自然语言处理任务，为其他任务提供数据处理解决方案；(4)掌握Python编程方法，并能通过编写程序解决实际文本数据集的处理问题。

任务思政目标2.树立对待生活和工作精益求精的优良品质以及探索未知、追求真理的责任感和使命感。1.树立团结合作的职业品质和集体主义精神，树立正确的科学思维方法和科学伦理观。

CONTENTS目录文本数据集的应用任务01Applicationtasksoftextdatasets语料的数据处理需求02Dataprocessingre