Python自然语言处理第十章机器学习与自然语言处理课前回顾分词以及停用词过滤读取数据模型训练与预测评估指标文本聚类实战:用K-means对豆瓣读书数据聚类0 4代码实现流程本章小结实现代码 数据源data.csv :实现代码 代码组织:- data_loader.py: 读取停用词列表- data_processing.py:数据清洗以及数据集转化- clustering.py:数据读取、聚类以及结果展示实现代码 clustering.py 数据格式转换DATA_DIR = data_loader.DATA_DIRstopwords = data_loader.get_stopwords(DATA_DIR)book_data = pd.read_csv(DATA_DIR + /data.csv)book_titles = book_data[title].tolist()book_content = book_data[content].tolist()norm_book_content = data_processing.norm_corpus(book_content, stopwords)feature_matrix, _, vectorizer = data_processing.convert_data(norm_book_content, [], CountVecto
您可能关注的文档
- Python自然语言处理 课件 电子03-2 -自然语言处理工具包NLTK.pptx
- Python自然语言处理 课件 电子03-3 -获取语料库.pptx
- Python自然语言处理 课件 电子03-4 -综合案例:走进红楼梦.pptx
- Python自然语言处理 课件 电子04-1 -中文分词.pptx
- Python自然语言处理 课件 电子04-2 -词性标注.pptx
- Python自然语言处理 课件 电子04-3 -命名实体类别.pptx
- Python自然语言处理 课件 电子05-1 -词向量算法.pptx
- Python自然语言处理 课件 电子05-2- 关键词提取技术概述.pptx
- Python自然语言处理 课件 电子05-3 -关键提取算法TF-IDF算法.pptx
- Python自然语言处理 课件 电子05-4- TextRank算法.pptx
- 计量规程规范 JJF 2476-2026腹膜透析机校准规范.pdf
- 《JJF 2465-2026天然气在线硫化氢气体检测仪校准规范》.pdf
- JJF 1111-2026调制度测量仪校准规范.pdf
- 《JJF 1111-2026调制度测量仪校准规范》.pdf
- 计量规程规范 JJF 2471-2026实时荧光定量聚合酶链反应核酸检测系统分析性能确认和验证技术规范.pdf
- JJF 2471-2026实时荧光定量聚合酶链反应核酸检测系统分析性能确认和验证技术规范.pdf
- 《JJF 2471-2026实时荧光定量聚合酶链反应核酸检测系统分析性能确认和验证技术规范》.pdf
- 《JJF 2470-2026食用油品质检测仪校准规范》.pdf
- JJF 2470-2026食用油品质检测仪校准规范.pdf
- 计量规程规范 JJF 2470-2026食用油品质检测仪校准规范.pdf
原创力文档

文档评论(0)