- 1
- 0
- 约2千字
- 约 19页
- 2026-02-13 发布于江苏
- 举报
第18课数据分析与处理让数据产生价值第四单元简易物联系统实践
学习目标学习目标本课将关注以下问题了解常见的数据处理工具,会在物联网服务平台中查看和常见的数据处理工具有哪些?下载数据了解物联系统中处理数据的方法,利用程序处理数据有什么优势?能够利用程序处理简单的数据tths数据是新时代的石油otreertponlereaunningmitetothepecnghotandtrmstatiotoenthacodingsoms
数据处理工具的演进现代工具演进电子计算机早期工具WPS表格等电子表格软件通用性和自动化FineBI、FineBI、Hadoop专用软件数据分析与编程工具处理数据图形处理工具进化,效率飞跃程序执行模式
电子计算机的革命通用性不同应用场景,从文字处理到复杂模拟设计自动化存储程序、程序执行模式,无需人工干预育医疗娱多领域影响改变商业模式革新教学方式创造全新体验提升诊疗水平计算机改变了数据处理的一切
常用数据处理工具电子表格软件专业分析软件编程工具WPS表格、ExcelPython编程语言FineBI商业智能数据编辑pandas大数据直观数据数据处理库nvpHadoop分布式处理的据编辑生成生成快速生成高级分析科学复杂数据计算库数据分析图表图未选择合适的工具,事半功倍
学习活动你使用过哪些数据处理工具?处理过什么数据?分享你的数据处理经验
Python数据处理库安装第一驿:安装pandas库pipinstallpandas第二驿:安装numpy库pipinstallnumpy工具准备好了,开始处理数据吧
从物联网服务平台获取数据获取数据方式一:数据文件下载方式二:API调用通过API自动获取数据登录在线MQTT服务务自动化进入主题管理页面无需手动操作下载(查看详情并下载数据文件API调用代码示例API调用代码示例点击下载选择合适的方式获取数据
学习活动2:体验数据获取方式一:电子表格处理方式二:API编程获下载数据件填???名密码主题的参数进行程序自动获取数据的代用电子表格软件打开Excel数据处理分析程序处理数据的处理图动手试试,体验数据获取的乐趣
数据异常情况异常①数据缺失②数据重复数据格式错误复制单位不一致,如身高数据未记录数据记录多次身高单位的统一、处理填充前后数据平均值删除删除完全重复数据数据类型作为一致如补全中文数字与阿拉的数字混用处理处理空缺数据互有缺失时缺全修复(统一数据格式)数据清洗,保证数据质量
处理数据的一般方法第一步:明确目标明确数据处理的目标和思路通过对环境数据分析了解环境情况第二步:选择工具使用Python的pandas、numpy等模块效率提高数据处理效率第三步:整理数据第三步:准备转换为DataFrame类型数据目标明确,方法得当为后续处理做好准备
学习活动3:数据分析实践步骤1最终值…转换为DataFrame类型60.9%36.4%步骤2排序代码示例10.2%4.3%步骤3统动手实践,掌握数据分析方法
常用数据分析方法①统计分析法对比分析法分组分析法求最大值、最小值、平均值对比不同数据,分析异同根据某个条件分成若干组例如分析物联花盆系统的温度数据例如对比不同区域的温度数据例如根据设备ID分组从整体上了解数据特征发现数据之间的差异再进行统计和对比分析选择合适的方法,深入挖掘数据价值
光照强度与光照时间分析问题方法数据筛选筛选代码示例,如df[df[valueMsg]=1000]阳光对植物的生不同位置每天能接筛选光照强度大于受的光照时间不同某个阅值的数据长有直接影响结果确定不同位置的光照时间段光照强度=1000的时间点多条件筛选,精准提取数据a
土壤湿度分析问题方法数据配组不同ID数据度,平均价值根据设备ID对数据进行组需要了解各花盘的湿度情况groupby(clientiffmean5计算每组土壤湿度的设备ID平均值平均位壤湿度,平均计算mean()mean()±结果都被所有花盘的比较不同花盘的结果平均ID数湿组平均值计算土壤湿度平均值的湿度差异.mean()比较不同的花盘盘的湿度差异
拓展与提升任务一:工具对比电子表软件数据析处理对比任务二:历史探究书籍海王星数据预测发现书、互联网查询资料、思考+数据分析的科学研发中的作重工作拓展视野,深入学习
数据分析在科学研究中的作用提高效率和质量加速科学研究效率提升研究质量准确性提供启示和思路为科学家提供启示开拓新研究思路应用广泛深入天文学应用生命科学应用工程技术应用数据分析:科学研究的加速器
课程总结数据获取数据采集采集算盘→电子计算机物联网平台获取数据数据清洗数据代码电子表格软件代码采集处理缺失/重复/格式错误分析编程分析编程工具统计分析/对比分析/分组分析掌握工具,掌握方法,让数据产生价值
谢谢数据驱动未来
您可能关注的文档
- 第1节+生物体的结构层次+第2课时(教学课件)科学新教材浙教版七年级下册.pptx
- 第1节+天气与气候+第1课时+(教学课件)科学新教材浙教版八年级下册.pptx
- 第1节+天气与气候+第2课时+(教学课件)科学新教材浙教版八年级下册.pptx
- 第1节+天气与气候+第3课时+(教学课件)科学新教材浙教版八年级下册.pptx
- 第4课+物物相连有价值+课件+2025-2026学年人教版初中信息科技八年级全一册.pptx
- 第6课《藏书票》课件-2025-2026学年人美版初中美术八年级下册.pptx
- 第16课+模块功能先划分课件2025-2026学年人教版八年级信息科技全一册.pptx
- 第17课+物联网数据采集课件2025-2026学年人教版八年级信息科技全一册.pptx
- 第19课+数据呈现可视化课件2025-2026学年人教版八年级信息科技全一册.pptx
- 第20课+反馈控制有算法课件2025-2026学年人教版八年级信息科技全一册.pptx
- 2026年神经节苷脂治疗早产儿脑白质损伤的临床疗效分析.docx
- 2026年铁与维生素C协同吸收机制分析.docx
- 2026年度西安科技大学高新学院单招《数学》综合提升测试卷带答案详解(基础题).docx
- 2026年土地整治与生态补偿机制的实施效果分析.docx
- 2026年神经内窥镜治疗阻塞性脑积水48例报告.docx
- 2026年体检辨色力报告.docx
- 2026年社区治理的社会实践报告.docx
- 2026年深圳国际化城市建设指标体系研究报告doc.docx
- 2026年深圳国有企业改革经验探讨与案例分析 (1).docx
- 2026年神经肌电图在糖尿病周围神经病变患者中的应用价值及机制分析.docx
最近下载
- 5-6年级健康课件《睡眠、运动与健康》.ppt VIP
- 2、武汉市海绵城市建设设计指南x标准规范.doc VIP
- 八年级语文下册期末复习专练 专题12 作文(期末热点预测与范文)(解释版)2024-2025学年(统编版广东专用).docx VIP
- 2025年金融风险管理师信用组合模型的参数估计与校准技术专题试卷及解析.pdf VIP
- 《建筑防水材料介绍》课件.ppt VIP
- 人教版2025-2026学年三年级下册道德与法治教学工作计划(及进度表).docx
- 2025年宁夏葡萄酒与防沙治沙职业技术学院教师招聘考试笔试备考试题.docx VIP
- DG∕TJ 08-87-2016 道路、排水管道成品与半成品施工及验收规程.docx VIP
- 最新人教版初中八年级下册体育教案全套.doc VIP
- 智能一体化污水处理系统.pptx VIP
原创力文档

文档评论(0)