高中信息技术中图版 (2019)必修1 数据与计算第3章 数据处理与应用3.2 数据采集与整理3.2.1 数据采集精品ppt课件
展开回顾 数据处理一般过程
数据获取的过程——数据采集数据采集指根据需求采用适当的方法和工具获取所需要的数据。
你知道自己现在的精确位置吗?思考:需要采集什么数据?
你知道自己现在位置的精确位置吗?思考:去哪儿找到当前经纬度?
你知道自己现在位置的精确位置吗?思考:APP怎么获取到经纬度数据?
活动内容:下载一个定位APP,确定自己的经纬度。例如:豆豆指南针暂停视频,填写任务单-任务1 中的表格
手机是怎样实现定位我们的精确位置的?找什么——明确数据需求——经纬度去哪儿找——确定数据来源——手机APP怎么找——选择采集方法——手机定位传感器
传感器是能检测、采集物理世界的各种信息,并将信息转换为电信号形式表示的数据采集设备。
课堂活动2:寻找传感器
我们生活中还有哪些通过传感器采集数据的物品呢?(任务单-任务2)
陀螺仪重力传感器加速度传感器指纹传感器
摄像头电磁传感器距离传感器光线传感器
暂停视频请阅读任务单中阅读材料,了解手机中的传感器的功能。
GPS传感器温度传感器麦克风气压传感器
课堂活动3:手机中的传感器
打开手机,观察思考,你手机中的游戏或应用app,思考:1、APP中有哪些功能?2、该功能运用了什么传感器?3、该传感器采集什么数据实现了该功能?试一试:你能举出3个例子吗?填在表格中(任务单-任务3)
传感器帮助手机实现了很多功能。 如果我想了解北京今天的天气情况来确定出行,手机能帮到我吗?
通过搜索引擎、天气类APP查找天气情况。
网络采集方法——搜索引擎
搜索引擎spider——通用爬虫
搜索引擎给出的数据检索结果非常多。怎样选择才能获取最有权威、最准确的数据呢?需求:分析北京市空气污染指数2015-2020年的变化情况这些空气质量数据在这2个网站都可以找到?如何选择?
手机APP里的天气数据从哪来来的?一般网站、手机APP中的天气信息,都是从气象网站爬取的聚焦爬虫
聚焦爬虫采集的数据过程
在中国天气网爬取本地最近的天气预报,将抓取的最近7天天气数据存入一个csv文件。
活动说明:1、下载 抓取天气.py 2、运行代码在程序所在目录会生成抓取到的数据文件 weather.csv默认城市是北京市。
抓取网页html——get_cntent函数
过滤html中的目标数据——get_data函数
将过滤后的数据保存为csv文件——write_data函数
直接运行程序,在指定的url抓取网页、过滤数据、保存数据提示:修改爬取的url,尝试抓取中国天气网上其他城市的7天天气情况。
函数是逻辑相对独立、功能相对单一的代码块。需要时直接调用,不必重写,提高代码可重用性。(参考教材P60 关于函数的定义)通常函数有0-N个参数,返回0-N个结果
可视化爬虫软件集搜客八爪鱼后羿采集器
课堂任务5:体验爬虫软件
这部国产科幻片反响如何?下载安装软件——后羿采集器在豆瓣电影找到流浪地球电影参考学习资料中的操作流程,实现采集100条影评数据
爬虫使用起来很方便可以快速从互联网上获取到大量数据是否我们可以随意爬取想要的数据呢?
遵守rbts.txt协议禁止: 恶意爬取 侵犯个人隐私 爬取信息用于不正当竞争 侵犯商业秘密
根据《中华人民共和国网络安全法》以及最新刑事司法解释规定“非法提供”和“非法获取”公民个人信息构成犯罪的都可以入刑。 网络爬虫功能强大便捷,但是我们使用时,一定要遵守相关法律法规。
网络采集方法:调查问卷
网上有的数据,我们可以通过搜索引擎查找、爬虫爬取。如果网上没有的数据呢?例如:你所在学校同学们的课外时间分配情况,课外娱乐时长和课外学业负担如何?这种数据我们可以通过调查问卷形式采集。
在线调查问卷工具问卷星、问卷网、腾讯问卷、问卷小程序等。
你身边的高中生课余时间是怎样规划安排的?学业负担重吗?都有哪些娱乐?请参考资源包关于在线调查问卷的说明,设计一个在线调查,了解身边同学课余时间安排,可参考下表,也可自行规划调查内容。
高中信息技术中图版 (2019)必修1 数据与计算3.2.1 数据采集获奖ppt课件: 这是一份高中信息技术中图版 (2019)必修1 数据与计算3.2.1 数据采集获奖ppt课件,共34页。PPT课件主要包含了21数据采集,明确数据需求,确定数据来源,选择采集方法,实施数据采集,22数据整理,23数据安全,数据安全的威胁,数据保护的方法,练习提升等内容,欢迎下载使用。
高中信息技术第3章 数据处理与应用3.2 数据采集与整理3.2.2 数据整理完美版ppt课件: 这是一份高中信息技术第3章 数据处理与应用3.2 数据采集与整理3.2.2 数据整理完美版ppt课件,文件包含数据整理第二十三课时-课件pptx、数据整理第二十三课时-教学设计doc、数据整理第二十三课时-课后练习docx、数据整理第二十三课时-课堂任务单docx等4份课件配套教学资源,其中PPT共45页, 欢迎下载使用。
高中信息技术中图版 (2019)必修1 数据与计算3.3.1 数据分析优秀ppt课件: 这是一份高中信息技术中图版 (2019)必修1 数据与计算3.3.1 数据分析优秀ppt课件,文件包含数据分析第二十四课时-数据分析pptx、数据分析第二十四课时-任务单docx、数据分析第二十四课时-教学设计doc、数据分析第二十四课时-课后练习docx等4份课件配套教学资源,其中PPT共39页, 欢迎下载使用。