您好,欢迎来到陕西STEM教育网!
竞赛登录 活动登录

《大数据-小爬虫大学问》

发布时间:2019-10-18     来源 : 未知


简介:

根据谷歌官方公布的统计,目前主流搜索引擎索引的网页数量已超过万亿级别,数量如此庞大令人惊叹。可曾想过,每当我们在百度或者谷歌上输入了一个关键字,搜索引擎为什么能够在短短几秒内将查询的结果返回给我们呢?这与我们本节课将学习到的爬虫技术息息相关,它是搜索引擎必不可缺的一部分。

在本课程中,学生将了解爬虫的概念,以及使用Python实现简单爬虫抓取的方法。同时,学生还将学习Python处理CSV文本的方法,学会使用matplotlib库做数据可视化。学生将利用Python爬虫爬取天气信息,利用CSV库生成和处理CSV文件,并且进行可视化展示。


课程目标:

科学目标:1.学生了解爬虫的核心概念以及原理;2.学生了解爬虫的工作机制以及流程;3.学生了解CSV的概念。
技术目标:1.学生掌握requests和BeautifulSoup库;2.学生掌握CSV文件处理的方法;3.学生掌握数据可视化的简单方法。
工程目标:学生能够运用所学的Python知识,完成天气信息的爬取,利用CSV库生成和处理CSV文件,并且进行可视化展示。
数学目标:学生了解并掌握折线图表的数据结构和绘制的方法。

扫一扫
关注微信公众号