1.1 教学目的
教学目标
了解数据工程,获得数据工程的大体印象。
了解数据工程师的成长路径,知道如何去获取相关资源。
掌握相关工具完成数据获取和分析的任务。
知识点目标
了解一些编程思维,打破对编程的神秘感。
对数据工程和爬虫有大体印象。
了解 Python 的语法,基本数据结构,会使用条件,循环和输入/输出,知道如何输出数据到文件。
了解网站、网页、请求、响应的大致原理。
掌握 HTML 的基本元素,类和 id,选择器,并会使用浏览器查看 DOM 和选择器。
了解什么是 Web Service。了解 JSON 的基本语法。
了解 Python 发请求,处理 HTML 和 JSON 的相应库的使用。
了解一些 Web 服务或者信息网站,知道如何搜索常见网站的 API。
学习基本的数据处理方式。
设计一个爬虫应用,并展示爬取的数据(图表或者爬出来的数据)。
Last updated
Was this helpful?