掌握python爬虫技术
掌握urllib技术
掌握sqlite数据库技术
掌握WordCoun技术
你将收获
掌握python爬虫技术
掌握urllib技术
掌握sqlite数据库技术
掌握WordCoun技术
适用人群
课程介绍
课程简介:
网络爬.虫程序是一个沿着链接漫游web文档集合的程序。它一般驻留在服务器上,通过给定的一些url,利用http等标准协议读取相应文档,然后以文档中包括的所有未访问过的url作为新的起点,继续进行漫游,直到没有满足条件的新url为止。requests是的一个常用的python http库,人类可以安全享用。lxml是python的一个解析库,支持html和xml的解析,支持xpath解析方式,而且解析效率非常高。这门课程将应用python、requests、lxml、sqlalchemy、multiprocessing等技术开发一个简单的网页爬.虫。我们将通过网页爬虫的开发,在实战过程中带大家快速掌握爬取网页的原理。
通过学习,对Python有一定的了解,学习Python语法,可以使用Python原生语言开发项目。对于Python的应用于开发有一个系统的认知,对于未来的发展方向有清晰的认识。主要知识点包括基本语法、文件操作、库、面向对象、进程线程协程、网络编程、数据库等。
课程目录