网络爬.虫程序是一个沿着链接漫游web文档集合的程序。它一般驻留在服务器上，通过给定的一些url，利用http等标准协议读取相应文档，然后以文档中包括的所有未访问过的url作为新的起点，继续进行漫游，直到没有满足条件的新url为止。requests是的一个常用的python http库，人类可以安全享用。lxml是python的一个解析库，支持html和xml的解析，支持xpath解析方式，而且解析效率非常高。这门课程将应用python、requests、lxml、sqlalchemy、multiprocessing等技术开发一个简单的网页爬.虫。我们将通过网页爬虫的开发，在实战过程中带大家快速掌握爬取网页的原理。

通过学习，对Python有一定的了解，学习Python语法，可以使用Python原生语言开发项目。对于Python的应用于开发有一个系统的认知，对于未来的发展方向有清晰的认识。主要知识点包括基本语法、文件操作、库、面向对象、进程线程协程、网络编程、数据库等。