你将收获

掌握Scrapy爬虫框架源码

自己搭建一个Scrapy爬虫项目搭建

自己搭建一个Gerapy爬虫管理框架

自己搭建通用新闻系统数据分布式采集系统

适用人群

爬虫工程师、爬虫初学者、数据管理者、数据分析师等等

课程介绍

课程深入讲解Scrapy爬虫框架核心架构与组件,包括爬虫脚本、数据项、加载器、选择器、中间件、管道、配置与异常处理。重点介绍Scrapy与Django、Gerapy结合,构建分布式爬虫管理平台,实现高效舆情监控。提供丰富爬虫项目与案例实践,解决实际业务场景问题,实现大规模、自动化数据抓取与管理。

课程目录