课程主页: https://www.udemy.com/course/web-scraping-in-python-using-scrapy-and-splash/
在当今的数据时代，网页抓取已经成为一个热门话题。许多付费工具虽然功能齐全，但往往让用户处于被动接受的状态，无法真正理解网页抓取的底层原理。然而，在Udemy上找到的这门课程《现代网页抓取与Python使用Scrapy、Splash和Selenium》将改变这一切。
### 课程概要
这门课程将引导你从基础开始，学习如何使用Scrapy构建自己的抓取工具（蜘蛛）。从网页抓取的基本原理到如何构建完整的蜘蛛，课程内容覆盖了XPath和CSS选择器的基础知识，帮助你从DOM中定位内容，甚至还包括如何将抓取的数据存储为JSON、CSV，甚至是外部数据库（如MongoDB和SQLite3）。
### 课程亮点
1. **最新技术**：使用Python 3.7、Scrapy 1.6和Splash 3.0进行实战。
2. **深入的实操指导**：提供逐步的教程，帮助你成为专业的网页抓取者。
3. **抓取JavaScript网站**：学习如何使用Scrapy、Splash和Selenium抓取动态网页，课程中对Splash的使用非常独特且深入。
4. **自动化和部署**：教授如何将蜘蛛托管在Heroku上，并定期运行，完全不需要人工干预。
5. **最佳实践**：包括如何避免被封禁、处理API、使用请求Cookies等。
### 学生反馈
这门课程受到了众多学生的好评。许多学生表示，课程内容与他们的需求高度匹配，尤其是在XPath和动态分页方面的讲解。一位学生提到：“这是一个理论与实践相结合的优秀课程，推荐给所有想学习网页抓取的人！”另一位学生则称赞了讲师Ahmed的沟通能力和对学生问题的快速响应。
### 结论
无论你是数据分析师，还是希望从非结构化HTML网页中提取数据的人，这门课程都将为你提供必要的技能和知识。Udemy提供30天退款保证，让你无后顾之忧地加入这门课程。如果你想掌握网页抓取的实用技能，这门课程绝对值得推荐！
课程主页: https://www.udemy.com/course/web-scraping-in-python-using-scrapy-and-splash/