文章目录发现宝藏一、目标二、简单分析网页1.寻找所有新闻2.分析模块、版面和文章三、爬取新闻1.爬取模块2.爬取版面3.爬取文章四、完整代码五、效果展示发现宝藏前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住分享一下给大家。【宝藏入口】。一、目标爬取https://news.nd.edu/的字段,包含标题、内容，作者，发布时间，链接地址，文章快照(可能需要翻墙才能访问)二、简单分析网页1.寻找所有新闻点击查看更多最新新闻>>点击查看档案我们发现有两种方式查看所有新闻，一种是按照类别，一种是按照时间，经过进一步的观察我们发现按照时间查看新闻会更全，所以我们选择按照年份（按照月份