我用Scrapy爬了各大城市的旅游数据后

沐沐

来源:GOGO数据「ID:mu_science」

如下,创建scrapy项目:结果如下:

需求分析

我们要爬取旅游网站的热门城市、旅游人数、热门景点、城市详情页面地址然后将这些数据存储在MongoDB中。

页面分析

F2打开浏览器开发者模式,如下找到请求的url。

规律如下:



转载请注明地址:http://www.mangxiaoa.com/mxwx/9030.html
  • 上一篇文章:
  • 下一篇文章:
  • 热点文章

    • 没有热点文章

    推荐文章

    • 没有推荐文章