主要思路

目的：

根据输入的城市名，爬取该城市美团美食板块所有商家的数据。数据包括：

店名、评分、评论数量、均价、地址，

并将这些数据存入Excel中。

最后尝试对爬取到的数据做一个简单的分析。

克服反爬虫：

爬取每页数据后，随机停止一段时间后再爬下一页；

每页使用不同的cookie值。

具体原理：

Chrome打开后看了下xhr。。。

发现直接有接口可以用。

详细的实现过程在个人简介中获取源代码。

开发工具

Python版本：3.5.4

相关模块：

requests模块；

win_unicode_console模块；

openpyxl模块；

以及一些Python自带的模块。

环境搭建

安装Python并添加到环境变量，pip安装需要的相关模块即可。

使用演示

在cmd窗口运行MT_Cate_Spider.py文件即可。

简单分析

其实在码字的时候我临时加的这个部分，原因很简单，我想强调爬虫和数据分析结合的重要性。

利用Excel的数据分析功能简单分析一波吧~~~

用的上海地区的数据。

首先当然是按照评分排个序，然后做成柱状图：

然后是评论数量排个序，做成柱状图：

然后再做点其他有趣的图案：