其实吾爱软件网站源码分享的问题并不复杂,但是又很多的朋友都不太了解吾爱软件下载,因此呢,今天小编就来为大家分享吾爱软件网站源码分享的一些知识,希望可以帮助到大家,下面我们一起来看看这个问题的分析吧!
数据说明:本次爬取大众点评共8个字段信息,包括:商户名字,口味评分,环境评分,服务评分,人均价格,评论数量,地址,商户星级
然后把数据存入excel表格
一、首页部分
我们可以看到有很多分类我们今天主要抓取的是分类里面的美食这一项。然后我们可以看到在美食这个分类下面还有很多的小分类,我们今天为了简介就不一一的去处理这些小分类,而是通过
点击美食来到这个页面
二、二级页面
然后点击搜索,出现的就是我们想要的商户信息了。
然后我们就可以通过python的requests和beautifulsoup4来解析到每一个商户详情页的链接。
通过简单的三行代码我们就能把每一个商户的url,这里应该我们匹配到的url只是链接的一部分所以
我们还需要对url进行一个拼接
这个时候url_list里面的url就全部是我们需要的url了。
三、详情页面
因为这个数据是直接加载出来的,所以我们可以用beautifulsoup来直接解析我们需要的数据
然后就可以拿到我们需要的数据了。
最后附上运行结果和excel表格数据
最后希望各位小伙伴也能写出来。
好了,文章到此结束,希望可以帮助到大家。
