大众点评数据获取基础版本:页面解析及环境工具包介绍
发布时间:2025-04-05 01:07:42 点击量:
### Dianping数据获取---基本版本
Dianping是第三方食品有关的评论网站,在公众中非常受欢迎。
因此,网站上的数据也非常有价值。折扣,评估数量和赞美之类的数据在数据公司中也非常受欢迎。
今天,我写了一个简单的Dianping List Page Data Crawling Demo。
希望这对阅读本文的朋友会有所帮助。
- 环境和工具包:
-Python 3.6
- 自建造的IP池(代理)(使用[ipidea]的国内代理)
-Parsel(页面分析)
-loguru(错误提示)
让我开始下面的探索之旅
###第一步是页面分析
从图可以看出,相应的数字都是所有框。那到底是什么?
下图是我简单地处理该控制台的内容输出。右键单击以直接在HTML中查看网页源代码
从中您可以看到以下内容
````壳
{'name':'Maison Lameloise(上海中央商店)','评级':'4.90','评论数':'11 \ ueeb5 \ ue753',“平均成本”:'¥ \ uf802 \ uf802 \ uf0b6 \ uf0b6 \ uf0b6 '饭后甜点']}}
````````
\`\`\`shell 11使用seggentfault发布