python百度地图poi_百度地图数据采集手把手教,从此POI数据不再是愁
本文介绍使用八爪鱼采集百度地图数据(以上海-建设银行为例)的方法
适用版本:八爪鱼7版本,8版本请参照官网新手入门教程制作
使用功能点:
l 列表及详细信息采集
l 文本循环教程
l AJAX点击和翻页
步骤1:创建采集任务
1)进入主界面,选择“自定义采集”
2)将要采集的网站URL复制粘贴到输入框中,点击“保存网址”
步骤2:输入采集信息
1)点击页面中的城市选择框,然后在操作提示框中,选择“更多操作”
2)选择“点击该元素”,进入城市选择页面
3)选择想要采集的城市,这里以上海为例。先选中“上海”,然后在操作提示框中,选择“点击该链接”,进入上海地图
4)先点击地图上的输入框,然后在右侧操作提示框中,选择“输入文字”
5)在操作框提示中,输入想要查询的文本。这里输入“建设银行”。输入完成后,点击“确定”
6)“建设银行”自动填充到输入框。先点击“搜索”按钮,然后在右侧操作提示框中,选择“点击该按钮”
步骤3:创建翻页循环
1)我们可以看到,页面出现了建设银行的搜索结果。将结果页面下拉到底部,点击“下一页”按钮。在右侧的操作提示框中,选择“循环点击下一页”,以创建一个翻页循环
步骤4:创建列表循环
1)先选中搜索结果页面的第一条银行信息的链接,系统会自动识别相似元素,在操作提示框中,选择“选中全部”
2)在操作提示框中,选择“循环点击每个链接”,以创建一个列表循环
步骤5:提取银行信息
1)创建列表循环完成后,系统会自动点击第一条银行信息链接,进入银行详细信息页。先点击要采集的字段(这里点击了银行名),然后在操作提示框中,选择“采集该元素的文本”
2)继续点击要采集的字段,选择“采集该元素的文本”。采集的字段会自动添加到上方的数据编辑框中。选中相应的字段,可以进行字段的自定义命名。
3)经过以上操作,整个流程图建立完毕。在保存并启动任务之前,我们还需要进行一些高级选项的设置。先选中第1个“点击元素”步骤,然后打开“高级选项”,勾选“Ajax加载数据”,设置时间为“2秒”
4)第2个“点击元素”步骤、第3个“点击元素”步骤、第4个“点击元素”步骤、“点击翻页”步骤(如下图红框所示),均需要勾选“Ajax加载数据”,设置时间为“2秒”
注:AJAX即延时加载、异步更新的一种脚本技术,通过在后台与服务器进行少量数据交换,可以在不重新加载整个网页的情况下,对网页的某部分进行更新。
表现特征:a、点击网页中某个选项时,大部分网站的网址不会改变;b、网页不是完全加载,只是局部进行了数据加载,有所变化。
验证方式:点击操作后,在浏览器中,网址输入栏不会出现加载中的状态或者转圈状态。
5)点击左上角的“保存并启动”,选择“启动本地采集”
步骤6:数据采集及导出
1)采集完成后,会跳出提示,选择“导出数据”
1)选择“合适的导出方式”,将采集好的数据导出
3)这里我们选择excel作为导出为格式,数据导出后如下图
希望这篇文档的介绍,能让你掌握百度地图数据采集,你可以试着上八爪鱼官网http://www.bazhuayu.com下载八爪鱼最新版本客户端,也可以关注八爪鱼官方微信了解到更多教程案例。
八爪鱼·三分钟就上手的网页数据采集软件·而且是免费软件
点击链接进入官网
python百度地图poi_百度地图数据采集手把手教,从此POI数据不再是愁相关推荐
- dwz怎么使用数据加载中提示_百度地图数据采集手把手教,从此POI数据不再是愁...
本文介绍使用八爪鱼采集百度地图数据(以上海-建设银行为例)的方法 采集网站:http://map.baidu.com/ 适用版本:八爪鱼7版本,8版本请参照官网新手入门教程制作 8版本新手入门教程:用 ...
- 手把手教你捕获数据包
原文链接:http://blog.csdn.net/piggyxp/article/details/24444 前 言 经常看到论坛有人问起关于数据包的截获.分析等问题,幸好本人也对此略有所知,也 ...
- 三、教你搞懂渐变堆叠面积图《手把手教你 ECharts 数据可视化详解》
注:本系列教程需要对应 JavaScript .html.css 基础,否则将会导致阅读时困难,本教程将会从 ECharts 的官方示例出发,详解每一个示例实现,从中学习 ECharts . ECha ...
- python网络爬虫网易云音乐_手把手教你写网络爬虫(1):网易云音乐歌单
大家好,<手把手教你写网络爬虫>连载开始了!在笔者的职业生涯中,几乎没有发现像网络爬虫这样的编程实践,可以同时吸引程序员和门外汉的注意.本文由浅入深的把爬虫技术和盘托出,为初学者提供一种轻 ...
- python编程例子 输入 输出-推荐 :手把手教你用Python创建简单的神经网络(附代码)...
原标题:推荐 :手把手教你用Python创建简单的神经网络(附代码) 作者:Michael J.Garbade:翻译:陈之炎:校对:丁楠雅 本文共2000字,9分钟. 本文将为你演示如何创建一个神经网 ...
- python代码示例图形-纯干货:手把手教你用Python做数据可视化(附代码)
原标题:纯干货:手把手教你用Python做数据可视化(附代码) 导读:制作提供信息的可视化(有时称为绘图)是数据分析中的最重要任务之一.可视化可能是探索过程的一部分,例如,帮助识别异常值或所需的数据转 ...
- python在财务中的应用-【手把手教你】Python金融财务分析
微信公众号: 1. 货币时间价值 实际上numpy和scipy很强大,包含了计算各种财务指标的函数,可以直接调用,终值(fv).现值(pv).净现值(npv).每期支付金额(pmt).内部收益率(ir ...
- 用python画皇冠_【推荐】手把手教你如何用Python画一棵漂亮樱花树含源码
最近给大家整理了一下,挑了一些我觉得不错的代码分享给大家手把手教你如何用Python画一棵漂亮樱花树含源码. 动态生成樱花 效果图(这个是动态的): import turtle as T import ...
- python画图代码大全-纯干货:手把手教你用Python做数据可视化(附代码)
原标题:纯干货:手把手教你用Python做数据可视化(附代码) 导读:制作提供信息的可视化(有时称为绘图)是数据分析中的最重要任务之一.可视化可能是探索过程的一部分,例如,帮助识别异常值或所需的数据转 ...
最新文章
- java 路径中文问题_Java 路径问题解决方案汇集
- nc 传输文件和目录
- 一些iis配置相关报错的参考
- php的long类型转换,[PHP]将RGB或HEX转换为“Long Int”颜色
- leetcode-125 Valid Palindrome
- 应对DDOS***需要“多管齐下”
- 【codevs5037】线段树练习4加强版
- 半平面交总结and模板
- matlab单元刚度矩阵,求助:关于有限元三角形单元合成总刚度矩阵怎么处理
- jsMind 使用直角画线
- lme4:用于混合效应模型分析的R包
- Linux/Unix如何将日志发送到日志服务器
- 终极文件/文件夹隐藏方案大全
- Python获取拉勾网招聘信息(可视化展示)
- 142个手机短信笑话
- 桌面的文件突然不见了怎么恢复
- 一次看过瘾的30张可视化大屏,网友直呼:真酷炫,比Excel美观
- 目前主流手机操作系统介绍-手机平台
- 【Nessus安装、使用】
- HDFS的常用操作--hdfs下的文件操作常用命令总结