requests爬虫实践之安居客二手房屋数据（python实现）
2024-05-07 13:40:55
1.先从安居客官网上淘到如下数据（详细方法可见博主爬取爱彼迎那篇博客）：
2.源码（警告：若频繁爬取安居客官网数据，将被要求入网验证…）
import requestsfrom bs4 import BeautifulSoupheaders={'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74.0.3729.131 Safari/537.36'}#定制请求头，之前博客有专门讲过link='https://beijing.anjuke.com/sale/p1/#filtersort'r=requests.get(link,headers=headers,timeout=20)soup=BeautifulSoup(r.text,"html.parser")house_list=soup.find_all('li',class_="list-item")#包含房屋所有信息的地址z=0for house in house_list:name=house.find('div',class_="house-title").a.text.strip()information=house.find('div',class_='details-item').text.strip()address=house.find('span',class_="comm-address").text.strip()tags=house.find('div',class_='tags-bottom').text.strip()broker=house.find('div',class_="broker-item").text.strip()price=house.find('span',class_="price-det").text.strip()unit=house.find('span',class_="unit-price").text.strip()print(name,information,address,tags,broker,price,unit)print("/**************************************************************************/")z=z+1print("第一页共有："+str(z)+"套房子。")
3.输出：
北京城建琨廷 电梯次顶层 视野好 观山景观房 急售价可谈 2室1厅|89m²|高层(共15层)|2012年建造 北京城建琨廷(北区) 房山-窦店-于瓦北路17号 景观房环境优美品质小区 李江涛 221万 24643元/m²
/**************************************************************************/
蓝河湾三层精装两居室，中间楼层，临近高铁站万象汇 2室2厅|89m²|共5层|2013年建造 蓝河湾 密云-密云周边-水源路 近学校南北通透配套成熟 鲁全贵 210万 23596元/m²
/**************************************************************************/
前门精装四合院 标准二进院已通燃气 有交易经验 看房方便 7室5厅|499m²|共1层|2015年建造 薛家湾胡同小区 东城-前门-薛家湾胡同 靠近花园视野好配套成熟 李海娟 9999万 200180元/m²
/**************************************************************************/
(清盘特价）万科精装，通透三居，首付90万，可公积金，观湖景 3室2厅|88m²|中层(共10层)|2018年建造 翡翠西湖 丰台-云岗-山湖路 新房房源近地铁配套成熟 吴琼 280万 31818元/m²
/**************************************************************************/
汇景湾 通透三居 全明格局 低首付 税少 有钥匙看房方便急售 3室2厅|117m²|中层(共18层)|2016年建造 首城汇景湾东区 平谷-平谷城区-金河街6号 近地铁交通便利品质小区 刘涛 260万 22222元/m²
/**************************************************************************/
地上正规4居 地下可自由设计 带1车位 西山壹号院好房 5室3厅|376m²|低层(共6层)|2012年建造 西山壹号院南区 海淀-西北旺-圆明园西路 近地铁 李凯旋 3180万 84574元/m²
/**************************************************************************/
业主每天都问客户情况！70平观景客厅）南向三卧）全天配合看房 4室2厅|292m²|低层(共23层)|2008年建造 裘马都 朝阳-太阳宫-尚家楼路2号 近地铁三房朝南独立电梯 周玉良 2499万 85573元/m²
/**************************************************************************/
新出大三居全新，中间单元，安静明卫 3室3厅|229m²|中层(共10层)|2016年建造 万科如园 海淀-西北旺-永丰路 主卧朝南一梯两户景观房 张海巍 2100万 91703元/m²
/**************************************************************************/
西山华府珑园|2明卫 高层西边户 双客厅格局 活动空间足 4室2厅|179m²|高层(共7层)|2009年建造 亿城西山华府珑园 海淀-马连洼-马连洼南路 南北通透小区中心近地铁 魏振国 1750万 97542元/m²
/**************************************************************************/
新出融泽府边户型 次顶层俯瞰护城河 独梯独户带独立保姆间 4室2厅|340m²|高层(共19层)|2008年建造 融泽府 西城-复兴门-真武庙路四条8 近地铁近学校 董超 5455万 160008元/m²
/**************************************************************************/
正南北 500平花园 独栋带电梯，随时看房，壹号庄园 5室2厅|532m²|共3层|2014年建造 北京壹号庄园(东方普罗旺斯四期) 昌平-北七家-定泗路88号 独立电梯独栋别墅近地铁 李云飞 2799万 52613元/m²
/**************************************************************************/
颐和园旁，千平独栋！12.8米大采光面，单层面积250平 4室3厅|750m²|共2层|2010年建造 龙湖颐和原著 海淀-西苑-二龙闸路 近地铁 黎雪欢 6999万 93320元/m²
/**************************************************************************/
全新样板间，全落地窗，西边户，家具家电全含，影音，台球室 4室2厅|382m²|共3层|2009年建造 御园 海淀-西苑-玉泉山路,近厢红旗路 带花园拎包入住安全性高 李斌 4900万 128208元/m²
/**************************************************************************/
选材有考究，保利金钻，法国木纹，中国纯黑麻，大理石马赛克加配 4室2厅|466m²|中层(共10层)|2014年建造 泛海世家 朝阳-朝阳公园-华章东路1号 次新小区素质住户安全性高 刘超 6680万 143348元/m²
/**************************************************************************/
3套一起卖，楼上楼下，客厅精装，卧室，高层边户！ 4室2厅|460m²|高层(共10层)|2014年建造 泛海世家 朝阳-朝阳公园-华章东路1号 闫巧莎 8999万 195588元/m²
/**************************************************************************/
金融街电梯房 小户型主朝东采光好 太平桥大街一居 1室1厅|44m²|低层(共18层)|1989年建造 太平桥大街6号楼 西城-金融街-太平桥大街6号 近地铁配套成熟繁华地段 尹雁琳 648万 145618元/m²
/**************************************************************************/
金融街 宏汇园低总价两居 东西通透 满五年 2室1厅|60m²|地下(共7层)|2001年建造 宏汇园小区 西城-西单-辟才胡同 近地铁近学校配套成熟 尹雁琳 940万 156667元/m²
/**************************************************************************/
特价，露天泳池，送420平私家花园，星河湾南北4居，带保姆间 3室2厅|271m²|低层(共19层)|2006年建造 畅园(星河湾) 朝阳-朝青板块-四季星河中街2号 伍勇 2650万 97491元/m²
/**************************************************************************/
六道口，05年新社区，大一居，精装修！诚心出售 1室1厅|78m²|低层(共20层)|2004年建造 清枫华景园 海淀-学院路-林大北路 近地铁近学校 赵峻 610万 78125元/m²
/**************************************************************************/
急售低总价四居室 三面采光 高品质 低密度 世纪城远大园一区 4室2厅|212m²|中层(共11层)|2002年建造 远大园一区 海淀-世纪城-远大西路 素质住户品质小区低密度 曹丽军 1880万 88516元/m²
/**************************************************************************/
3年装修成新房。5个房间都朝南。带200平南院。十足全新房 5室3厅|513m²|共3层|2010年建造 龙湾别墅 顺义-后沙峪-裕园路 近地铁中国风 李文静 3600万 70175元/m²
/**************************************************************************/
9号楼！高层东边户）双卧室夹客厅朝南）正观喷泉广场和湖心岛屿 4室2厅|222m²|中层(共24层)|2008年建造 裘马都 朝阳-太阳宫-尚家楼路2号 近地铁三房朝南独立电梯 周玉良 2350万 105856元/m²
/**************************************************************************/
北京院子精装全新！业主移民！11.5米面宽 很着急 价格可谈 4室3厅|324m²|共3层|2016年建造 泰禾北京院子 朝阳-孙河-顺黄路 景观房送车位品质小区 王斌斌 3799万 117181元/m²
/**************************************************************************/
降500万 实拍原房 17米楼距 真独栋700平 空房入住快 4室3厅|339m²|共2层|2001年建造 紫玉山庄 朝阳-亚运村-紫玉东路1号 近地铁 卢鑫 7500万 221239元/m²
/**************************************************************************/
猜您喜欢）比新房少1000万 中粮瑞府中府园 钥匙随时看 4室2厅|419m²|共4层|2013年建造 中粮瑞府 朝阳-孙河-香江北路 近地铁独立电梯独栋别墅 孙云 4000万 95465元/m²
/**************************************************************************/
大湖山庄5居室 花园350 独栋精装修 露台80 四个车位 5室4厅|666m²|共2层|2003年建造 大湖山庄 朝阳-来广营-和平路8号 近地铁中国风 王哲 4199万 63048元/m²
/**************************************************************************/
全新房 2月降700万 刚可以网络宣传 欢迎详询同看紫玉山庄 5室4厅|542m²|共2层|2014年建造 润泽御府 朝阳-北苑-清苑路 近地铁 赵宏宇 5888万 108565元/m²
/**************************************************************************/
金融街典藏大宅 层高3.25.3M 三面采光 方便看房 4室3厅|268m²|高层(共7层)|2004年建造 中海凯旋 西城-金融街-太平桥98号 近地铁近学校 李凯旋 5360万 199323元/m²
/**************************************************************************/
华府带100平露台的房子 精装修 好户型 4室2厅|220m²|低层(共8层)|2008年建造 亿城西山华府禧园 海淀-马连洼-马连洼南路 李凯旋 1900万 86364元/m²
/**************************************************************************/
推开门，以为自己回家了，欧式花廊小院，邀您来赏，龙湾别墅 4室3厅|382m²|共3层|2010年建造 龙湾别墅 顺义-后沙峪-裕园路 近地铁配套成熟环境优美 马咏昶 2799万 73272元/m²
/**************************************************************************/
南北双花园，安静位置，装修保养好 5室3厅|220m²|共3层|2009年建造 龙湖滟澜山 顺义-中央别墅区-裕园路 环境优美次新小区品质小区 马咏昶 2299万 104500元/m²
/**************************************************************************/
降700万！有装修随时可看）远洋万和公馆星河湾泛海国际臻园 3室2厅|271m²|高层(共21层)|2015年建造 恒大华府 朝阳-东坝-东坝中街 近地铁配套成熟交通便利 赵宏宇 2300万 84871元/m²
/**************************************************************************/
本房4000万全含小府院同户型成交价4500万 3室3厅|419m²|共2层|2015年建造 中粮瑞府 朝阳-孙河-香江北路 近地铁 张可 4000万 95465元/m²
/**************************************************************************/
（高层） 采光好 14年重装 简约风 腾资格 想快点出手 3室2厅|149m²|高层(共8层)|2008年建造 西城晶华 西城-金融街-太平桥大街8号 近地铁近学校位置安静 李斌 2999万 200468元/m²
/**************************************************************************/
二环精装现房，不要购房资格，外地购房首 选，层层露台 2室1厅|229m²|低层(共27层)|2017年建造 长安太和 东城-东单-建国门内大街甲11号 交通便利繁华地段品质小区 葛新超 3893万 170000元/m²
/**************************************************************************/
2卧室客厅朝南！3面花园，200米楼间距，看公园！ 3室2厅|207m²|中层(共20层)|2007年建造 泛海国际碧海园 朝阳-朝阳公园-姚家园路97号 近地铁小户型 闫巧莎 1999万 96570元/m²
/**************************************************************************/
19年全新精装 五居设计 南北双花园 可看实房 5室3厅|220m²|共3层|2009年建造 龙湖滟澜山 顺义-中央别墅区-裕园路 景观房 张双印 2399万 109045元/m²
/**************************************************************************/
全新房！双卧室夹客厅朝南）四居可改五居）高楼层东边户 4室3厅|300m²|中层(共24层)|2014年建造 红玺台 朝阳-太阳宫-太阳宫二街3号 近地铁近学校独立电梯 周玉良 4100万 136285元/m²
/**************************************************************************/
看了还想看）装修特别赞）双卧夹客厅朝南）业主每天都问客户情况 4室2厅|295m²|低层(共25层)|2013年建造 红玺台 朝阳-太阳宫-太阳宫二街3号 近地铁近学校三房朝南 周玉良 3800万 128814元/m²
/**************************************************************************/
封面为北向视野图）换了壁纸保养很棒）不临路大面积三居室 3室2厅|206m²|中层(共18层)|2007年建造 泛海国际碧海园 朝阳-朝阳公园-姚家园路97号 近地铁 张可 1999万 97039元/m²
/**************************************************************************/
西便门西里东南向三居室，采光好，视野好，诚售 3室1厅|77m²|高层(共20层)|1985年建造 西便门西里小区 西城-西便门-西便门内大街 近地铁 郭坤 770万 99870元/m²
/**************************************************************************/
10号线角门东 南北通透大三居 户型不错诚意出售 3室2厅|117m²|高层(共11层)|2004年建造 怡然家园(南区) 丰台-西罗园-西马场路6号 近地铁 谭可江 612万 52276元/m²
/**************************************************************************/
西便门西里三居全天采光，临昆玉河，望西山，尽收眼前。通风好 3室1厅|77m²|高层(共20层)|1985年建造 西便门西里小区 西城-西便门-西便门内大街 近地铁 郭坤 690万 89494元/m²
/**************************************************************************/
全南向一居室 低楼层厅可摆电视沙发采光充足 看房随时 1室1厅|49m²|低层(共6层)|1987年建造 八里庄北里小区 朝阳-石佛营-朝阳路 近地铁近学校 刘涛 279万 56216元/m²
/**************************************************************************/
新龙城三居室双卧朝南 满五一套随时可看 3室2厅|110m²|低层(共11层)|2006年建造 新龙城 昌平-回龙观-昌平路380号 近地铁近学校交通便利 孙春燕 585万 52793元/m²
/**************************************************************************/
好房推介 商满五年一套 中间层 南北通透 户型正 采光好 2室1厅|98m²|中层(共6层)|2008年建造 天露园一区 昌平-回龙观-龙禧二街 近地铁 崔静 400万 40737元/m²
/**************************************************************************/
东城区 天坛公园边 中低楼层南北通透 满五年公房 随时看房 2室1厅|54m²|中层(共6层)|1980年建造 天坛西里东区 东城-天坛-永定门东街 近地铁配套成熟交通便利 赵丽 450万 83026元/m²
/**************************************************************************/
坐拥繁华位置 步行可到地铁 回龙观温馨两居 户型正 采光好 2室1厅|72m²|中层(共6层)|1996年建造 龙华园 昌平-龙泽-回龙观西大街1号 近地铁近学校 崔静 369万 50666元/m²
/**************************************************************************/
东坝首开常青藤四期三室二厅二卫，首付少，价格低 3室2厅|152m²|低层(共9层)|2014年建造 首开常青藤B区 朝阳-东坝-东坝中街11号 赵超 830万 54548元/m²
/**************************************************************************/
曙光西里 板楼 随时看房 满五 有钥匙 2室1厅|54m²|低层(共6层)|1982年建造 曙光西里 朝阳-西坝河-曙光西路 近地铁近学校 蔺明虎 368万 67959元/m²
/**************************************************************************/
永善里，全南两居室，采光足，看房有钥匙 2室1厅|100m²|中层(共24层)|2005年建造 永善里小区 丰台-北大地-电报局街 近地铁近学校全南户型 杨兆和 585万 58447元/m²
/**************************************************************************/
天通苑西一区 南北通透 板楼三居室 经典户型 3室1厅|160m²|中层(共13层)|2001年建造 天通西苑一区 昌平-天通苑-立汤路 近地铁近学校配套成熟 邰俊杰 510万 31784元/m²
/**************************************************************************/
物资部大院 ！南北通透！ 全明格局！满五年公房！税费低！急售 2室1厅|77m²|中层(共6层)|1999年建造 物资部大院 西城-月坛-月坛北街25号 近地铁配套成熟交通便利 牛庆华 1000万 128700元/m²
/**************************************************************************/
五年 一套，大三居，京贸国际城西区临月亮河城堡加华印象街 3室2厅|128m²|低层(共35层)|2011年建造 京贸国际城 通州-武夷花园-芙蓉东路1号 张广晴 728万 56777元/m²
/**************************************************************************/
东二环南北3居东方瑞景满五唯一装修保养好欢迎咨询 4室1厅|213m²|低层(共26层)|2004年建造 东方瑞景 朝阳-建外大街-建国门外大街16号 汤海潮 1560万 73140元/m²
/**************************************************************************/
南北通透三居室 满五唯一 看房方便 3室2厅|91m²|低层(共11层)|2012年建造 青秀城(西区) 丰台-玉泉营-马家楼路1号 姜建盘 650万 71421元/m²
/**************************************************************************/
弘善家园满两年大两居空房有钥匙中间楼层主卧带阳台业主急售 2室1厅|79m²|中层(共28层)|2009年建造 弘善家园 朝阳-潘家园-华威南路 近地铁 张越杰 310万 39191元/m²
/**************************************************************************/
京棉新城精装修东向两居室 2室1厅|88m²|中层(共22层)|2006年建造 京棉新城 朝阳-十里堡-朝阳路 近地铁配套成熟繁华地段 白雪磊 535万 60119元/m²
/**************************************************************************/
住总万科橙 精装两居室 不临街 小区安静位置 2室1厅|76m²|低层(共22层)|2015年建造 住总万科橙 大兴-生物医药基地-新源大街 近地铁 于鹏 375万 48975元/m²
/**************************************************************************/
东四环 十里堡 海华堂全南 两居，无遮挡，装修好 2室1厅|98m²|中层(共33层)|2011年建造 海华堂 朝阳-十里堡-朝阳路 近地铁 白雪磊 615万 62197元/m²
/**************************************************************************/
第一页共有：60套房子。
requests爬虫实践之安居客二手房屋数据（python实现）相关推荐
- 抓取安居客二手房经纪人数据，python爬虫自动翻页
为什么80%的码农都做不了架构师?>>> 和链接不一样,安居客网站里面没有找到总页数,可能在json里面有,只是我没有找到. 基于此能不能做网页的循环爬取呢. 能否判断页面读取 ...
- Requests爬虫实践：豆瓣读书Top250数据
Requests爬虫实践:豆瓣读书Top250数据 本次的实践项目是爬取豆瓣读书Top250的书籍名称和网页地址 参考书籍:<Python网络爬虫从入门到实践> 书中爬的是电影数据,自己想 ...
- python爬取房源数据_python爬取安居客二手房网站数据(实例讲解)
是小打小闹 哈哈,现在开始正式进行爬虫书写首先,需要分析一下要爬取的网站的结构:作为一名河南的学生,那就看看郑州的二手房信息吧! 在上面这个页面中,我们可以看到一条条的房源信息,从中我们发现了什么,发 ...
- 爬虫爬取安居客二手房和新房信息，你是买新房还是二手的呢？
本文主要讲解爬取安居客买房类别中的二手房和新房,将提取的信息存储在记事本中,也可以转存CSV格式或者MongoDB中. 网站HTML信息提取比较简单,没有什么特别的地方,作为爬虫入门可以让初学者快速了 ...
- python爬虫爬取安居客并进行简单数据分析
此篇博客为普通方式爬取安居客租房数据一共提取出1200条,但是在进行大规模的数据爬取时,不建议使用这种方式,速度太慢是最大的诟病,在进行大规模爬取时,使用分布式爬虫是第一选择 爬取过程 一.指定爬取数 ...
- python爬虫爬取安居客房源信息
爬取安居客房源信息 Xpath插件的安装 爬取重庆花溪附近的房源信息(进入正题啦~) 梳理下逻辑 爬取数据的通用流程 代码 代码的问题 & 运行时可能出现的问题 结果 数据处理部分(写给我自己 ...
- scrapy爬虫实战：安居客深圳二手房
温馨提示:想要本次爬虫源代码的同学 请关注公众号:python小咖 回复 ' 安居客爬虫 ' 获取源码 --------------------------------- 接下来进入正题 本次爬虫实现 ...
- python爬取安居客二手房网站数据（转）
之前没课的时候写过安居客的爬虫,但那也是小打小闹,那这次呢, 还是小打小闹 哈哈,现在开始正式进行爬虫书写 首先,需要分析一下要爬取的网站的结构: 作为一名河南的学生,那就看看郑州的二手房信息吧! 在 ...
- 【爬虫实践】获取某城市天气数据
功能需求 获取山东济南城市每天的天气情况. 需要获取四个数据:天气.温度.风向.风级. url地址:http://www.weather.com.cn/weather/101120101.shtml ...
最新文章
- AC日记——[Hnoi2017]影魔 bzoj 4826
- EXPDP 时ORA-27054 问题处置
- 跨平台表空间传输(摘自eygle《循序渐进Oracle》)
- 用word2007发布blog
- IntellIJ IDEA 导入 Java 项目后无法运行 main 方法的解决方案
- 苹果手机怎样用计算机,苹果手机怎么连接电脑,详细教您怎么使用苹果手机连接电脑...
- JAVA和javascrito_JAVA 和JavaScript的split方法异同
- CVPR2019 | AlphaPose升级！上交大开源密集人群姿态估计代码
- 黄聪：Python中的__metaclass__=type什么意思？
- 英伟达的“千人摩擦计划”：几千个智能体互相玩耍，学习跑酷更轻松
- 基于visual Studio2013解决C语言竞赛题之0701排队输出
- 视频一键识别生成字幕
- 十年游戏建模师给想学次世代游戏建模同学的一些忠告，太受益了
- JESD204B调试笔记（实用版）
- Telos 小白指南
- 自体脂肪填充面部能保持多长时间，这是能说的吗
- Artifact “xxx - xxxx“:war exploded: 部署工件时出错。请参阅服务器日志了解详细
- 进化优化算法--第二章：爬山法
- 高效能人士的七个习惯 与成功有约
- 北京天宇联科技有限责任公司-T语言中html页面keys键值的设置