目标

本节目标为爬取成都市高新区2017-2018年所有预/现售楼盘信息

输出格式为:楼盘名   用途  开发商  地址  预售日期

数据来源:成都市城乡房产管理局

说明:urllib和beautifulsoup的使用教程网上很多,这里不详细说明了

网站分析

通过分析页面,发现页面使用了ajax技术,请求的url始终是同一个,通过post的数据来切换数据,数据位于id为ID_ucShowNew_gridView的table中

<table cellspacing="0" cellpadding="0" rules="all" border="1" id="ID_ucShowNew_gridView" style="border-width:1px;border-style:Solid;font-size:12px;width:100%;border-collapse:collapse;margin-bottom: 10px"><tbody><tr class="boxHeader" align="center" style="height:24px;"><th class="boxItem" align="center" scope="col">预/现售号</th><th class="boxItem" align="center" scope="col">项目名称</th><th class="boxItem" align="center" scope="col">行政区域</th><th class="boxItem" align="center" scope="col">项目地址</th><th class="boxItem" align="center" scope="col">房屋用途</th><th class="boxItem" align="center" scope="col">开发商</th><th class="boxItem" align="center" scope="col">预售面积(平方米)</th><th class="boxItem" align="center" scope="col">预售日期</th><th class="boxItem" align="center" scope="col">备注</th></tr><tr><td class="boxItem" align="left" style="width:55px;">101805</td><td class="boxItem" align="left" style="width:70px;">锦城悦庭</td><td class="boxItem" align="left" style="width:50px;">高新区</td><td class="boxItem" align="left">高新区康和西一街199号</td><td class="boxItem" align="left" style="width:50px;">住宅、公寓、商业</td><td class="boxItem" align="left" style="width:100px;">成都科普尔房地产开发有限公司</td><td class="boxItem" align="left">48366.77</td><td class="boxItem" align="left" style="width:75px;"><span id="ID_ucShowNew_gridView_ctl02_lbl1">2018-10-15</span></td><td class="boxItem" align="left" style="width:70px;">&nbsp;</td></tr><tr><td class="boxItem" align="left" style="width:55px;">101797</td><td class="boxItem" align="left" style="width:70px;">朗诗熙华府</td><td class="boxItem" align="left" style="width:50px;">高新区</td><td class="boxItem" align="left">成都市高新区盛治街777号</td><td class="boxItem" align="left" style="width:50px;">车位</td><td class="boxItem" align="left" style="width:100px;">寰安置业(成都)有限公司</td><td class="boxItem" align="left">39951.38</td><td class="boxItem" align="left" style="width:75px;"><span id="ID_ucShowNew_gridView_ctl03_lbl1">2018-10-12</span></td><td class="boxItem" align="left" style="width:70px;">&nbsp;</td></tr><tr><td class="boxItem" align="left" style="width:55px;">101787</td><td class="boxItem" align="left" style="width:70px;">龙湖时代天街广场</td><td class="boxItem" align="left" style="width:50px;">高新区</td><td class="boxItem" align="left">高新区合作路89号</td><td class="boxItem" align="left" style="width:50px;">商业、办公</td><td class="boxItem" align="left" style="width:100px;">成都龙湖锦鸿置业有限公司</td><td class="boxItem" align="left">42491.23</td><td class="boxItem" align="left" style="width:75px;"><span id="ID_ucShowNew_gridView_ctl04_lbl1">2018-10-11</span></td><td class="boxItem" align="left" style="width:70px;">&nbsp;</td></tr><tr><td class="boxItem" align="left" style="width:55px;">101778</td><td class="boxItem" align="left" style="width:70px;">宸光名邸</td><td class="boxItem" align="left" style="width:50px;">高新区</td><td class="boxItem" align="left">高新区雅和北三路350号</td><td class="boxItem" align="left" style="width:50px;">商业</td><td class="boxItem" align="left" style="width:100px;">成都万锦南府置业有限公司</td><td class="boxItem" align="left">8185.46</td><td class="boxItem" align="left" style="width:75px;"><span id="ID_ucShowNew_gridView_ctl05_lbl1">2018-10-10</span></td><td class="boxItem" align="left" style="width:70px;">&nbsp;</td></tr><tr><td class="boxItem" align="left" style="width:55px;">101755</td><td class="boxItem" align="left" style="width:70px;">宸光名邸</td><td class="boxItem" align="left" style="width:50px;">高新区</td><td class="boxItem" align="left">高新区雅和北三路350号</td><td class="boxItem" align="left" style="width:50px;">商业</td><td class="boxItem" align="left" style="width:100px;">成都万锦南府置业有限公司</td><td class="boxItem" align="left">4680.76</td><td class="boxItem" align="left" style="width:75px;"><span id="ID_ucShowNew_gridView_ctl06_lbl1">2018-09-30</span></td><td class="boxItem" align="left" style="width:70px;">&nbsp;</td></tr><tr><td class="boxItem" align="left" style="width:55px;">101728</td><td class="boxItem" align="left" style="width:70px;">成都大魔方</td><td class="boxItem" align="left" style="width:50px;">高新区</td><td class="boxItem" align="left">高新区科华南路1366号</td><td class="boxItem" align="left" style="width:50px;">住宅、公寓</td><td class="boxItem" align="left" style="width:100px;">成都招商远康房地产开发有限公司</td><td class="boxItem" align="left">60527.04</td><td class="boxItem" align="left" style="width:75px;"><span id="ID_ucShowNew_gridView_ctl07_lbl1">现房</span></td><td class="boxItem" align="left" style="width:70px;">&nbsp;</td></tr><tr><td class="boxItem" align="left" style="width:55px;">101669</td><td class="boxItem" align="left" style="width:70px;">宸悦华庭</td><td class="boxItem" align="left" style="width:50px;">高新区</td><td class="boxItem" align="left">高新区天府三街366号</td><td class="boxItem" align="left" style="width:50px;">办公</td><td class="boxItem" align="left" style="width:100px;">成都兴洲数字电视传播有限公司</td><td class="boxItem" align="left">25798.37</td><td class="boxItem" align="left" style="width:75px;"><span id="ID_ucShowNew_gridView_ctl08_lbl1">2018-09-17</span></td><td class="boxItem" align="left" style="width:70px;">&nbsp;</td></tr><tr><td class="boxItem" align="left" style="width:55px;">101661</td><td class="boxItem" align="left" style="width:70px;">宸光名邸</td><td class="boxItem" align="left" style="width:50px;">高新区</td><td class="boxItem" align="left">高新区雅和北路三路351号</td><td class="boxItem" align="left" style="width:50px;">商业</td><td class="boxItem" align="left" style="width:100px;">成都万锦南府置业有限公司</td><td class="boxItem" align="left">11697.47</td><td class="boxItem" align="left" style="width:75px;"><span id="ID_ucShowNew_gridView_ctl09_lbl1">2018-09-14</span></td><td class="boxItem" align="left" style="width:70px;">&nbsp;</td></tr><tr><td class="boxItem" align="left" style="width:55px;">101652</td><td class="boxItem" align="left" style="width:70px;">金怡源购物中心</td><td class="boxItem" align="left" style="width:50px;">高新区</td><td class="boxItem" align="left">高新区剑南大道中段998、1098号</td><td class="boxItem" align="left" style="width:50px;">车位</td><td class="boxItem" align="left" style="width:100px;">成都金怡源房地产开发有限公司</td><td class="boxItem" align="left">84168.65</td><td class="boxItem" align="left" style="width:75px;"><span id="ID_ucShowNew_gridView_ctl10_lbl1">现房</span></td><td class="boxItem" align="left" style="width:70px;">&nbsp;</td></tr><tr><td class="boxItem" align="left" style="width:55px;">101648</td><td class="boxItem" align="left" style="width:70px;">北大资源·颐和翡翠府</td><td class="boxItem" align="left" style="width:50px;">高新区</td><td class="boxItem" align="left">高新区应龙南一路36号</td><td class="boxItem" align="left" style="width:50px;">商业、住宅、储藏间(戊类)、住宅</td><td class="boxItem" align="left" style="width:100px;">成都金益远航房地产开发有限公司</td><td class="boxItem" align="left">19079.84</td><td class="boxItem" align="left" style="width:75px;"><span id="ID_ucShowNew_gridView_ctl11_lbl1">2018-09-11</span></td><td class="boxItem" align="left" style="width:70px;">&nbsp;</td></tr><tr><td class="boxItem" align="left" style="width:55px;">101623</td><td class="boxItem" align="left" style="width:70px;">誉峰遇见中心</td><td class="boxItem" align="left" style="width:50px;">高新区</td><td class="boxItem" align="left">高新区交子大道500号</td><td class="boxItem" align="left" style="width:50px;">办公</td><td class="boxItem" align="left" style="width:100px;">成都市中天盈房地产开发有限公司</td><td class="boxItem" align="left">69116.48</td><td class="boxItem" align="left" style="width:75px;"><span id="ID_ucShowNew_gridView_ctl12_lbl1">2018-09-04</span></td><td class="boxItem" align="left" style="width:70px;">&nbsp;</td></tr><tr><td class="boxItem" align="left" style="width:55px;">101588</td><td class="boxItem" align="left" style="width:70px;">宸悦华庭</td><td class="boxItem" align="left" style="width:50px;">高新区</td><td class="boxItem" align="left">高新区天府三街366号</td><td class="boxItem" align="left" style="width:50px;">商业、办公</td><td class="boxItem" align="left" style="width:100px;">成都兴洲数字电视传播有限公司</td><td class="boxItem" align="left">24418.66</td><td class="boxItem" align="left" style="width:75px;"><span id="ID_ucShowNew_gridView_ctl13_lbl1">2018-08-24</span></td><td class="boxItem" align="left" style="width:70px;">&nbsp;</td></tr><tr><td class="boxItem" align="left" style="width:55px;">101582</td><td class="boxItem" align="left" style="width:70px;">沁园世纪广场</td><td class="boxItem" align="left" style="width:50px;">高新区</td><td class="boxItem" align="left">高新区中和吉龙一街111号</td><td class="boxItem" align="left" style="width:50px;">商业、办公</td><td class="boxItem" align="left" style="width:100px;">成都沁园房地产开发有限公司</td><td class="boxItem" align="left">22054.47</td><td class="boxItem" align="left" style="width:75px;"><span id="ID_ucShowNew_gridView_ctl14_lbl1">2018-08-22</span></td><td class="boxItem" align="left" style="width:70px;">&nbsp;</td></tr><tr><td class="boxItem" align="left" style="width:55px;">101579</td><td class="boxItem" align="left" style="width:70px;">南阳御龙府一期</td><td class="boxItem" align="left" style="width:50px;">高新区</td><td class="boxItem" align="left">高新区应龙北一路96号</td><td class="boxItem" align="left" style="width:50px;">住宅、公寓、商业</td><td class="boxItem" align="left" style="width:100px;">成都长冶房地产开发有限公司</td><td class="boxItem" align="left">44173.26</td><td class="boxItem" align="left" style="width:75px;"><span id="ID_ucShowNew_gridView_ctl15_lbl1">2018-08-17</span></td><td class="boxItem" align="left" style="width:70px;">&nbsp;</td></tr><tr><td class="boxItem" align="left" style="width:55px;">101576</td><td class="boxItem" align="left" style="width:70px;">成都时尚集团西区总部及新媒体研发中心</td><td class="boxItem" align="left" style="width:50px;">高新区</td><td class="boxItem" align="left">高新区新通大道777号</td><td class="boxItem" align="left" style="width:50px;">商业</td><td class="boxItem" align="left" style="width:100px;">成都时尚星际文化传媒有限公司</td><td class="boxItem" align="left">2353.84</td><td class="boxItem" align="left" style="width:75px;"><span id="ID_ucShowNew_gridView_ctl16_lbl1">2018-08-16</span></td><td class="boxItem" align="left" style="width:70px;">&nbsp;</td></tr></tbody></table>

请求头

Accept:text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8
Accept-Encoding:gzip, deflate, br
Accept-Language:zh-CN,zh;q=0.9,en;q=0.8
Cache-Control:max-age=0
Connection:keep-alive
Content-Length:514
Content-Type:application/x-www-form-urlencoded
Cookie:FntCookie=TraditionalOrSimplized=0; _gscu_1276227783=26431241sgevrz41; gwdshare_firstime=1526431248262; security_session_verify=eee170325a991de9390ed613bd0890d0; ASP.NET_SessionId=uiqbbuvv4q5eufry30cu3d55
Host:www.cdfgj.gov.cn
Origin:https://www.cdfgj.gov.cn
Referer:https://www.cdfgj.gov.cn/SCXX/ShowNew.aspx
Upgrade-Insecure-Requests:1
User-Agent:Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36

分页切换

__EVENTTARGET:ID_ucShowNew$UcPager1$btnPage2
__EVENTARGUMENT:
__VIEWSTATE:6D4BH1eVMOnRR3Zr0dErfLnKi2hLEtUAMSb51g0mr5Vu9Q/Kcchcejaeo+mdy73rIsRsY3nq4IAQgUd5Y0TA4+28T169wDy1X3pF2qB3b2YwWH+W5sWCRzZPDqr3BVpKGu6uVwNhgP00JLIuJu4DV+jAIHwV7K12RwCQBw==
ID_ucShowNew$ucLeft1$hfValue:ysxm
ID_ucShowNew$txtpId:
ID_ucShowNew$txtpName:
ID_ucShowNew$ddlRegion:高新区
ID_ucShowNew$txtTime1:2017-01-01
ID_ucShowNew$txtTime2:2018-12-31
ID_ucShowNew$UcPager1$txtPage:1

cookie

没有设置cookie时,我们发现点击换页是不生效的,所以我们的爬虫得使用cookie

    #cookiecookie = http.cookiejar.CookieJar()handle = urllib.request.HTTPCookieProcessor(cookie)opener = urllib.request.build_opener(handle)

程序代码

def download(opener, url, headers, data=None, retry=3):req = urllib.request.Request(url, headers=headers)try:response = opener.open(req, data=data)if response.info().get('Content-Encoding', "") == 'gzip':return gzip.decompress(response.read()).decode('utf-8')return response.read()except urllib.error.URLError as e:print('download ' + url + ' error:'+e.reason)if retry > 0:if hasattr(e, 'code') and 500 <= e.code < 600:download(url, retry-1)return Nonedef analysis(data_list, bs):table = bs.find('table', {'id':'ID_ucShowNew_gridView'})for tr in table.findAll('tr'):tds = tr.findAll('td')if tds:dic = {}dic['name'] = tds[1].textdic['purpose'] = tds[4].textdic['company'] = tds[5].textdic['address'] = tds[3].textdic['date'] = tds[7].find('span').textdata_list.append(dic)if __name__ == '__main__':#cookiecookie = http.cookiejar.CookieJar()handle = urllib.request.HTTPCookieProcessor(cookie)opener = urllib.request.build_opener(handle)# visit webpageheaders = {'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8','Accept-Encoding': 'gzip,deflate,br','Accept-Language': 'zh-CN,zh;q=0.9,en;q=0.8','Cache - Control': 'max-age=0','Connection': 'keep-alive','Host': 'www.cdfgj.gov.cn','Upgrade-Insecure-Requests': '1','User-Agent': 'Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36(KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36',}url = 'https://www.cdfgj.gov.cn/SCXX/ShowNew.aspx'page = download(opener, url, headers)headers['Origin'] = 'https://www.cdfgj.gov.cn'headers['Referer'] = 'https://www.cdfgj.gov.cn/SCXX/ShowNew.aspx'# querybs = BeautifulSoup(page, 'html.parser')__EVENTTARGET = bs.find('input', {'id':'__EVENTTARGET'}).get('value')__EVENTARGUMENT = bs.find('input', {'id': '__EVENTARGUMENT'}).get('value')__VIEWSTATE = bs.find('input', {'id': '__VIEWSTATE'}).get('value')hfValue = bs.find('input', {'name': 'ID_ucShowNew$ucLeft1$hfValue'}).get('value')txtpId = ''txtpName = ''ddlRegion = '高新区'txtTime1 = '2017-01-01'txtTime2 = '2018-12-31'btnSccx = '查询'txtPage = '1'data = {'__EVENTTARGET': __EVENTTARGET,'__EVENTARGUMENT': __EVENTARGUMENT,'__VIEWSTATE': __VIEWSTATE,'ID_ucShowNew$ucLeft1$hfValue': hfValue,'ID_ucShowNew$txtpId': txtpId,'ID_ucShowNew$txtpName': txtpName,'ID_ucShowNew$ddlRegion': ddlRegion,'ID_ucShowNew$txtTime1': txtTime1,'ID_ucShowNew$txtTime2': txtTime2,'ID_ucShowNew$btnSccx': btnSccx,'ID_ucShowNew$UcPager1$txtPage': txtPage,}page = download(opener, url, headers, urllib.parse.urlencode(data).encode(encoding='utf-8'))data.pop('ID_ucShowNew$btnSccx')# get total pagesbs = BeautifulSoup(page, 'html.parser')text = bs.find('span', {'id': 'ID_ucShowNew_UcPager1_lbPageCount'}).textp = re.compile('\d+')pageNum = int(p.findall(text)[0])data_list = []analysis(data_list, bs)for i in range(1, pageNum):data['__EVENTTARGET'] = 'ID_ucShowNew$UcPager1$btnPage{:d}'.format(i+1)data['__VIEWSTATE'] = bs.find('input', {'id': '__VIEWSTATE'}).get('value')data['ID_ucShowNew$UcPager1$txtPage'] = '{:d}'.format(i)page = download(opener, url, headers, urllib.parse.urlencode(data).encode(encoding='utf-8'))bs = BeautifulSoup(page, 'html.parser')analysis(data_list, bs)print('楼盘名\t用途\t开发商\t地址\t日期')for data in data_list:print('{:s}\t{:s}\t{:s}\t{:s}\t{:s}'.format(data['name'], data['purpose'], data['company'], data['address'], data['date']))

执行结果

楼盘名  用途  开发商 地址  日期
锦城悦庭    住宅、公寓、商业    成都科普尔房地产开发有限公司  高新区康和西一街199号    2018-10-15
朗诗熙华府   车位  寰安置业(成都)有限公司  成都市高新区盛治街777号   2018-10-12
龙湖时代天街广场    商业、办公   成都龙湖锦鸿置业有限公司    高新区合作路89号   2018-10-11
宸光名邸    商业  成都万锦南府置业有限公司    高新区雅和北三路350号    2018-10-10
宸光名邸    商业  成都万锦南府置业有限公司    高新区雅和北三路350号    2018-09-30
成都大魔方   住宅、公寓   成都招商远康房地产开发有限公司 高新区科华南路1366号    现房
宸悦华庭    办公  成都兴洲数字电视传播有限公司  高新区天府三街366号 2018-09-17
宸光名邸    商业  成都万锦南府置业有限公司    高新区雅和北路三路351号   2018-09-14
金怡源购物中心 车位  成都金怡源房地产开发有限公司  高新区剑南大道中段998、1098号  现房
北大资源·颐和翡翠府  商业、住宅、储藏间(戊类)、住宅  成都金益远航房地产开发有限公司 高新区应龙南一路36号 2018-09-11
誉峰遇见中心  办公  成都市中天盈房地产开发有限公司 高新区交子大道500号 2018-09-04
宸悦华庭    商业、办公   成都兴洲数字电视传播有限公司  高新区天府三街366号 2018-08-24
沁园世纪广场  商业、办公   成都沁园房地产开发有限公司   高新区中和吉龙一街111号   2018-08-22
南阳御龙府一期 住宅、公寓、商业    成都长冶房地产开发有限公司   高新区应龙北一路96号 2018-08-17
成都时尚集团西区总部及新媒体研发中心  商业  成都时尚星际文化传媒有限公司  高新区新通大道777号 2018-08-16
盛和林语(南区)  住宅、公寓   成都兴城人居地产投资集团有限公司    成都市高新区泰和二街123号  2018-08-14
城南e区    商业  成都华鼎房地产开发有限公司   高新区观东三街600号 2018-08-10
南阳御龙府二期 办公  成都长冶房地产开发有限公司   高新区梓州大道4333号    2018-08-09
雄飞·新园名都 商业、办公   四川科成实业集团有限公司    高新区新园大道4号   2018-08-09
成都时尚集团西区总部及新媒体研发中心  商业  成都时尚星际文化传媒有限公司  高新区新通大道777号 2018-08-07
恒大珺临阁   商业、办公   四川川大科技园(南区)开发有限公司 高新区天府二街269号 2018-07-26
南阳御龙府二期 商业、办公   成都长冶房地产开发有限公司   高新区梓州大道4333号    2018-07-26
大源欢乐颂城  商业、办公   成都锐力投资管理有限公司    高新区天府三街1599号    2018-07-20
西派澜岸二期  商业  成都中铁建投资有限公司 成都市高新区天府一街1566号 2018-07-06
朗诗熙华府   住宅、公寓、商业    寰安置业(成都)有限公司  成都市高新区盛治街777号   2018-07-05
香月湖 机动车位    成都乐家置业有限公司  高新区吉庆一路388号 现房
南阳御龙府二期 商业、办公   成都长冶房地产开发有限公司   高新区梓州大道4333号    2018-07-02
成都大魔方   商业、办公   成都招商远康房地产开发有限公司 高新区天府大道北段1777号  2018-06-22
天目中心    商业、办公   成都拓尔思信息技术有限公司   高新区新裕路466号  2018-06-12
南阳御龙府二期 商业,办公    成都长冶房地产开发有限公司   高新区梓州大道4333号    2018-06-12
华润时光里   商业  成都华润置地和兴房地产开发有限公司   高新区观东一街666号 2018-06-07
江宇天府城   车位  成都中奥华实业有限公司 高新区海洋路109号  2018-06-07
江宇天府城   住宅、公寓   成都中奥华实业有限公司 高新区海洋路109号  2018-06-01
沁园世纪广场  商业、办公   成都沁园房地产开发有限公司   高新区中和吉龙一街111号   2018-05-25
融创香璟台西苑 商业  成都顺宇置业有限公司  高新区锦和西一街17号 2018-05-25
正成南郡    商业、机动车位 成都市正成中和置业有限公司   高新区应龙南一路555号    2018-05-18
融创香璟台东苑 商业、办公   成都融创仁源房地产开发有限公司 高新区中和街道观东社区三组、龙灯山社区十一、十二组(B宗地)    2018-05-11
北辰朗诗南门绿郡(B区)  商业  成都辰诗置业有限公司  成都市高新区同源街666号   2018-05-08
雄飞·新园名都 商业、办公   四川科成实业集团有限公司    高新区新园大道4号   2018-04-28
融创香璟台东苑 机动车位    成都融创仁源房地产开发有限公司 高新区中和街道观东社区三组、龙灯山社区十一、十二组   2018-03-30
朗诗熙华府   住宅  寰安置业(成都)有限公司  成都市高新区盛治街777号   2018-03-29
朗基和今缘   住宅、公寓、商业    成都市朗升房地产开发有限公司  高新区吉龙一街333号 2018-03-26
恒大珺临阁   办公、商业   四川川大科技园(南区)开发有限公司 高新区天府二街269号 2018-03-16
融创香璟台东苑 住宅、商业、公寓    成都融创仁源房地产开发有限公司 高新区中和街道观东社区三组、龙灯山社区十一、十二组   2018-03-14
融创香璟台西苑 住宅、公寓、商业    成都顺宇置业有限公司  高新区锦和西一街17号 2018-03-14
融创香璟台西苑 住宅、公寓、商业、办公 成都顺宇置业有限公司  高新区锦蜀街35号、锦和西一街17号  2018-03-14
融创香璟台西苑 商业  成都顺宇置业有限公司  高新区锦和西一街67号 2018-02-13
金控金融后台服务中心  汽车位 成都金控置业有限公司  高新区天府四街300号 2018-02-06
普得先锋名筑  住宅、公寓、商业    四川正南房地产开发有限公司   高新区梓州大道200号 2018-02-01
雄飞·新园名都 办公  四川科成实业集团有限公司    高新区新园大道4号   2018-01-19
大源欢乐颂城  商业、办公   成都锐力投资管理有限公司    高新区天府三街1599号    2018-01-12
朗基和今缘   机动车位    成都市朗升房地产开发有限公司  高新区吉龙一街333号 2018-01-11
雄川中心    商业、办公   成都雄川实业集团有限公司    高新区天府二街166号 2017-12-29
普得先锋名筑  商业用房    四川正南房地产开发有限公司   高新区梓州大道200号 2017-12-22
香月湖 商业、车位   成都乐家置业有限公司  高新区益州大道中段699号   2017-12-22
北大资源·颐和翡翠府  地下机动车位、商业   成都金益远航房地产开发有限公司 高新区应龙南一路36号 2017-12-22
华润时光里   商业、办公、机动车停车位    成都华润置地和兴房地产开发有限公司   高新区观东一街666号 2017-12-21
保利·锦湖林语一期   商业  保利(成都)房地产开发有限公司   高新区石羊场路99号  现房
融创香璟台西苑 商业、办公   成都顺宇置业有限公司  高新区锦和西一路67号 2017-11-23
乐活公社    商业、办公   东时置业成都有限公司  高新区观东一街1111号    2017-11-20
朗基和今缘   商业  成都市朗升房地产开发有限公司  高新区吉龙一街333号 2017-11-17
人居天府汇城  车位  成都人居置业有限公司  成都市高新区石羊场路888号  2017-11-03
融创香璟台西苑 商业、办公   成都顺宇置业有限公司  高新区锦和西一街17号 2017-10-31
融创香璟台西苑 办公  成都顺宇置业有限公司  高新区锦和西一街67号 2017-10-31
正成南郡    住宅、商业   成都市正成中和置业有限公司   高新区应龙南一路555号    2017-10-30
北辰朗诗南门绿郡(B区)  住宅、商业、车位    成都辰诗置业有限公司  成都市高新区同源街666号   2017-10-27
融创香璟台东苑 住宅、商业   成都融创仁源房地产开发有限公司 高新区中和街道观东社区三组、龙灯山社区十一、十二组(A宗地)    2017-10-27
融创香璟台西苑 住宅、公寓   成都顺宇置业有限公司  高新区锦和西一路67号 2017-10-27
融创香璟台西苑 住宅、商业   成都顺宇置业有限公司  高新区锦蜀街35号   2017-10-27
南城都汇商住项目第六期汇彩园地下室工程 商业、机动车位 和记黄埔地产(成都)有限公司    高新区荟锦路265号、333号,府城大道西段88号,和盛东街77号、99号 2017-10-26
复地金融岛(A地块商业、办公I区)   商业、办公   成都复地明珠置业有限公司    成都市高新区环岛路1288号  2017-10-24
中天盈誉峰-3 办公  成都市中天盈房地产开发有限公司 高新区交子大道300号 2017-10-18
雄飞·新园名都 商业、办公   四川科成实业集团有限公司    高新区新园大道4号   2017-10-13
朗诗熙华府   商业、办公   寰安置业(成都)有限公司  成都市高新区盛冶街777号   2017-10-12
恒瑞新川中心  办公、商业   四川省恒瑞实业有限公司 高新区新川路599号  2017-09-30
融创香璟台西苑 商业、办公   成都顺宇置业有限公司  高新区锦蜀街35号   2017-09-28
融创香璟台西苑 商业、办公   成都顺宇置业有限公司  高新区锦蜀街35号   2017-09-26
江宇天府城二期 住宅、公寓   成都中奥华实业有限公司 高新区海洋路109号  2017-09-25
复地金融岛   车位  成都复地明珠置业有限公司    高新区环岛路1200号 2017-09-25
润莱金座    酒店、商业   成都市润莱置业有限公司 高新区吉庆一路288号 2017-09-19
北辰香麓小区  机动车位    成都北辰置业有限公司  高新区天府四街1869号    2017-09-15
金控金融后台服务中心  办公  成都金控置业有限公司  高新区天府四街300号 2017-09-01
汇众中心    商业、办公   四川汇众置业有限公司  成都市高新区永丰路7号 2017-08-25
中大文儒德   车位  成都浙中大地产有限公司 成都市高新区近慈路66号    2017-08-25
花样年·福年广场    车位  成都市诺亚舟实业有限公司    吉泰路 现房
华润时光里   商业、办公   成都华润置地和兴房地产开发有限公司   高新区观东一街666号 2017-08-18
朗基御今缘   车位、车库   成都市朗源房地产开发有限公司  高新区天府四街1999号    2017-08-17
乐活公社    商业、办公   东时置业成都有限公司  高新区观东一街1111号    2017-08-14
锦城南府D区  商业、办公   成都合创锦城实业有限公司    高新区剑南大道中段1395号  2017-08-08
朗基御今缘   住宅、公寓、商业    成都市朗源房地产开发有限公司  高新区天府四街1999号    2017-07-27
朗基御今缘   住宅、公寓、商业    成都市朗源房地产开发有限公司  高新区天府四街1999号    2017-07-27
朗基御今缘   住宅、公寓、商业    成都市朗源房地产开发有限公司  高新区天府四街1999号    2017-07-27
朗基御今缘   住宅、公寓、商业    成都市朗源房地产开发有限公司  高新区天府四街1999号    2017-07-27
朗基御今缘   住宅、公寓、商业    成都市朗源房地产开发有限公司  高新区天府四街1999号    2017-07-27
中德英伦联邦B区 住宅、公寓、商业    四川中德世纪置业有限公司    高新区中和会龙九组   2017-07-20
中德英伦联邦B区 住宅、公寓、商业    四川中德世纪置业有限公司    高新区中和会龙九组   2017-07-20
成都大魔方   机动车位、商业 成都招商远康房地产开发有限公司 高新区科华南路1366号    2017-07-19
凯德·世纪名邸 商业  成都鸿鹄展置业有限责任公司   高新区天府一街1339号    2017-07-11
龙湖九里晴川  商业  成都龙湖锦川置业有限公司    高新区雅和南四路216号    2017-07-06
北辰香麓小区  住宅、商业   成都北辰置业有限公司  高新区天府四街1869号    2017-07-04
朗基和今缘   住宅、公寓、商业    成都市朗升房地产开发有限公司  高新区吉龙一街333号 2017-07-03
朗诗熙华府   住宅、公寓、商业    寰安置业(成都)有限公司  成都市高新区盛治街777号   2017-07-03
领馆国际城       成都双流富豪实业有限责任公司  高新区梓州大道4111号    现房
领馆国际城       成都双流富豪实业有限责任公司  高新区梓州大道4111号    现房
时代晶座    商业、办公   四川佳兆港投资有限公司 高新区剑南大道中段1533号  2017-06-29
金控金融后台服务中心  办公用房    成都金控置业有限公司  高新区天府四街300号 2017-06-26
复地金融岛(A地块商业、办公Ⅱ区)   商业、办公   成都复地明珠置业有限公司    成都市高新区环岛路1288号  2017-06-23
华润时光里   商业、办公   成都华润置地和兴房地产开发有限公司   高新区观东一街666号 2017-06-22
朗基和今缘   住宅、公寓、商业    成都市朗升房地产开发有限公司  高新区吉龙一街333号 2017-06-20
嘉年华青年城  办公、商业、机动车位  成都市嘉锦置业有限公司 高新区中和街道新华社区三组   2017-06-16
中洲锦城湖岸小区    商业、机动车位 成都市银河湾房地产开发有限公司 高新区天府一街616号 2017-06-16
南城都汇商住项目第六期汇彩园(20#地块)地块20C商业工程    商业  和记黄埔地产(成都)有限公司    高新区荟锦路265号  2017-06-15
正成南郡    商业、办公   成都市正成中和置业有限公司   高新区应龙南一路555号    2017-06-15
新景.鼎南川宇 商业、车位   四川新景实业有限公司  成都市高新区中和街道新成仁路139号  2017-06-09
嘉祥瑞庭南城  商业、办公   成都竹岛置地发展有限公司    高新区益州大道中段1918号  2017-06-09
盛和林语(南区)  住宅、公寓、商业    成都人居置业有限公司  成都市高新区泰和二街123号  2017-06-07
盛和林语(北区)  住宅  成都人居置业有限公司  成都市高新区诚通路300号   2017-06-07
北辰朗诗南门绿郡(B区)  住宅、公寓   成都辰诗置业有限公司  成都市高新区同源街666号   2017-05-25
花样年·美年广场    商业、办公   四川西美投资有限公司  高新区天府大道中段1388号  2017-05-17
仁和春天国际广场    办公、商业   成都高新区仁和春天置业有限公司 高新区府城大道西段505号   2017-05-16
花样年·美年广场    办公、商业   四川西美投资有限公司  高新区天府大道中段1388号  2017-05-15
龙湖时代天街  住宅、公寓、商业    成都龙湖锦鸿置业有限公司    高新区合作路89号   2017-05-15
雄飞·新园名都 商业、办公   四川科成实业集团有限公司    高新区新园大道4号   2017-05-12
江宇天府城   办公、商业   成都中奥华实业有限公司 高新区中和东寺社区   2017-05-12
大源欢乐颂城  商业、办公   成都锐力投资管理有限公司    高新区天府三街1599号    2017-05-11
龙湖世纪城   商业、住宅   成都景汇置业有限公司  高新区世纪城路418号 2017-05-11
金房大榕湾人家 商业  成都金房集团有限公司  高新区石羊场路555号 2017-05-10
江宇天府城   商业、办公   成都中奥华实业有限公司 高新区中和东寺社区   2017-05-10
领地·环球金融中心   商业、办公、车位    领地集团股份有限公司  高新区吉泰路750号、天府二街151号 2017-04-28
北辰朗诗南门绿郡    商业、车位   成都辰诗置业有限公司  成都市高新区同源街777号   2017-04-28
复地金融岛(A地块商业、办公Ⅱ区)   商业、办公   成都复地明珠置业有限公司    成都市高新区环岛路1288号  2017-04-19
盛和林语(北区)  住宅  成都人居置业有限公司  成都市高新区诚通路300号   2017-04-17
盛和林语(南区)  住宅、公寓   成都人居置业有限公司  成都市高新区泰和二街123号  2017-04-17
龙湖时代天街  住宅、公寓、商业    成都龙湖锦鸿置业有限公司    高新区合作路89号   2017-04-14
中环丰锦苑   车位  长旺(成都)房地产开发有限公司   高新区丽都路700号  现房
金域名邸二期  商业  成都万科南城置业有限公司    高新区南华路1489号 2017-04-13
凯德·世纪名邸 车位  成都鸿鹄展置业有限责任公司   高新区天府一街1339号    2017-04-13
新成国际一期  商业、办公、车位    成都新成国际经济发展有限公司  成都市高新区新康南二路77号  2017-04-05
西部旅游运营中心    商业、办公   成都文化旅游开发建设有限责任公司    成都市高新区万象南路399号  2017-03-31
润富国际(二期)  商业、办公   成都润富置业有限公司  高新区交子大道998号 2017-03-29
红树湾二期   车位  成都万怡置业有限责任公司    高新区中和大道二段69号    2017-03-23
金控金融后台服务中心  办公  成都金控置业有限公司  高新区天府四街300号、云华路50号、吉泰四路111号 2017-03-22
南阳御龙府一期 住宅、公寓、商业    成都长冶房地产开发有限公司   高新区应龙北一路96号 2017-03-17
仁和春天国际广场    车位  成都高新区仁和春天置业有限公司 高新区府城大道西段505号   2017-03-16
锦城南府    车位  成都合创锦城实业有限公司    高新区天府三街855号 2017-03-06
大源欢乐颂城  商业、办公   成都锐力投资管理有限公司    高新区天府三街1599号    2017-01-25
大源欢乐颂城  商业、办公   成都锐力投资管理有限公司    高新区天府三街1599号    2017-01-25
北辰朗诗南门绿郡    住宅、商业   成都辰诗置业有限公司  成都市高新区同源街777号   2017-01-24
龙湖世纪城   车位  成都景汇置业有限公司  高新区世纪城路418号 2017-01-20
成都银泰中心  车位  成都银城置业有限公司  高新区天府大道北段1199号  2017-01-16
锦城南府E区  商业、办公   成都合创锦城实业有限公司    高新区剑南大道中段1399号  2017-01-09

《跟我一起学爬虫系列》4-使用urllib和beautifulsoup爬取网页相关推荐

  1. Python爬虫系列之抖音热门视频爬取

    Python爬虫系列之抖音热门视频爬取 主要使用requests库以及手机抓包工具去分析接口 该demo仅供参考,已经失效,需要抖音2019年5月最新所有接口请点击这里获取 抖音资源获取接口文档请点击 ...

  2. 从0开始学爬虫6比价工具开发1之爬取当当、京东的数据

    从0开始学爬虫6比价工具开发1之爬取当当.京东的数据 爬取当当数据 spider_dangdang.py #coding=utf-8import requests from lxml import h ...

  3. 进阶的爬虫系列 ——不得不说的贴吧爬取术

    进阶的爬虫系列 --不得不说的贴吧爬取术 感谢各位能点开我的这篇博文,才开始写,这个算是很简单的爬虫,文中如有错误和不足欢迎各位大神多多包涵指正,大家的建议是我不断前行的动力,废话不多说我们直接进入主 ...

  4. 一个咸鱼的python_一个咸鱼的Python爬虫之路(三):爬取网页图片

    学完Requests库与Beautifulsoup库我们今天来实战一波,爬取网页图片.依照现在所学只能爬取图片在html页面的而不能爬取由JavaScript生成的图. 所以我找了这个网站 http: ...

  5. java爬虫系列(三)——漫画网站爬取实战

    项目地址 数据库设计 ORM框架 代理浏览器 实战目标 代码解读 com.ouyang.crawlers.Manhua start() chapterBean() contentBean() 实测 启 ...

  6. Python爬虫系列之双色球开奖信息爬取

    Python基于Beautiful Soup库对双色球开奖信息进行爬取 代码仅供学习交流,请勿用于非法用途 小程序爬虫接单.app爬虫接单.网页爬虫接单.接口定制.网站开发.小程序开发 > 点击 ...

  7. 【Howe学爬虫】全国统计用区划代码爬取

    网络爬虫(又称为网页蜘蛛,网络机器人,在FOAF社区中间,更经常的称为网页追逐者),是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本.另外一些不常使用的名字还有蚂蚁.自动索引.模拟程序或者蠕虫 ...

  8. python爬虫教程下载-Python爬虫入门教程!手把手教会你爬取网页数据

    其实在当今社会,网络上充斥着大量有用的数据,我们只需要耐心的观察,再加上一些技术手段,就可以获取到大量的有价值数据.这里的"技术手段"就是网络爬虫.今天就给大家分享一篇爬虫基础知识 ...

  9. Python爬虫实例(2)-用BeautifulSoup爬取一个网页上的多张照片(以百度贴吧为例)

    上一篇博客,实现了下载一张图片的简单爬虫.但是其代码,仅仅能下载一张图片.爬虫作为数据分析的第一步工作,需要爬取的是海量数据:假设我想下载一个网站几十张图片,那怎么实现呢? 首先,我们利用框图或者伪代 ...

最新文章

  1. 「杂谈」白身,初识,不惑,有识,你处于深度学习哪一重境界了
  2. 视频上传、转码、切面、存储的思路
  3. C语言的main函数,究竟有几种写法?
  4. 平均值 oj 山东科技大学 c 语言作业
  5. Shell: 文本文件操作
  6. Python中List,tuple,Dictionary之间的区别
  7. mysql驱动和url在5.7以上版本变化
  8. linux zip文件解压命令详解
  9. 2021年煤炭生产经营单位(安全生产管理人员)复审考试及煤炭生产经营单位(安全生产管理人员)模拟考试题
  10. PulseAudio 模块化实现录音和放音
  11. python 监控文件变化 - python watchdog模块使用方法
  12. 利用matlab实现pid控制,利用Matlab实现PID控制仿真
  13. 【渝粤题库】陕西师范大学163104 景区管理 作业 (高起专)
  14. 2020 USACO OPEN--Sliver
  15. 瓜娃系列 (6) - ComparisonChain和primitives包
  16. Ubuntu18配置静态IP地址
  17. python 词云 教程
  18. MATLAB 数据频数统计
  19. 一个前端的MONGO救赎--1
  20. we8iso8859p1 java_jdbc连oracle数据库,输出到页面上是乱码,请问怎么解决?

热门文章

  1. 删除中间和后面的星号
  2. 自定义布局Dialog 自定义dialog右上角带叉号的dialog 点击右上角叉号关闭dialog
  3. <mvc:annotation-driven />有什么作用
  4. php const 怎么用,php const用法详解
  5. Andriod小程序——简单制作游戏中控制任务移动的轮盘
  6. 图像处理|opencv| 利用opencv把照片变换成素描风格
  7. LCD1602与51单片机
  8. 常用计算机二级题库,计算机等级考试题库
  9. 新手UI设计师必读:火爆海外设计圈的设计资源!
  10. 全国计算机等级考试二级python考纲考点一览