首页 > 编程语言 >requests爬虫实践之安居客二手房屋数据(python实现)

requests爬虫实践之安居客二手房屋数据(python实现)

时间:2023-06-20 15:04:45浏览次数:69  
标签:朝阳 中层 python house 低层 建造 地铁 二手房屋 requests


1.先从安居客官网上淘到如下数据(详细方法可见博主爬取爱彼迎那篇博客):

requests爬虫实践之安居客二手房屋数据(python实现)_爬虫


2.源码(警告:若频繁爬取安居客官网数据,将被要求入网验证…)

import requests
    from bs4 import BeautifulSoup
    headers={'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74.0.3729.131 Safari/537.36'}#定制请求头,之前博客有专门讲过
    link='https://beijing.anjuke.com/sale/p1/#filtersort'
    r=requests.get(link,headers=headers,timeout=20)
    soup=BeautifulSoup(r.text,"html.parser")
    house_list=soup.find_all('li',class_="list-item")#包含房屋所有信息的地址
    z=0
    for house in house_list:
        name=house.find('div',class_="house-title").a.text.strip()
        information=house.find('div',class_='details-item').text.strip()
        address=house.find('span',class_="comm-address").text.strip()
        tags=house.find('div',class_='tags-bottom').text.strip()
        broker=house.find('div',class_="broker-item").text.strip()
        price=house.find('span',class_="price-det").text.strip()
        unit=house.find('span',class_="unit-price").text.strip()
        print(name,information,address,tags,broker,price,unit)
        print("/**************************************************************************/")
        z=z+1
    print("第一页共有:"+str(z)+"套房子。")

3.输出:

北京城建琨廷 电梯次顶层 视野好 观山景观房 急售价可谈 2室1厅|89m²|高层(共15层)|2012年建造 北京城建琨廷(北区)  
                    房山-窦店-于瓦北路17号 景观房环境优美品质小区 李江涛 221万 24643元/m²
/**************************************************************************/
蓝河湾三层精装两居室,中间楼层,临近高铁站万象汇 2室2厅|89m²|共5层|2013年建造 蓝河湾  
                    密云-密云周边-水源路 近学校南北通透配套成熟 鲁全贵 210万 23596元/m²
/**************************************************************************/
前门精装四合院 标准二进院已通燃气 有交易经验 看房方便 7室5厅|499m²|共1层|2015年建造 薛家湾胡同小区  
                    东城-前门-薛家湾胡同 靠近花园视野好配套成熟 李海娟 9999万 200180元/m²
/**************************************************************************/
(清盘特价)万科精装,通透三居,首付90万,可公积金,观湖景 3室2厅|88m²|中层(共10层)|2018年建造 翡翠西湖  
                    丰台-云岗-山湖路 新房房源近地铁配套成熟 吴琼 280万 31818元/m²
/**************************************************************************/
汇景湾 通透三居 全明格局 低首付 税少 有钥匙看房方便急售 3室2厅|117m²|中层(共18层)|2016年建造 首城汇景湾东区  
                    平谷-平谷城区-金河街6号 近地铁交通便利品质小区 刘涛 260万 22222元/m²
/**************************************************************************/
地上正规4居 地下可自由设计 带1车位 西山壹号院好房 5室3厅|376m²|低层(共6层)|2012年建造 西山壹号院南区  
                    海淀-西北旺-圆明园西路 近地铁 李凯旋 3180万 84574元/m²
/**************************************************************************/
业主每天都问客户情况!70平观景客厅)南向三卧)全天配合看房 4室2厅|292m²|低层(共23层)|2008年建造 裘马都  
                    朝阳-太阳宫-尚家楼路2号 近地铁三房朝南独立电梯 周玉良 2499万 85573元/m²
/**************************************************************************/
新出大三居全新,中间单元,安静明卫 3室3厅|229m²|中层(共10层)|2016年建造 万科如园  
                    海淀-西北旺-永丰路 主卧朝南一梯两户景观房 张海巍 2100万 91703元/m²
/**************************************************************************/
西山华府珑园|2明卫 高层西边户 双客厅格局 活动空间足 4室2厅|179m²|高层(共7层)|2009年建造 亿城西山华府珑园  
                    海淀-马连洼-马连洼南路 南北通透小区中心近地铁 魏振国 1750万 97542元/m²
/**************************************************************************/
新出融泽府边户型 次顶层俯瞰护城河 独梯独户带独立保姆间 4室2厅|340m²|高层(共19层)|2008年建造 融泽府  
                    西城-复兴门-真武庙路四条8 近地铁近学校 董超 5455万 160008元/m²
/**************************************************************************/
正南北 500平花园 独栋带电梯,随时看房,壹号庄园 5室2厅|532m²|共3层|2014年建造 北京壹号庄园(东方普罗旺斯四期)  
                    昌平-北七家-定泗路88号 独立电梯独栋别墅近地铁 李云飞 2799万 52613元/m²
/**************************************************************************/
颐和园旁,千平独栋!12.8米大采光面,单层面积250平 4室3厅|750m²|共2层|2010年建造 龙湖颐和原著  
                    海淀-西苑-二龙闸路 近地铁 黎雪欢 6999万 93320元/m²
/**************************************************************************/
全新样板间,全落地窗,西边户,家具家电全含,影音,台球室 4室2厅|382m²|共3层|2009年建造 御园  
                    海淀-西苑-玉泉山路,近厢红旗路 带花园拎包入住安全性高 李斌 4900万 128208元/m²
/**************************************************************************/
选材有考究,保利金钻,法国木纹,中国纯黑麻,大理石马赛克加配 4室2厅|466m²|中层(共10层)|2014年建造 泛海世家  
                    朝阳-朝阳公园-华章东路1号 次新小区素质住户安全性高 刘超 6680万 143348元/m²
/**************************************************************************/
3套一起卖,楼上楼下,客厅精装,卧室,高层边户! 4室2厅|460m²|高层(共10层)|2014年建造 泛海世家  
                    朝阳-朝阳公园-华章东路1号  闫巧莎 8999万 195588元/m²
/**************************************************************************/
金融街电梯房 小户型主朝东采光好 太平桥大街一居 1室1厅|44m²|低层(共18层)|1989年建造 太平桥大街6号楼  
                    西城-金融街-太平桥大街6号 近地铁配套成熟繁华地段 尹雁琳 648万 145618元/m²
/**************************************************************************/
金融街 宏汇园低总价两居  东西通透 满五年 2室1厅|60m²|地下(共7层)|2001年建造 宏汇园小区  
                    西城-西单-辟才胡同 近地铁近学校配套成熟 尹雁琳 940万 156667元/m²
/**************************************************************************/
特价,露天泳池,送420平私家花园,星河湾南北4居,带保姆间 3室2厅|271m²|低层(共19层)|2006年建造 畅园(星河湾)  
                    朝阳-朝青板块-四季星河中街2号  伍勇 2650万 97491元/m²
/**************************************************************************/
六道口,05年新社区,大一居,精装修!诚心出售 1室1厅|78m²|低层(共20层)|2004年建造 清枫华景园  
                    海淀-学院路-林大北路 近地铁近学校 赵峻 610万 78125元/m²
/**************************************************************************/
急售低总价四居室 三面采光 高品质 低密度 世纪城远大园一区 4室2厅|212m²|中层(共11层)|2002年建造 远大园一区  
                    海淀-世纪城-远大西路 素质住户品质小区低密度 曹丽军 1880万 88516元/m²
/**************************************************************************/
3年装修成新房。5个房间都朝南。带200平南院。十足全新房 5室3厅|513m²|共3层|2010年建造 龙湾别墅  
                    顺义-后沙峪-裕园路 近地铁中国风 李文静 3600万 70175元/m²
/**************************************************************************/
9号楼!高层东边户)双卧室夹客厅朝南)正观喷泉广场和湖心岛屿 4室2厅|222m²|中层(共24层)|2008年建造 裘马都  
                    朝阳-太阳宫-尚家楼路2号 近地铁三房朝南独立电梯 周玉良 2350万 105856元/m²
/**************************************************************************/
北京院子精装全新!业主移民!11.5米面宽 很着急 价格可谈 4室3厅|324m²|共3层|2016年建造 泰禾北京院子  
                    朝阳-孙河-顺黄路 景观房送车位品质小区 王斌斌 3799万 117181元/m²
/**************************************************************************/
降500万 实拍原房 17米楼距 真独栋700平 空房入住快 4室3厅|339m²|共2层|2001年建造 紫玉山庄  
                    朝阳-亚运村-紫玉东路1号 近地铁 卢鑫 7500万 221239元/m²
/**************************************************************************/
猜您喜欢)比新房少1000万 中粮瑞府中府园 钥匙随时看 4室2厅|419m²|共4层|2013年建造 中粮瑞府  
                    朝阳-孙河-香江北路 近地铁独立电梯独栋别墅 孙云 4000万 95465元/m²
/**************************************************************************/
大湖山庄5居室 花园350 独栋精装修 露台80 四个车位 5室4厅|666m²|共2层|2003年建造 大湖山庄  
                    朝阳-来广营-和平路8号 近地铁中国风 王哲 4199万 63048元/m²
/**************************************************************************/
全新房 2月降700万 刚可以网络宣传 欢迎详询同看紫玉山庄 5室4厅|542m²|共2层|2014年建造 润泽御府  
                    朝阳-北苑-清苑路 近地铁 赵宏宇 5888万 108565元/m²
/**************************************************************************/
金融街典藏大宅 层高3.25.3M 三面采光 方便看房 4室3厅|268m²|高层(共7层)|2004年建造 中海凯旋  
                    西城-金融街-太平桥98号 近地铁近学校 李凯旋 5360万 199323元/m²
/**************************************************************************/
华府带100平露台的房子 精装修 好户型 4室2厅|220m²|低层(共8层)|2008年建造 亿城西山华府禧园  
                    海淀-马连洼-马连洼南路  李凯旋 1900万 86364元/m²
/**************************************************************************/
推开门,以为自己回家了,欧式花廊小院,邀您来赏,龙湾别墅 4室3厅|382m²|共3层|2010年建造 龙湾别墅  
                    顺义-后沙峪-裕园路 近地铁配套成熟环境优美 马咏昶 2799万 73272元/m²
/**************************************************************************/
南北双花园,安静位置,装修保养好 5室3厅|220m²|共3层|2009年建造 龙湖滟澜山  
                    顺义-中央别墅区-裕园路 环境优美次新小区品质小区 马咏昶 2299万 104500元/m²
/**************************************************************************/
降700万!有装修随时可看)远洋万和公馆星河湾泛海国际臻园 3室2厅|271m²|高层(共21层)|2015年建造 恒大华府  
                    朝阳-东坝-东坝中街 近地铁配套成熟交通便利 赵宏宇 2300万 84871元/m²
/**************************************************************************/
本房4000万全含小府院同户型成交价4500万 3室3厅|419m²|共2层|2015年建造 中粮瑞府  
                    朝阳-孙河-香江北路 近地铁 张可 4000万 95465元/m²
/**************************************************************************/
(高层) 采光好 14年重装 简约风  腾资格 想快点出手 3室2厅|149m²|高层(共8层)|2008年建造 西城晶华  
                    西城-金融街-太平桥大街8号 近地铁近学校位置安静 李斌 2999万 200468元/m²
/**************************************************************************/
二环精装现房,不要购房资格,外地购房首 选,层层露台 2室1厅|229m²|低层(共27层)|2017年建造 长安太和  
                    东城-东单-建国门内大街甲11号 交通便利繁华地段品质小区 葛新超 3893万 170000元/m²
/**************************************************************************/
2卧室客厅朝南!3面花园,200米楼间距,看公园! 3室2厅|207m²|中层(共20层)|2007年建造 泛海国际碧海园  
                    朝阳-朝阳公园-姚家园路97号 近地铁小户型 闫巧莎 1999万 96570元/m²
/**************************************************************************/
19年全新精装 五居设计  南北双花园  可看实房 5室3厅|220m²|共3层|2009年建造 龙湖滟澜山  
                    顺义-中央别墅区-裕园路 景观房 张双印 2399万 109045元/m²
/**************************************************************************/
全新房!双卧室夹客厅朝南)四居可改五居)高楼层东边户 4室3厅|300m²|中层(共24层)|2014年建造 红玺台  
                    朝阳-太阳宫-太阳宫二街3号 近地铁近学校独立电梯 周玉良 4100万 136285元/m²
/**************************************************************************/
看了还想看)装修特别赞)双卧夹客厅朝南)业主每天都问客户情况 4室2厅|295m²|低层(共25层)|2013年建造 红玺台  
                    朝阳-太阳宫-太阳宫二街3号 近地铁近学校三房朝南 周玉良 3800万 128814元/m²
/**************************************************************************/
封面为北向视野图)换了壁纸保养很棒)不临路大面积三居室 3室2厅|206m²|中层(共18层)|2007年建造 泛海国际碧海园  
                    朝阳-朝阳公园-姚家园路97号 近地铁 张可 1999万 97039元/m²
/**************************************************************************/
西便门西里东南向三居室,采光好,视野好,诚售 3室1厅|77m²|高层(共20层)|1985年建造 西便门西里小区  
                    西城-西便门-西便门内大街 近地铁 郭坤 770万 99870元/m²
/**************************************************************************/
10号线角门东 南北通透大三居 户型不错诚意出售 3室2厅|117m²|高层(共11层)|2004年建造 怡然家园(南区)  
                    丰台-西罗园-西马场路6号 近地铁 谭可江 612万 52276元/m²
/**************************************************************************/
西便门西里三居全天采光,临昆玉河,望西山,尽收眼前。通风好 3室1厅|77m²|高层(共20层)|1985年建造 西便门西里小区  
                    西城-西便门-西便门内大街 近地铁 郭坤 690万 89494元/m²
/**************************************************************************/
全南向一居室 低楼层厅可摆电视沙发采光充足 看房随时 1室1厅|49m²|低层(共6层)|1987年建造 八里庄北里小区  
                    朝阳-石佛营-朝阳路 近地铁近学校 刘涛 279万 56216元/m²
/**************************************************************************/
新龙城三居室双卧朝南  满五一套随时可看 3室2厅|110m²|低层(共11层)|2006年建造 新龙城  
                    昌平-回龙观-昌平路380号 近地铁近学校交通便利 孙春燕 585万 52793元/m²
/**************************************************************************/
好房推介 商满五年一套 中间层 南北通透 户型正 采光好 2室1厅|98m²|中层(共6层)|2008年建造 天露园一区  
                    昌平-回龙观-龙禧二街 近地铁 崔静 400万 40737元/m²
/**************************************************************************/
东城区 天坛公园边 中低楼层南北通透 满五年公房 随时看房 2室1厅|54m²|中层(共6层)|1980年建造 天坛西里东区  
                    东城-天坛-永定门东街 近地铁配套成熟交通便利 赵丽 450万 83026元/m²
/**************************************************************************/
坐拥繁华位置 步行可到地铁 回龙观温馨两居 户型正 采光好 2室1厅|72m²|中层(共6层)|1996年建造 龙华园  
                    昌平-龙泽-回龙观西大街1号 近地铁近学校 崔静 369万 50666元/m²
/**************************************************************************/
东坝首开常青藤四期三室二厅二卫,首付少,价格低 3室2厅|152m²|低层(共9层)|2014年建造 首开常青藤B区  
                    朝阳-东坝-东坝中街11号  赵超 830万 54548元/m²
/**************************************************************************/
曙光西里 板楼 随时看房 满五 有钥匙 2室1厅|54m²|低层(共6层)|1982年建造 曙光西里  
                    朝阳-西坝河-曙光西路 近地铁近学校 蔺明虎 368万 67959元/m²
/**************************************************************************/
永善里,全南两居室,采光足,看房有钥匙 2室1厅|100m²|中层(共24层)|2005年建造 永善里小区  
                    丰台-北大地-电报局街 近地铁近学校全南户型 杨兆和 585万 58447元/m²
/**************************************************************************/
天通苑西一区 南北通透 板楼三居室 经典户型 3室1厅|160m²|中层(共13层)|2001年建造 天通西苑一区  
                    昌平-天通苑-立汤路 近地铁近学校配套成熟 邰俊杰 510万 31784元/m²
/**************************************************************************/
物资部大院 !南北通透! 全明格局!满五年公房!税费低!急售 2室1厅|77m²|中层(共6层)|1999年建造 物资部大院  
                    西城-月坛-月坛北街25号 近地铁配套成熟交通便利 牛庆华 1000万 128700元/m²
/**************************************************************************/
五年 一套,大三居,京贸国际城西区临月亮河城堡加华印象街 3室2厅|128m²|低层(共35层)|2011年建造 京贸国际城  
                    通州-武夷花园-芙蓉东路1号  张广晴 728万 56777元/m²
/**************************************************************************/
东二环南北3居东方瑞景满五唯一装修保养好欢迎咨询 4室1厅|213m²|低层(共26层)|2004年建造 东方瑞景  
                    朝阳-建外大街-建国门外大街16号  汤海潮 1560万 73140元/m²
/**************************************************************************/
南北通透三居室 满五唯一 看房方便 3室2厅|91m²|低层(共11层)|2012年建造 青秀城(西区)  
                    丰台-玉泉营-马家楼路1号  姜建盘 650万 71421元/m²
/**************************************************************************/
弘善家园满两年大两居空房有钥匙中间楼层主卧带阳台业主急售 2室1厅|79m²|中层(共28层)|2009年建造 弘善家园  
                    朝阳-潘家园-华威南路 近地铁 张杰 310万 39191元/m²
/**************************************************************************/
京棉新城精装修东向两居室 2室1厅|88m²|中层(共22层)|2006年建造 京棉新城  
                    朝阳-十里堡-朝阳路 近地铁配套成熟繁华地段 白雪磊 535万 60119元/m²
/**************************************************************************/
住总万科橙 精装两居室 不临街 小区安静位置 2室1厅|76m²|低层(共22层)|2015年建造 住总万科橙  
                    大兴-生物医药基地-新源大街 近地铁 于鹏 375万 48975元/m²
/**************************************************************************/
东四环 十里堡 海华堂全南 两居,无遮挡,装修好 2室1厅|98m²|中层(共33层)|2011年建造 海华堂  
                    朝阳-十里堡-朝阳路 近地铁 白雪磊 615万 62197元/m²
/**************************************************************************/
第一页共有:60套房子。


标签:朝阳,中层,python,house,低层,建造,地铁,二手房屋,requests
From: https://blog.51cto.com/u_16165815/6522659

相关文章

  • Python开发系列课程(2) - 语言元素
    语言元素指令和程序计算机的硬件系统通常由五大部件构成,包括:运算器、控制器、存储器、输入设备和输出设备。其中,运算器和控制器放在一起就是我们通常所说的中央处理器,它的功能是执行各种运算和控制指令以及处理计算机软件中的数据。我们通常所说的程序实际上就是指令的集合,我们写程......
  • python 星号(*) 还能这么用
    哈喽大家好,我是咸鱼今天跟大家介绍一下python当中星号(*)的一些用法首先大家最常见的就是在python中*是乘法运算符,实现乘法sum=5*5#25除此之外,还有一种常见的用法就是*号操作符在函数中的用法单星号(*)在函数中用法举个例子,你有一个函数,用来实现两个数求和def......
  • Python进阶-上下文管理器
    上下文管理器定义包装任意代码确保执行的一致性语法with语句__enter__和__exit__方法classContextManager(object):def__init__(self):self.entered=Falsedef__enter__(self):self.entered=Truereturnself......
  • [python][图像切割]给定手写数字图片完成数字切割
    importtorchimporttorch.nnasnnfromtorchvisionimporttransformsfromPILimportImage,ImageOpsimportnumpyasnpimg=Image.open("QQ.png")imgdefCutImage(img):img=img.convert("L")threshold=128img=img.point(......
  • 【Fidder网络抓包+Python爬虫】下载微信小程序视频
    首先声明本篇博客以学习为目的,侵权即删。文章目录1.Fidder抓包1.1在电脑上打开微信小程序视频播放页以及Fidder软件1.2点击视频播放按钮,并查看Fidder抓到的数据包2.Python爬虫2.1视频下载2.2视频合并2.3完整代码3.写在最后1.Fidder抓包       关于fidder软件的安......
  • Python中获取路径/文件的父目录
    本教程将讲解在Python中获取一个路径的父目录的各种方法。父目录是指高于或高于给定目录或文件的目录。例如,路径 C:\folder\subfolder\myfile.txt 的父目录是 C:\folder\subfolder。除了根目录外,每个目录都有一个父目录。1、使用 pathlib 模块的 path.parent() 方法获......
  • wxpython使用matplotlib.pyplot绘制GUI嵌入式统计图
    在使用wxpython编写GUI时,如果需要在GUI上显示统计图,这里就可以用到matplotlib.pyplot;一、首先就是导入matplotlib.pyplot模块frommatplotlib.backends.backend_wxaggimportFigureCanvasWxAggasFigureCanvasimportmatplotlib.pyplotasplt然后就需要一个容器,可以理......
  • Python中的字符串分割技巧:split方法的妙用
    Python是一种广泛使用的编程语言,提供了许多强大的字符串处理功能。其中,split方法是一项常用的技术,它可以将字符串按照指定的分隔符进行切割,使得处理文本数据变得更加简洁和高效。本文将介绍split方法的使用方法和几个实用的应用场景,帮助读者更好地掌握这一技巧。split方法的基本......
  • python爬虫学习之定制请求头
    1.在Chrome浏览器中点击右键选择“检查”命令;2.打开后选择Network;3.按下ctrl+r,在其中找到需要请求的网站,单击后选择Headers;4.得到请求头信息为:Host:www.baidu.comReferer:https://www.baidu.com/?tn=98012088_2_dg&ch=7User-Agent:Mozilla/5.0(WindowsNT10.0;WOW64)A......
  • Python学习总结之三(if语句)
    1.其实Python和C语言中的if语句是极相似的,因为if语句的职能便是判断,区别如下:(1).Python(无括号,有冒号且缩进):ifcar=='byd':print(car.upper())(2).C(有括号,无冒号且缩进无意义):if(car=="byd")printf("%s",car);2.检查是否不相等:将“==”换为"!="即可。3.比较数字......