链家房价数据

对于佛山南海链家网数据按不同镇街进行爬取，有相应的代码和结果

import requests
import time
from bs4 import BeautifulSoup
import pandas as pd

#设置列表页URL的固定部分
url=‘http://fs.lianjia.com/ershoufang/‘
#设置页面页的可变部分
page=（‘pg‘）

#设定头文件
headers = {‘User-Agent‘:‘Mozilla/5.0 （Windows NT 6.1） AppleWebKit/537.11 （KHTML like Gecko） Chrome/23.0.1271.64 Safari/537.11‘
‘Accept‘:‘text/html;q=0.9*/*;q=0.8‘
‘Accept-Charset‘:‘ISO-8859-1utf-8;q=0.7*;q=0.3‘
‘Accept-Encoding‘:‘gzip‘
‘Connection‘:‘close‘
‘Referer‘:‘http://www.baidu.com/link?url=_andhfsjjjKRgEWkj7i9cFmYYGsisrnm2A-TN3XZDQXxvGsM9k9ZZSnikW2Yds4s&wd=&eqid=c3435a7d00006bd600000003582bfd1f‘
}



#设定需要的小区

xiaoqu=[“dali1““danzao““guichengbeinanhaiguangchang““guichengdongchengshiguangchang““lishui13““qiandenghu““shishan2““xiqiao“]
yema= [35119323121]

#

 属性            大小     日期    时间   名称
----------- ---------  ---------- -----  ----
     目录           0  2018-09-03 10:48  房地产\
     文件       19650  2018-08-31 10:47  房地产\dali1.csv
     文件       27097  2018-08-31 10:50  房地产\danzao.csv
     文件       68741  2018-08-31 10:52  房地产\guichengbeinanhaiguangchang.csv
     文件       42660  2018-08-31 17:17  房地产\guichengdongchengshiguangchang.csv
     文件        2691  2018-08-31 10:44  房地产\lianjia.py
     文件       16117  2018-08-31 10:55  房地产\lishui13.csv
     文件      146872  2018-08-31 11:01  房地产\qiandenghu.csv
     文件       56832  2018-08-31 11:09  房地产\shishan2.csv
     文件        2286  2018-08-31 11:05  房地产\xiqiao.csv
     文件       12625  2018-08-31 17:17  房地产\街道房价.csv