资源简介
非常简单的一个闲鱼爬虫,可以爬取自己要求的价格区间的商品
代码片段和文件信息
# encoding:utf-8
import requests
import re
import time
def getitem(url):
try:
headers = {
‘User-Agent‘: ‘Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_2) AppleWebKit/537.36 (KHTML like Gecko) Chrome/47.0.2526.80 Safari/537.36‘
}
r = requests.get(url headers = headers timeout=30)
r.raise_for_status()
r.encoding = r.apparent_encoding
# time.sleep(20)
return r.text
except:
print(“出现错误!“)
def getitemdata(url):
# print(url)
text = getitem(url)
price = re.findall(r‘“price“:“.*?“‘ text)
descr = re.findall(r‘“describe“:“.*?“‘ text)
itemurl = re.findall(r‘“itemUrl“:“.*?“‘ text)
title = re.findall(r‘“title“:“.*?“‘ text)
ilist = []
# print(“ilist:“ilist)
filter1 = [‘ps4‘ ‘Ps4‘ ‘PS4‘]
filters = [‘只出本地‘‘psv‘‘店里‘‘只限‘‘只卖‘‘限北京面交‘‘限天津面交‘‘Ps3‘‘要求‘\
‘外地不出‘‘iPhone‘‘收台‘‘铁三角‘‘rc‘ ‘RC‘‘宝马‘‘游泳‘‘外地不卖‘‘空调‘‘gpd‘‘ipad‘‘电吉他‘\
‘猫‘‘华为‘‘小叶‘‘体感枪‘‘雷蛇‘‘专用耳机‘‘代购‘‘技嘉‘‘电玩‘‘投影‘‘汽车‘‘显卡‘‘限本地‘‘限同城‘‘3DS‘\
‘苹果‘‘联想‘‘wii‘‘Wii‘‘WII‘ ‘收个‘ ‘收一台‘‘笔记本‘‘典藏版‘‘apple‘‘2ds‘‘switch‘‘三星‘‘便携‘‘华硕‘‘x-rover‘\
‘小米‘‘PSV‘‘方向盘‘‘收PS4‘ ‘慢收‘ ‘显示屏‘‘ps3‘ ‘OPPO‘‘3ds‘‘求购‘‘全新未拆‘‘摇杆‘‘笔记本‘‘耳
相关资源
- Python-京东抢购助手包含登录查询商品
- python网络爬虫获取景点信息源码
- python爬取维基百科程序语言消息盒(
- python新浪微博爬虫
- 12306爬虫实现
- 中国裁判文书网爬虫
- Python爬虫相关书籍.zip
- 豆瓣电影排行爬虫
- 疫情数据爬虫并绘制柱状图.py
- python新浪微博爬虫,爬取微博和用户
- Python数据爬虫及可视化分析
- 一套最新价值1680元的python爬虫实战全
- 测试工程师相关学习视频(包含pyth
- 11-Python爬虫工程师-App抓取进阶
- 基于10000网页python搭建搜索引擎课程设
- 法律判决文书python爬虫、以及数据处
- python新浪微博爬虫,爬取微博和用户
- Python网络爬虫实战.epub
- Python爬虫、Flask框架与ECharts实现数据
- Python爬虫入门到实战 (二花) PDF版
- python网络爬虫爬取整个网页
- Python-利用Python图虫网摄影作品
- ScrapyMySQL爬取链家网中北京地区租房信
- 学习python爬虫看一篇就足够了之爬取
- python3爬虫
- Python项目案例开发从入门到实战源代
- 基于Python的网络爬虫系统的设计与实
- 基于Python的分布式网络爬虫系统的设
- 爬取优酷电影代码
- 基于Python网络爬虫毕业论文.doc
评论
共有 条评论