资源简介
网易云评论的爬取,全部代码已经在压缩包里拉,大家自取
代码片段和文件信息
# -*- coding: utf-8 -*-
__author__ = “mendy“
import requests
import json
class Spider():
def __init__(self):
self.root_pattern = ‘‘
self.fromdata = {‘params‘:“OJi/RWqNbfxa4YK6UGm20cdvxu2WcYTCs861nLoI+5rICuyep1rotCRt/KcJ5Z+Iibc4x6ykWCIX9ITBDtii8Sz/FlTNIS4b5+JmaYMCaPPgLgqqvmseAVXLTUNR8dB51h9lvoO4NIrwCOuG+2qZFOdwzIhWxb+5ZV28QqiWYWxDA+ux2/O0Wd2zcDPo8/J4“
‘encSecKey‘:“bfac866fbfcdd86a16090ba4c5f080c4f0907f0dd6c0445c8d0ad432aaa0df6463908c4b94e11b26cdc7a38bfd710643c14b34eed631cee07122576837dbec497a81f60890765c78841721c47e22d236e821d24cda3e88b3fe6ede3a95634c22b71fecfcb8a68f190949d5c45fbf796aafb65c74abd57b62c06b277a2fcb06dc“}
self.header = {“User-Agent“:“Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML like Gecko) Chrome/64.0.3282.168 Safari/537.36“}
self.url = ‘https://music.163.com/weapi/v1/resource/comments/R_SO_4_4878122?csrf_token=‘
def __get_jsons(selfurl):
jsons = requests.post(urldata=self.fromdataheaders=self.header)
print(jsons.status_code)
print (jsons.text)
print (json.loads(jsons.text))
print (jsons.json())
#requests中response.json()方法等同于json.loads(response.text)方法
num = 1
for user in jsons.json()[‘comments‘]:
print (“%d “%num)
print(user[“user“][“nickname“]+“:“+user[“content“]+“\t点赞数“+str(user[“likedCount“]))
num += 1
def run(self):
self.__get_jsons(self.url)
if __name__==“__main__“:
spider = Spider()
spider.run()
属性 大小 日期 时间 名称
----------- --------- ---------- ----- ----
目录 0 2018-06-22 16:18 wangyicloud_comment\
目录 0 2018-09-01 17:43 wangyicloud_comment\.idea\
目录 0 2018-06-22 16:18 wangyicloud_comment\.idea\inspectionProfiles\
文件 201 2018-06-22 16:28 wangyicloud_comment\.idea\misc.xm
文件 290 2018-06-22 16:08 wangyicloud_comment\.idea\modules.xm
文件 515 2018-06-22 16:28 wangyicloud_comment\.idea\wangyicloud_comment.iml
文件 13180 2018-09-01 17:43 wangyicloud_comment\.idea\workspace.xm
目录 0 2018-06-23 15:39 wangyicloud_comment\spider\
文件 1602 2018-06-23 15:39 wangyicloud_comment\spider\wangyispider.py
文件 45 2018-06-22 16:18 wangyicloud_comment\spider\__init__.py
目录 0 2018-06-22 16:09 wangyicloud_comment\venv\
目录 0 2018-05-16 19:19 wangyicloud_comment\venv\Include\
文件 46621 2017-02-13 22:37 wangyicloud_comment\venv\Include\abstract.h
文件 1144 2017-02-13 22:37 wangyicloud_comment\venv\Include\asdl.h
文件 243 2017-02-13 22:37 wangyicloud_comment\venv\Include\ast.h
文件 824 2017-02-13 22:37 wangyicloud_comment\venv\Include\bitset.h
文件 948 2017-02-13 22:37 wangyicloud_comment\venv\Include\boolob
文件 955 2017-02-13 22:37 wangyicloud_comment\venv\Include\bufferob
文件 1998 2017-02-13 22:37 wangyicloud_comment\venv\Include\bytearrayob
文件 1179 2017-02-13 22:37 wangyicloud_comment\venv\Include\bytesob
文件 2879 2017-02-13 22:37 wangyicloud_comment\venv\Include\bytes_methods.h
文件 679 2017-02-13 22:37 wangyicloud_comment\venv\Include\cellob
文件 5215 2017-08-26 23:47 wangyicloud_comment\venv\Include\ceval.h
文件 3085 2017-02-13 22:37 wangyicloud_comment\venv\Include\classob
文件 3019 2017-02-13 22:37 wangyicloud_comment\venv\Include\cob
文件 4519 2017-02-13 22:37 wangyicloud_comment\venv\Include\code.h
文件 6383 2017-02-13 22:37 wangyicloud_comment\venv\Include\codecs.h
文件 1105 2017-02-13 22:37 wangyicloud_comment\venv\Include\compile.h
文件 1919 2017-02-13 22:37 wangyicloud_comment\venv\Include\complexob
文件 2078 2017-02-13 22:37 wangyicloud_comment\venv\Include\cStringIO.h
文件 8552 2017-02-13 22:37 wangyicloud_comment\venv\Include\datetime.h
............此处省略2139个文件信息
- 上一篇:《中国人口增长预测模型》等.zip
- 下一篇:扩频通信手册——经典书籍收藏版
相关资源
- pclint集成source insight
- 原文+代码DnCNN for Image Denoising
- opencv结构光生成代码
- 易买网项目全代码
- 2元云购项目源代码
- MAX17043电量检测模块代码
- 梅兰商贸PSD档+页面代码
- 平衡小车PCB+代码+原理图
- stm32f103的正弦波代码
- 红外手势识别传感器STM32代码
- 《区域经济研究实用方法》随书数据
- zigbee无线定位代码
- SpeexDemo代码
- 小程,巧应用 微信小程序开发实战第
- 串口调试助手 vc 源代码
- 医疗健康类app代码框架
- nRF51822手环代码
- 基于STM32MPU6050 源代码 亲测可用
- 滚球控制系统代码
- 51单片机实现TB6560步进电机驱动的原理
- 艾科603源代码
- 逆向工程核心原理随书代码及
- 基于Tensorflow的小波神经网络实验代码
- 基于STM32的CCD智能寻迹小车源代码
- 瑞昱8211PHY芯片配置FPGA代码
- ESP8266WiFi探针代码
- lpc1114 - 11xx 比较全的例程源代码
- 14个单片机工程源代码,包括PCB和VC界
- NeHe OpenGL中文教程+源代码
- 最全HZK12HZK16HZK24HZK32HZK40HZK48ASC12 ASC1
评论
共有 条评论