51搜学网数据爬取

项目应用Scrapy框架，爬取51搜学网学校数据，该demo仅作为技术学习，勿用于其他渠道。

# -*- coding: utf-8 -*-

# Define here the models for your scraped items
#
# See documentation in:
# https://doc.scrapy.org/en/latest/topics/items.html

import scrapy


class SchoolspiderItem（scrapy.Item）:
    # define the fields for your item here like:
    # 学校名称
    schoolName = scrapy.Field（）
    # 学校类型 中学、小学
    schoolType = scrapy.Field（）
    # 地区
    schoolRegion = scrapy.Field（）
    # 学校属性 全国重点
    schoolAttribute = scrapy.Field（）
    # 学校性质 公办
    schoolProperty = scrapy.Field（）
    # 学校地址
    schoolAddress = scrapy.Field（）
    # 学校联系方式
    schoolMobile = scrapy.Field（）
    # 学校省
    schoolProvince = scrapy.Field（）
    # 学校市
    schoolCity = scrapy.Field（）
    # 学校区
    schoolArea = scrapy.Field（）
    pass

 属性            大小     日期    时间   名称
----------- ---------  ---------- -----  ----

     文件         13  2018-12-17 11:23  schoolSpider\.git\COMMIT_EDITMSG

     文件        333  2018-12-14 15:48  schoolSpider\.git\config

     文件         73  2018-12-14 15:43  schoolSpider\.git\description

     文件        101  2018-12-17 09:06  schoolSpider\.git\FETCH_HEAD

     文件         23  2018-12-14 15:43  schoolSpider\.git\HEAD

     文件        478  2018-12-14 15:43  schoolSpider\.git\hooks\applypatch-msg.sample

     文件        896  2018-12-14 15:43  schoolSpider\.git\hooks\commit-msg.sample

     文件        189  2018-12-14 15:43  schoolSpider\.git\hooks\post-update.sample

     文件        424  2018-12-14 15:43  schoolSpider\.git\hooks\pre-applypatch.sample

     文件       1642  2018-12-14 15:43  schoolSpider\.git\hooks\pre-commit.sample

     文件       1348  2018-12-14 15:43  schoolSpider\.git\hooks\pre-push.sample

     文件       4951  2018-12-14 15:43  schoolSpider\.git\hooks\pre-rebase.sample

     文件       1239  2018-12-14 15:43  schoolSpider\.git\hooks\prepare-commit-msg.sample

     文件       3611  2018-12-14 15:43  schoolSpider\.git\hooks\update.sample

     文件       1221  2018-12-17 11:23  schoolSpider\.git\index

     文件        240  2018-12-14 15:43  schoolSpider\.git\info\exclude

     文件        479  2018-12-17 11:23  schoolSpider\.git\logs\HEAD

     文件        479  2018-12-17 11:23  schoolSpider\.git\logs\refs\heads\master

     文件        460  2018-12-17 11:23  schoolSpider\.git\logs\refs\remotes\origin\master

     文件        123  2018-12-14 15:44  schoolSpider\.git\objects\00\a1f650c024813ec508b43fa062cde5cb7b4ae4

     文件        164  2018-12-14 15:44  schoolSpider\.git\objects\01\7a5af4d59f5f74f29adf52bfa50a8006c0e4d0

     文件    1001733  2018-12-17 09:06  schoolSpider\.git\objects\06\122c7c790dca127ccdbee63147e0094c246ffb

     文件        554  2018-12-14 15:44  schoolSpider\.git\objects\26\c88a657cf6bf804707c695b78d79849767dc0f

     文件        419  2018-12-17 09:06  schoolSpider\.git\objects\53\8b7e188bf4a0ac4e16dd5d98dcf5ff4d00e056

     文件        123  2018-12-17 09:06  schoolSpider\.git\objects\60\03e9868604c22f338877c686f426d5e066ac8e

     文件        172  2018-12-17 09:06  schoolSpider\.git\objects\67\237a36b8a40886c6b9a06c5a3e728bb2c292b8

     文件       1048  2018-12-17 11:23  schoolSpider\.git\objects\75\21a0a1cbe10a09873537f12e603c50908345c7

     文件        220  2018-12-17 09:06  schoolSpider\.git\objects\81\4fc57f3fe432d1ae4aec6cc448979b90049887

     文件        599  2018-12-14 15:44  schoolSpider\.git\objects\82\c8266263a0c0eb1ab96cfcdd6386e521b7f620

     文件        124  2018-12-17 11:23  schoolSpider\.git\objects\86\0e45310e37f161f3b3e66ba13b8e534a42bfac

............此处省略99个文件信息