• 大小: 1KB
    文件类型: .py
    金币: 1
    下载: 0 次
    发布日期: 2021-05-09
  • 语言: Python
  • 标签: 爬虫  IP  地理位置  

资源简介

原理利用网页 www.ip138.com 可以查询ip地理位置的功能, 利用爬虫从中获取ip地理位置 ip地理位置存在 标签中

资源截图

代码片段和文件信息

#! /usr/bin/env python
#coding=utf-8

#原理利用网页 www.ip138.com  可以查询ip地理位置的功能,
#利用爬虫从中获取ip地理位置
#ip地理位置存在  标签中

import urllib2
from bs4 import BeautifulSoup

def get_http_content(url):
    try:
        user_agent = ‘Mozilla/4.0 (compatible; MSIE 5.5; Windows NT)‘
        headers = { ‘User-Agent‘ : user_agent }
        html = urllib2.Request(url headers = headers)
        myResponse = urllib2.urlopen(html)
        myPage = myResponse.read()
    except urllib2.URLError as e:
        return None
    try:
        bsObj = BeautifulSoup(myPage‘html5l

评论

共有 条评论