Python-指定的抖音Douyin号的视频抖音爬虫

Python-下载指定的抖音Douyin号的视频抖音爬虫

# -*- coding: utf-8 -*-
import os
import sys
import getopt
import urllib.parse
import urllib.request
from urllib.parse import urlencode
import copy
import codecs
import requests
import re
from six.moves import queue as Queue
from threading import Thread
import json
import time

HEADERS = {
    ‘accept-encoding‘: ‘gzip deflate br‘
    ‘accept-language‘: ‘zh-CNzh;q=0.9‘
    ‘pragma‘: ‘no-cache‘
    ‘cache-control‘: ‘no-cache‘
    ‘upgrade-insecure-requests‘: ‘1‘
    ‘user-agent‘: “Mozilla/5.0 （iPhone; CPU iPhone OS 11_0 like Mac OS X） AppleWebKit/604.1.38 （KHTML like Gecko） Version/11.0 Mobile/15A372 Safari/604.1“
}

TIMEOUT = 10

RETRY = 5

RESULTS_VARIATION_RETRY = 5000

THREADS = 10

DOWNLOAD_FAVORITE = False


def getRemoteFileSize（url proxy=None）:
    ‘‘‘
    通过content-length

 属性            大小     日期    时间   名称
----------- ---------  ---------- -----  ----
     目录           0  2019-06-05 09:07  amemv-crawler-master\
     文件          23  2019-06-05 09:07  amemv-crawler-master\.gitignore
     文件         401  2019-06-05 09:07  amemv-crawler-master\Dockerfile
     文件        1122  2019-06-05 09:07  amemv-crawler-master\LICENSE
     文件        7540  2019-06-05 09:07  amemv-crawler-master\README-EN.md
     文件        6894  2019-06-05 09:07  amemv-crawler-master\README.md
     文件       19095  2019-06-05 09:07  amemv-crawler-master\amemv-video-ripper.py
     目录           0  2019-06-05 09:07  amemv-crawler-master\download\
     文件           0  2019-06-05 09:07  amemv-crawler-master\download\.gitkeep
     文件        7298  2019-06-05 09:07  amemv-crawler-master\fuck-byted-acrawler.js
     目录           0  2019-06-05 09:07  amemv-crawler-master\picture\
     文件       59411  2019-06-05 09:07  amemv-crawler-master\picture\award.jpg
     文件      529684  2019-06-05 09:07  amemv-crawler-master\picture\end-of-run.jpg
     文件      105698  2019-06-05 09:07  amemv-crawler-master\picture\step1.jpg
     文件      119546  2019-06-05 09:07  amemv-crawler-master\picture\step2.jpg
     文件      135158  2019-06-05 09:07  amemv-crawler-master\picture\step3.png
     文件      218787  2019-06-05 09:07  amemv-crawler-master\picture\step4.png
     文件      102254  2019-06-05 09:07  amemv-crawler-master\picture\step5.jpg
     文件          36  2019-06-05 09:07  amemv-crawler-master\requirements.txt
     文件         251  2019-06-05 09:07  amemv-crawler-master\share-url.txt