日韩无码专区无码一级三级片|91人人爱网站中日韩无码电影|厨房大战丰满熟妇|AV高清无码在线免费观看|另类AV日韩少妇熟女|中文日本大黄一级黄色片|色情在线视频免费|亚洲成人特黄a片|黄片wwwav色图欧美|欧亚乱色一区二区三区

RELATEED CONSULTING
相關(guān)咨詢
選擇下列產(chǎn)品馬上在線溝通
服務時間：8:30-17:00
你可能遇到了下面的問題
關(guān)閉右側(cè)工具欄

新聞中心

這里有您想知道的互聯(lián)網(wǎng)營銷解決方案
用Python打造批量下載視頻并能可視化下載進度的炫酷下載器

大家好，我是Python進階者，今天給大家整點好玩的，一起來看看吧~

創(chuàng)新互聯(lián)公司堅持“要么做到，要么別承諾”的工作理念，服務領(lǐng)域包括：成都做網(wǎng)站、成都網(wǎng)站制作、企業(yè)官網(wǎng)、英文網(wǎng)站、手機端網(wǎng)站、網(wǎng)站推廣等服務，滿足客戶于互聯(lián)網(wǎng)時代的武夷山網(wǎng)站設(shè)計、移動媒體設(shè)計的需求，幫助企業(yè)找到有效的互聯(lián)網(wǎng)解決方案。努力成為您成熟可靠的網(wǎng)絡建設(shè)合作伙伴！

【一、項目背景】

平時宅在家的我們最愛做的事莫過于追劇了，但是有時候了，網(wǎng)絡原因，可能會讓你無網(wǎng)可上，這個時候那些好看的電視劇和電影自然是無法觀看了，本期我們要講的就是怎樣下載這些視頻。

【二、項目目標】

通過Python程序?qū)λ信d趣的視頻進行批量下載，正好小編近期看到一些不錯的視頻，因為想往安卓方向走，但又苦于重新學習太復雜，有沒有簡單點的，之前好像有什么e4a但是要學易語言就放棄了，于是乎在茫茫網(wǎng)絡發(fā)現(xiàn)了一個小眾的編程語言---裕語言。好家伙，不說了，趕緊下載，盤它。

【三、項目實施】

采用sublime text 3 編寫程序，先看看效果：

C:\Users\Administrator\Desktop\232.jpg

接下來，由小編我為大家展現(xiàn)程序的具體實現(xiàn)步驟。

【四、實現(xiàn)步驟】

1.分析網(wǎng)頁結(jié)構(gòu)

老樣子，審查元素定位，如下圖：

C:\Users\Administrator\Desktop\1212.jpg

發(fā)現(xiàn)視頻全都在a標簽里面，因為這個頁面的視頻比較多，所以我們繼續(xù)分析頁面，發(fā)現(xiàn)一個神奇的事情。哈哈，原來所有的視頻都在class為videoDown的a標簽里，有了這個重要的信息就什么都好辦了。

 
 
 
 
    
  
  
  
  
  1. #解析頁面 
    2. 
  
  
  
  
  2.  
    3. 
  
  
  
  
  3. def parser(): 
    4. 
  
  
  
  
  4.  
    5. 
  
  
  
  
  5. ab=[] 
    6. 
  
  
  
  
  6.  
    7. 
  
  
  
  
  7. rep=requests.get('http://v.u00.cn:93/iappce.htm#sp',timeout=5,headers=headers) 
    8. 
  
  
  
  
  8.  
    9. 
  
  
  
  
  9. rep.encoding='utf-8' 
    10. 
  
  
  
  
  10.  
    11. 
  
  
  
  
  11. soup=BeautifulSoup(rep.text,'html.parser') 
    12. 
  
  
  
  
  12.  
    13. 
  
  
  
  
  13. res=soup.find_all('a',class_='videoDown')#尋找所有class為videoDown的a標簽 
    14. 
  
  
  
  
  14.  
    15. 
  
  
  
  
  15. for y in res: 
    16. 
  
  
  
  
  16.  
    17. 
  
  
  
  
  17.         ab.append('http://v.u00.cn:93'+y.attrs['href']) 
    18. 
  
  
  
  
  18.         #將獲取到的視頻URL地址添加到列表中 
    19. 
  
  
  
  
  19.  
    20. 
  
  
  
  
  20.         return ab #返回所有視頻地址的列表 
    21.

這樣就輕輕松松拿到了頁面所有的視頻地址，怎么樣，是不是超級簡單了。

2.下載文件

因為我們講的是批量下載，所以在此之前需要先了解單個下載，當然，單個下載是很耗費時間，而且系統(tǒng)資源利用率太低。

我們來看看這個下載函數(shù)如何實現(xiàn)：

 
 
 
 
    
  
  
  
  
  1. #下載函數(shù) 
    2. 
  
  
  
  
  2.  
    3. 
  
  
  
  
  3. def down(y,x): 
    4. 
  
  
  
  
  4.  
    5. 
  
  
  
  
  5. print('------下載第',str(x),'課-------') 
    6. 
  
  
  
  
  6.  
    7. 
  
  
  
  
  7. ss=str(y.split('.')[3:4]) \#截取文件名 
    8. 
  
  
  
  
  8.  
    9. 
  
  
  
  
  9. sa=ss.replace('[','').replace(']','')\#替換文件名中的特殊符號 
    10. 
  
  
  
  
  10.  
    11. 
  
  
  
  
  11. ree=requests.get(y) 
    12. 
  
  
  
  
  12.  
    13. 
  
  
  
  
  13. with open('%d.%s.mp4'%(x,sa),'wb') as f: 
    14. 
  
  
  
  
  14.  
    15. 
  
  
  
  
  15.         f.write(ree.content) \#保存文件 
    16.

無非就是一些常用的字符串分隔以及文件操作罷了，不過此種因為比較單一，下載多個文件就行不通了，所以一般只要不是大批量下載，這種方法就夠了。

然后在給他套一個函數(shù)用來簡化他的啟動之路。

 
 
 
 
    
  
  
  
  
  1. def main(): 
    2. 
  
  
  
  
  2.  
    3. 
  
  
  
  
  3. for y in range(len(parser())): 
    4. 
  
  
  
  
  4.  
    5. 
  
  
  
  
  5. down(parser()[y],y) \#下載 
    6. 
  
  
  
  
  6.  
    7. 
  
  
  
  
  7. main() 
    8.

最后調(diào)用主函數(shù)main，輕輕松松完成單個文件下載。

3.獲取文件大小并給下載文件添加緩沖

在下載視頻的時候如果我們一下子把所有的資源你都拿出來放進CPU讀取，那么很快就會崩潰，所以我們需要設(shè)置一個緩沖，等他緩沖區(qū)滿了然后拿出來讀取，聽起來好像挺抽象，讓我們一起來看一下吧。

C:\Users\Administrator\Desktop\4343.jpg

圖中所示即為視頻大小值和請求范圍的值。

1.獲取視頻大小

 
 
 
 
    
  
  
  
  
  1. def download(url, file_name): \#下載視頻 
    2. 
  
  
  
  
  2.  
    3. 
  
  
  
  
  3. urllib3.disable_warnings() 
    4. 
  
  
  
  
  4.  
    5. 
  
  
  
  
  5. rep=requests.get(url,headers=headers) 
    6. 
  
  
  
  
  6.  
    7. 
  
  
  
  
  7. head=rep.headers 
    8. 
  
  
  
  
  8.  
    9. 
  
  
  
  
  9. rep=requests.get(url,headers=headers) 
    10. 
  
  
  
  
  10.  
    11. 
  
  
  
  
  11. head=rep.headers \#獲取請求頭字典 
    12. 
  
  
  
  
  12.  
    13. 
  
  
  
  
  13. length=head.get('Content-Length') \#獲取到視頻的大小，單位是字節(jié) 
    14. 
  
  
  
  
  14. 若想讓他以MB為單位，則需除以兩個1024 
    15. 
  
  
  
  
  15.  
    16. 
  
  
  
  
  16. file_size = int(length) \#視頻大小用int轉(zhuǎn)換 
    17. 
  
  
  
  
  17.  
    18. 
  
  
  
  
  18. if os.path.exists(file_name): \#判斷文件名是否存在 
    19. 
  
  
  
  
  19.  
    20. 
  
  
  
  
  20.         first_byte = os.path.getsize(file_name) \#獲取文件名大小 
    21. 
  
  
  
  
  21.  
    22. 
  
  
  
  
  22. else: 
    23. 
  
  
  
  
  23.  
    24. 
  
  
  
  
  24.         first_byte = 0 
    25. 
  
  
  
  
  25.  
    26. 
  
  
  
  
  26. if first_byte \>= file_size: 
    27. 
  
  
  
  
  27.  
    28. 
  
  
  
  
  28.         return file_size \#返回文件大小 
    29. 
  
  
  
  
  29.  
    30. 
  
  
  
  
  30. header = {"Range": "bytes=%s-%s" % (first_byte, file_size), 
    31. 
  
  
  
  
  31.  
    32. 
  
  
  
  
  32.         'user-agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 
    33. 
  
  
  
  
  33. (KHTML, like Gecko) Chrome/78.0.3904.108 Safari/537.36' 
    34. 
  
  
  
  
  34.  
    35. 
  
  
  
  
  35.  } \#設(shè)置請求頭，標明請求范圍 
    36.

2.配置進度條

 
 
 
 
    
  
  
  
  
  1. pbar = tqdm( \#配置進度條模塊，設(shè)置文件大小，文件字節(jié)數(shù)，文件的進度 
    2. 
  
  
  
  
  2.  
    3. 
  
  
  
  
  3. total=file_size, initial=first_byte, 
    4. 
  
  
  
  
  4.  
    5. 
  
  
  
  
  5. unit='B', unit_scale=True, desc=url.split('/')[-1]) 
    6. 
  
  
  
  
  6.  
    7. 
  
  
  
  
  7. #關(guān)于tqdm 具體用法大家可以百度tqdm模塊。 
    8.

3.添加緩沖

 
 
 
 
    
  
  
  
  
  1. with closing(requests.get(url, headers=header, stream=True)) as req: 
    2. 
  
  
  
  
  2. #關(guān)閉連接 
    3. 
  
  
  
  
  3.  
    4. 
  
  
  
  
  4. with open(file_name,'wb') as f: \#打開文件 
    5. 
  
  
  
  
  5.  
    6. 
  
  
  
  
  6.         for chunk in req.iter_content(chunk_size=1024\*2): \#設(shè)置緩沖 
    7. 
  
  
  
  
  7.  
    8. 
  
  
  
  
  8.             if chunk: 
    9. 
  
  
  
  
  9.  
    10. 
  
  
  
  
  10.                 pbar.set_description("【正在下載視頻 %s】"%str(f.name)) 
    11. 
  
  
  
  
  11.  
    12. 
  
  
  
  
  12.                 f.write(chunk) \#寫入文件 
    13. 
  
  
  
  
  13.  
    14. 
  
  
  
  
  14.                 pbar.update(1024) \#更新當前進度條 
    15. 
  
  
  
  
  15.  
    16. 
  
  
  
  
  16.             pbar.close() \#關(guān)閉進度條 
    17. 
  
  
  
  
  17.  
    18. 
  
  
  
  
  18.         return file_size \#返回文件大小 
    19.

4.構(gòu)建下載視頻并顯示進度條函數(shù)

 
 
 
 
    
  
  
  
  
  1. def fd(): \#下載并顯示進度條 
    2. 
  
  
  
  
  2.  
    3. 
  
  
  
  
  3. global x 
    4. 
  
  
  
  
  4.  
    5. 
  
  
  
  
  5. x=1 
    6. 
  
  
  
  
  6.  
    7. 
  
  
  
  
  7. for y in parser(): 
    8. 
  
  
  
  
  8.  
    9. 
  
  
  
  
  9.         print('----正在下載',x,'課-----') 
    10. 
  
  
  
  
  10.  
    11. 
  
  
  
  
  11.         ss=str(y.split('.')[3:4]) 
    12. 
  
  
  
  
  12.  
    13. 
  
  
  
  
  13.         sa=ss.replace('[','').replace(']','') \#文件名 
    14. 
  
  
  
  
  14.  
    15. 
  
  
  
  
  15.         download(y, "{}.{}.mp4".format(str(x),sa)) \#下載 
    16. 
  
  
  
  
  16.  
    17. 
  
  
  
  
  17.         print('----完成下載',x,'課-----') 
    18. 
  
  
  
  
  18.  
    19. 
  
  
  
  
  19.         x+=1 
    20.

5.啟動程序

 
 
 
 
    
  
  
  
  
  1. Fd() 
    2.

【五.總結(jié)】

批量下載視頻文件是一個不可多得的技術(shù)，程序?qū)懙牟⒉粔蚝?，比如程序沒有添加多線程，多進程，協(xié)程，也沒有異步操作，可能是因為自己比較懶吧，哈哈哈。

不過也挺簡單，多線程就是threading.Thread 順便加鎖 Lock,也可以用多進程multiprocessing中的Process或者進程池Pool,或者協(xié)程genvent,或者異步asynic


分享標題：用Python打造批量下載視頻并能可視化下載進度的炫酷下載器
新聞來源：http://m.5511xx.com/article/ccccicg.html