python 文件下載之斷點續(xù)傳的實現
1.前序
當下載突然斷開后,斷點續(xù)傳就需要了,繼續(xù)前面下載的內容下載。解決了不需要重復下載
2.技術原理
HTTP/1.1 開始支持斷點續(xù)傳,一般斷點下載會用到 Range 和 Content-Range 實體頭
Range是請求頭,Content-Range是響應頭
2.1 Content-Range
用于響應頭中
語法:
Content-Length: <length>
2.2 Range
RangeHTTP 請求頭表示服務器應返回的文檔部分。可以同時用一個頭請求多個部件,服務器可以在多部分文檔中發(fā)回這些范圍。如果服務器發(fā)回范圍,則使用 206 部分內容進行響應。如果范圍無效,服務器會返回 416 范圍不可滿足的錯誤。服務器還可以忽略標題,然后返回整個文檔,并返回 200 狀態(tài)代碼。
語法:
Range: <unit>=<range-start>-
Range: <unit>=<range-start>-<range-end>
Range: <unit>=<range-start>-<range-end>, <range-start>-<range-end>
Range: <unit>=<range-start>-<range-end>, <range-start>-<range-end>, <range-start>-<range-end>
Range: <unit>=-<suffix-length>
unit:指定范圍的單位,通常是bytes。range-start:指示請求范圍開始的給定單元中的整數。range-end:給定單元中的整數,指示所請求范圍的末尾。此值是可選的,如果省略,文檔的末尾將被視為范圍的末尾。suffix-length:給定單位中的整數,指示要返回的文件末尾的單位數。
例子:
(1)從文件中請求三個范圍。第一個范圍為第200字節(jié)到第1000個字節(jié)的位置;第二個范圍為第2000個字節(jié)位置到第6576個字節(jié)的位置;第三個范圍為第19000字節(jié)位置之后的全部
Range: bytes=200-1000, 2000-6576, 19000-
(2)請求文件的前 500 和最后 500 字節(jié)。如果范圍重疊,服務器可能會拒絕該請求。
Range: bytes=0-499, -500
3. 代碼實現
import requests
import os
headers = {
'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/88.0.4324.182 Safari/537.36'
}
file_path = './video/1.mp4' # 存儲地址
url = 'https://v3-dy-o.zjcdn.com/410b9087e76fe2360e320463f8586ed8/6185ea7a/video/tos/cn/tos-cn-ve-15-alinc2/62427caf076b4d7d9dbbdbea98f97c9f/?a=6383&br=2690&bt=2690&cd=0%7C0%7C0&ch=26&cr=0&cs=0&cv=1&dr=0&ds=3&er=&ft=jal9w1-eTz7ThWR7Wlct&l=021636162458101fdbd400a040000000a70125e00000141b4be97&lr=all&mime_type=video_mp4&net=0&pl=0&qs=0&rc=M3U8bDw6ZmZsODMzNGkzM0ApPDY3Ozs7Mzw7NzY6N2g0aWdqNGVfcjRnZG5gLS1kLTBzczU2MV40Ly40NmAtLV8xLWI6Yw%3D%3D&vl=&vr='
r = requests.get(url,headers=header)
total_size = int(r.headers['Content-Length']) # 查看文件大小,并轉換為整數類型
print(r.headers)
# 查看本地下載了多少
if os.path.exists(file_path):
temp_size = os.path.getsize(file_path) # 本地已經下載的文件大小
else:
temp_size = 0
print('已下載:' + temp_size)
print('總共需要下載:' + total_size)
header['Range'] = 'bytes={}-'.format(temp_size) # 向頭加入Range信息
print(header) # 打印頭信息
r = requests.get(url, headers=header, stream=True)
with open(file_path, "ab") as f:
for chunk in r.iter_content(chunk_size=1024):
if chunk:
temp_size += len(chunk)
f.write(chunk)
現在不知到怎么做突然下載被停止后,數據能寫入文件了,所以現在是手動模擬下載斷開。
在寫入文件中加入了一個判斷,當文件下載了5M時停止下載,之后再刪掉這段代碼,在重新下載。
with open(file_path, "ab") as f: for chunk in r.iter_content(chunk_size=1024): if chunk: temp_size += len(chunk) f.write(chunk) if temp_size > 1024 *1024 * 5: break
第一次下載

第二次下載

到此這篇關于python 文件下載之斷點續(xù)傳的實現的文章就介紹到這了,更多相關python 斷點續(xù)傳內容請搜索本站以前的文章或繼續(xù)瀏覽下面的相關文章希望大家以后多多支持本站!
版權聲明:本站文章來源標注為YINGSOO的內容版權均為本站所有,歡迎引用、轉載,請保持原文完整并注明來源及原文鏈接。禁止復制或仿造本網站,禁止在非maisonbaluchon.cn所屬的服務器上建立鏡像,否則將依法追究法律責任。本站部分內容來源于網友推薦、互聯網收集整理而來,僅供學習參考,不代表本站立場,如有內容涉嫌侵權,請聯系alex-e#qq.com處理。
關注官方微信