【Python爬蟲】騰訊視頻m3u8格式分析爬取（附源碼，高清無水印）

godlong_X 發布于2021-10-14 09:43 / 3530人閱讀

摘要：普通爬蟲正常流程數據來源分析發送請求獲取數據解析數據保存數據環境介紹專業版付費完整版只要看了就能學會的教程，集基礎入門視頻教學點這里即可免費在線觀看分析網站先打開開發者工具，然后搜索，會返回給你很多的的文件，像

普通爬蟲正常流程:

數據來源分析
發送請求
獲取數據
解析數據
保存數據

環境介紹

python 3.8
pycharm 2021專業版

【付費VIP完整版】只要看了就能學會的教程，80集Python基礎入門視頻教學

點這里即可免費在線觀看

分析網站

先打開開發者工具，然后搜索m3u8，會返回給你很多的ts的文件，像這種ts文件，就是視頻的片段

我們可以復制url地址，在新的瀏覽頁打開

然后會給我們下載ts的文件，打開文件，就會發現是十多秒的視頻片段

所以說這些數據的數據還是比較好找的，只要我們找到地址是從哪里來的

找到url地址，因為是post請求，所以需要下面的表達參數

開始代碼

導入模塊

import requestsimport refrom tqdm import tqdm # 進度條展示

數據請求

url = "https://vd.l.qq.com/proxyhttp"data = {"buid":"vinfoad","adparam":"pf=in&ad_type=LD%7CKB%7CPVL&pf_ex=pc&url=https%3A%2F%2Fv.qq.com%2Fx%2Fcover%2Fj3czmhisqin799r.html&refer=https%3A%2F%2Fv.qq.com%2Fx%2Fsearch%2F&ty=web&plugin=1.0.0&v=3.5.57&coverid=j3czmhisqin799r&vid=z002615k57t&pt=&flowid=e9b3e49b2593efd194cbcd24030ed803_10201&vptag=www_baidu_com%7Cvideo%3Aposter_tle&pu=-1&chid=0&adaptor=2&dtype=1&live=0&resp_type=json&guid=4b4e192e83f4abaf8b68df3e4f5be769&req_type=1&from=0&appversion=1.0.166&uid=522810848&tkn=fbYfeWDCLKtAaOd_OGvCNg..<=qq&platform=10201&opid=5FE180427A4C883F69CADDED665CE99B&atkn=49C1A486316C8D269AC65AAC080CFB29&appid=101483052&tpid=1&rfid=86c3f668da63d8bc7aab3fbc1eb7378a_1633763084","vinfoparam":"spsrt=1&charge=0&defaultfmt=auto&otype=ojson&guid=4b4e192e83f4abaf8b68df3e4f5be769&flowid=e9b3e49b2593efd194cbcd24030ed803_10201&platform=10201&sdtfrom=v1010&defnpayver=1&appVer=3.5.57&host=v.qq.com&ehost=https%3A%2F%2Fv.qq.com%2Fx%2Fcover%2Fj3czmhisqin799r.html&refer=v.qq.com&sphttps=1&tm=1633767536&spwm=4&logintoken=%7B%22main_login%22%3A%22qq%22%2C%22openid%22%3A%225FE180427A4C883F69CADDED665CE99B%22%2C%22appid%22%3A%22101483052%22%2C%22access_token%22%3A%2249C1A486316C8D269AC65AAC080CFB29%22%2C%22vuserid%22%3A%22522810848%22%2C%22vusession%22%3A%22fbYfeWDCLKtAaOd_OGvCNg..%22%7D&vid=z002615k57t&defn=fhd&fhdswitch=0&show1080p=1&isHLS=1&dtype=3&sphls=2&spgzip=1&dlver=2&drm=32&hdcp=0&spau=1&spaudio=15&defsrc=2&encryptVer=9.1&cKey=W5agxKnJ7N56KJEItZs_lpJX5WB4a2CdS8kEIo8rVaqtHEZQ1c_W6myJ8hQXnmDDG8ErEJDMLjvm2vPBr-xE-uhvZyEMY131vUh1H4pgCXe2OphM_H32Jqtu2hFoqfA-un0sVBkIXYfWkOdABnbLUo4RgzSXkBHF3N3K7dNKPg_56X9JO3gwBMyBeAex05x8SbbQKY5AXaDVSM7hsBQ8XEeHzIEGJzlCt94ONgPYVSRkZqo51NVr_Bs8h4-UNLT0jG-obbyNs2IJhrZ4JUBeuGEk8zAOhE9HTZPNDViLRIyt2mNDud09qSLLKl4XAj3CE6i26P6BRyAy1_qatijXkm9J1hs3ZYC7dgYmAZD6BE9UGX4hkziTy-Y8cCBppeEBGSaj9w&fp2p=1&spadseg=3"}headers = {    "user-agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/94.0.4606.71 Safari/537.36"}response = requests.post(url=url, json=data, headers=headers)

提取數據

html_data = response.json()["vinfo"]# 正則表達式m3u8_url = re.findall("url(.*?),", html_data)[3].split(""")[2]m3u8_data = requests.get(url=m3u8_url).textm3u8_data = re.sub("#EXTM3U", "", m3u8_data)m3u8_data = re.sub("#EXT-X-VERSION:/d", "", m3u8_data)m3u8_data = re.sub("#EXT-X-MEDIA-SEQUENCE:/d", "", m3u8_data)m3u8_data = re.sub("#EXT-X-TARGETDURATION:/d+", "", m3u8_data)m3u8_data = re.sub("#EXT-X-PLAYLIST-TYPE:VOD", "", m3u8_data)m3u8_data = re.sub("#EXTINF:/d+/./d+,", "", m3u8_data)m3u8_data = re.sub("#EXT-X-ENDLIST", "", m3u8_data).split()

遍歷

for ts in tqdm(m3u8_data):    ts_url = "https://apd-57c5d150c8b9788baf40ea4f65feddf8.v.smtcdns.com/moviets.tc.qq.com/A2k4JuW9ATia8thdFQ6y5HWRUGLqAr4L5fk9KFbAUEI8/uwMROfz2r5xgoaQXGdGnC2df64gVTKzl5C_X6A3JOVT0QIb-/doVi4hWq0sqexPo_ylKYxVIJdr9zz2VweWbcY7x70kRnbVNPvBaoTsjwfOq1uojOtsRKJ8r3372HRaTOVg4VyKOFFvzjq2EeMdpleIIyTv0tb-C3CzXmkZz-34hK4Fc-r4mZK55L9W1RqJMpsvrORZr_sqpqvGZrrRq830get0NLJGkeAQ9SBg/" + ts    ts_content = requests.get(url=ts_url).content

保存數據

with open("霸王別姬.mp4", mode="ab") as f:    f.write(ts_content)print("下載完成")

運行代碼

對于本篇文章有疑問，或者想要Python相關資料的同學也可以點這里

云服務器 GPU云服務器快手無水印視頻解析高清視頻格式轉換器高清視頻免費格式轉換器 python爬取視頻

文章版權歸作者所有，未經允許請勿轉載,若此文章存在違規行為，您可以聯系管理員刪除。

轉載請注明本文地址：http://specialneedsforspecialkids.com/yun/122576.html

首次公開，整理12年積累的博客收藏夾，零距離展示《收藏夾吃灰》系列博客

摘要：時間永遠都過得那么快，一晃從年注冊，到現在已經過去了年那些被我藏在收藏夾吃灰的文章，已經太多了，是時候把他們整理一下了。那是因為收藏夾太亂，橡皮擦給設置私密了，不收拾不好看呀。 ...

Harriet666 2021-09-10 10:51 評論0 收藏0
PyCon China 深圳站精彩回顧（附PPT及視頻）

摘要：月日，第六屆大會在深圳召開。這是這次大會的第二站活動，第一站已在上海成功舉辦。深圳站視頻及，請在公眾號后臺回復，獲取分享鏈接。據介紹，目前支持多種開發庫，如內置和等。該協議的推出，是為了統一標準，提高效率。本文為 PyChina 和「編程派」聯合首發，作者為 EarlGrey。「編程派」是一個專注 Python 學習交流的微信公眾號。 9 月 25 日，第六屆 PyCon China...

lykops 2019-07-25 10:51 評論0 收藏0
我用Python爬取了女神視界，爬蟲之路永無止境「內附源碼」

摘要：我發現抖音上很多小姐姐就拍個跳舞的視頻就火了，大家是沖著舞蹈水平去的嗎，都是沖著顏值身材去的，能刷到這篇文章的都是了，我就跟大家不一樣了，一個個刷太麻煩了，我直接爬下來看個夠，先隨意展示兩個。我發現抖音上很多小姐姐就拍個跳舞的視頻就火了，大家是沖著舞蹈水平去的嗎，都是沖著顏值身材去的，能刷...

niuxiaowei111 2021-11-11 16:55 評論0 收藏0
Python 網絡爬蟲實戰：抖音短視頻去水印爬蟲詳解

摘要：我們知道，在抖音中下載到的視頻是有水印的，這就催生出了很多抖音短視頻去水印的解析網站，小程序等。禁止重定向，設置運行結果，是一個標簽，便是重定向后的地址。我們知道...

hlcc 2021-11-22 09:34 評論0 收藏0
如何快速掌握Python數據采集與網絡爬蟲技術

摘要：通過本文的學習，可以快速掌握網絡爬蟲基礎，結合實戰練習，寫出一些簡單的爬蟲項目。從技術手段來說，網絡爬蟲有多種實現方案，如。二網絡爬蟲技術基礎在本次課中，將使用技術手段進行項目的編寫。摘要：本文詳細講解了python網絡爬蟲，并介紹抓包分析等技術，實戰訓練三個網絡爬蟲案例，并簡單補充了常見的反爬策略與反爬攻克手段。通過本文的學習，可以快速掌握網絡爬蟲基礎，結合實戰練習，寫出一些簡單的...

W4n9Hu1 2019-07-30 16:09 評論0 收藏0