嗨喽,大家好呀~这里是爱看美女的茜茜呐

环境使用:

  • Python 3.10 解释器

  • Pycharm 编辑器

模块使用:

  • import re

  • from Cryptodome.Cipher import AES < pip install pycryptodomex >

  • import requests < pip install requests >

如何安装python第三方模块:

  1. win + R 输入 cmd 点击确定, 输入安装命令 pip install 模块名 (pip install requests) 回车

  2. 在pycharm中点击Terminal(终端) 输入安装命令


👇 👇 👇 更多精彩机密、教程,尽在下方,赶紧点击了解吧~

python源码、视频教程、插件安装教程、资料我都准备好了,直接在文末名片自取就可


爬虫基本流程:

一. 数据来源分析
  1. 明确需求: 明确采集的网址以及数据

    • 网址: https://www.cqjschungao.com/cupfoxplay/609-3-1/

    • 数据: 视频内容 (链接)

  2. 抓包分析: 通过浏览器开发者工具进行抓包分析

    • 打开开发者工具: F12 / 右键点击检查选择 network (网络)

    • 刷新网页: 能够看到网页返回数据内容

      001.ts 类似于这样数据 (m3u8的视频格式)

    • 通过关键字去搜索找到对应的数据包

      关键字: m3u8

      单个视频: https://v.gsuus.com/play/QbY0yWKa/index.m3u8 (包含了所有视频片段)

    • 继续分析这个链接可以从哪里获取

      https://www.cqjschungao.com/cupfoxplay/609-3-1/

目的: 视频内容 -> 分割N个片段(ts文件) -> 找到所有片段(m3u8文件中) -> 视频详情页 (网页源代码中)

二. 代码实现步骤: 发送请求->获取数据->解析数据->保存数据

第一次请求: 获取m3u8链接 / 视频标题

  1. 发送请求 -> 模拟浏览器对于url地址发送请求

    请求链接: 视频详情页

  2. 获取数据 -> 获取服务器返回响应数据

    视频详情页 网页源代码

  3. 解析数据 -> 提取 m3u8链接 / 视频标题

第二次请求: 获取所有ts文件链接

  1. 发送请求 -> 模拟浏览器对于url地址发送请求

    请求链接: m3u8链接

  2. 获取数据 -> 获取服务器返回响应数据

    m3u8返回响应数据

  3. 解析数据 -> 提取 所有ts文件链接

第三次请求: 获取完整的视频内容

  1. 发送请求 -> 模拟浏览器对于url地址发送请求

    请求链接: ts文件链接

  2. 获取数据 -> 获取服务器返回响应数据

    每个视频片段内容

  3. 保存数据 -> 把所有片段保存合并完整视频内容

代码展示

'''
python资料获取看这里噢!! 小编 V:Pytho8987(记得好友验证备注:6 )
即可获取:文章源码/教程/资料/解答等福利,还有不错的视频学习教程和PDF电子书!
'''
# 导入数据请求模块
import requests
# 导入正则表达式模块
import re
# 导入加密模块
from Cryptodome.Cipher import AES

模拟浏览器 请求头 (字典)

headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/119.0.0.0 Safari/537.36'
}

请求网址

url = 'https://www.cqjschungao.com/cupfoxplay/609-3-1/'

发送请求

response = requests.get(url=url, headers=headers)

获取数据

html_data = response.text

解析数据 \ 转义字符, 把含有特殊含义字符串, 转义成本身字符不含有其他的意思 ?

'''
python资料获取看这里噢!! 小编 V:Pytho8987(记得好友验证备注:6 否则可能不通过)
即可获取:文章源码/教程/资料/解答等福利,还有不错的视频学习教程和PDF电子书!
'''
m3u8_url = re.findall('"url":"(.*?)","url_next"', html_data)[0].replace('\\', '')
title = re.findall('<h1 class="movie-list-title">(.*?)在线播放</h1>', html_data)[0]
print(title)
print('m3u8_url:', m3u8_url)

“”"
解密
“”"

key_data = m3u8_url.split('/')[-2]

获取密钥

key_url = f'https://v.gsuus.com/play/{key_data}/enc.key'
key = requests.get(url=key_url, headers=headers).content
print('密钥:', key_url)

解码器

ci = AES.new(key, AES.MODE_CBC)

发送请求: 请求m3u8链接 & 获取响应数据

m3u8_data = requests.get(url=m3u8_url, headers=headers).text

解析数据

ts_list = re.findall(',\n(.*?)\n#E', m3u8_data)
  • re.findall(‘匹配数据’, ‘数据源’) -> 找到所有数据

    从什么地方, 去匹配什么数据

re.findall(‘“url”:“(.*?)”,“url_next”’, html_data)

从 html_data 里面, 去匹配 从"url":"开始 到 ","url_next"截至 中间内容提取出来

for循环遍历 ts_list 列表(数据容器)

'''
python资料获取看这里噢!! 小编 V:Pytho8987(记得好友验证备注:6 否则可能不通过)
即可获取:文章源码/教程/资料/解答等福利,还有不错的视频学习教程和PDF电子书!
'''
for ts in ts_list:
    print(ts)

获取视频内容

    ts_content = requests.get(url=ts, headers=headers).content

解密视频内容

    content = ci.decrypt(ts_content)
    with open(file='video\\' + title + '.mp4', mode='ab') as f:

写入数据

        f.write(content)

尾语

感谢你观看我的文章呐~本次航班到这里就结束啦 🛬

希望本篇文章有对你带来帮助 🎉,有学习到一点知识~

躲起来的星星🍥也在努力发光,你也要努力加油(让我们一起努力叭)。

最后,宣传一下呀~👇👇👇更多源码、资料、素材、解答、交流皆点击下方名片获取呀👇👇

Logo

旨在为数千万中国开发者提供一个无缝且高效的云端环境,以支持学习、使用和贡献开源项目。

更多推荐