您当前的位置:首页 > 电脑百科 > 程序开发 > 语言 > Python

Python-获取B站UP主的所有视频-七朵组合为例

时间:2019-09-06 10:34:06  来源:  作者:

前几天,我分享了一篇文章,里面讲的是用户GUI下载包含B站在内的视频的Python程序。今天我们以国内第一支主打中国风的女子组合--七朵组合为例,利用之前的分享的知识,下载UP主的所有B站视频。

Python-获取B站UP主的所有视频-七朵组合为例

一代七朵-咏春

先看下七朵组合的百度百科(这个时候已经更新为最新的五位成员了):

七朵组合,中国内地女子演唱组合,由喻筱博、颜灵兰、韦欢、吴圆圆、刘木子五位成员组成。2012年6月28日,推出组合首支单曲《咏春》,从而正式出道 [1] ;10月23日,演唱的歌曲《心慌慌》获得“鹏城歌飞扬”深圳原创音乐第三季度十佳金曲奖 [2] ;12月9日,凭借单曲《咏春》获得香港TVB8金曲榜年度最佳新人奖以及年度最佳组合奖提名 [3] 。2013年5月17日,发布中国风单曲《玉生烟》;11月13日,推出“欢”季恋歌单曲《宫商角徵羽》 [4] 。2014年2月14日,发布情人节单曲《蝴蝶恋》 [5] ;4月16日,获得音悦台V-Chart Awards颁奖典礼“最具人气潜力奖”的提名 [6] 。2017年,发布了中国风单曲《青蛇》。2018年1月21日,发布中国风单曲《将军令》 [7] ;10月22日,参加“古画会唱歌”音乐创新大赛,单曲《墨染梅霜》以第一名的成绩进入决赛圈 [8] 。2019年1月11日,发行中国风单曲《女侠》 [9] 。

Python-获取B站UP主的所有视频-七朵组合为例

回归七朵-青蛇

在我的印象里,第一次认识七朵组合,是在2014年安徽卫视的春节联欢晚会上,七朵组合在舞台上像7只美丽的百灵鸟,表演着她们的中国风歌曲《咏春》,她们美丽的身姿深深地吸引到了我,从那以后,她们出的每一首歌,我都听过,有喜欢的,也有不喜欢的。即使有不喜欢的,我依然要全力向大家推荐她们,因为她们太欠红了!

七朵不红,天理难容!

印象比较深刻的歌曲有很多:《咏春》、《落花情》、《扬州慢》、《玉生烟》、《孔明》、《青蛇》、《醉花荫》、《江南夜》等等。

最特别的,咏春的春节特别版,圆圆的两声yayiyayiyou,让人回味无穷;孔明中欢欢的最后那几句,孔明恐恐恐,也怕女儿梦,陪你喝两盅,再去对隆中,独守着空城,南阳夜也冷,寒月照三更,琵琶惹古筝,你独守着,准我为你折腰,也是点睛之笔。

最近还新出了一首《哪吒》,也是非常好听!!!赶紧去听吧!!!

好啦,回归正题:

思路:

(1)获取UP主所有视频的id,结合播放页面https://www.bilibili.com/video/av65732818,可以看出,id即为av后面的数字,即只要获取到id,即可得到所有的视频播放链接;

(2)利用you-get,一个一个下载;

缺点:不能多进程下载,下载进度缓慢。

开始解析:

1、打开七朵组合的投稿页面

Python-获取B站UP主的所有视频-七朵组合为例

 

按照之前分享过的方法,找到这些视频的链接在哪里!

2、鼠标右键(Chrome)--检查--F5--Network--XHR,可以看到这样一条信息

Python-获取B站UP主的所有视频-七朵组合为例

 

这里面包含着我们想要的视频的id信息!

有人问,为啥你这么快就找到了呢?你怎么找的呢?

其实基本的两种方法还是有的,但是像网易云音乐那种加密的除外!

(1)Ctrl+F,搜索原页面中包含的信息;

(2)看XHR项的大小,能达到kb级别的很有可能是你需要的东西;

然后我们开始点击下一页,可以发现是这样的

Python-获取B站UP主的所有视频-七朵组合为例

 

又出现了一条和上一页面类似的链接,比较发现,只有page的参数不一致,那就循环page就行啦!

好啦,分析到此结束!

代码如下:

# author:Jinbu Zhang

# 目的:爬取哔哩哔哩视频某位作者的所有视频

# 思路:1、获取该作者在B站发布的所有视频地址;2、调用you-get库下载到指定路径

import requests
import json
import you_get
import os
import time
import random
import sys
import winreg
headers = {"User-Agent":"Mozilla/5.0 (windows NT 10.0; Win64; x64) AppleWebKit/537.36 
(KHTML, like Gecko) Chrome/73.0.3683.103 Safari/537.36"}
def get_desktop():
 key = winreg.OpenKey(winreg.HKEY_CURRENT_USER,r'SoftwareMicrosoftWindowsCurrentVersionExplorerShell Folders')
 return winreg.QueryValueEx(key, "Desktop")[0]
save_path = get_desktop() + '\' + 'you_get'+'\'
if not os.path.exists(save_path):
 os.mkdir(save_path)
# 播放页视频下载
def download_mv_bilibili(mv_id):
 mv_id_download = 'https://www.bilibili.com/video/av'+str(mv_id)
 os.system("you-get -o %s %s"%(save_path,mv_id_download))
# 对得到的json数据进行解析(字典访问形式)
def explain_json(json_data):
 mv_datas = json_data['data']['vlist']
 mv_infors = []
 for mv_data in mv_datas:
 mv_title = mv_data['title']
 mv_author = mv_data['author']
 # 41842701
 mv_id = mv_data['aid']
 mv_length = mv_data['length']
 mv_description = mv_data['description']
 mv_cover = mv_data['pic']
 mv_play = mv_data['play']
 mv_comment = mv_data['comment']
 print('==' * 60)
 time.sleep(0.5)
 print('>>%s...'%mv_title)
 print('>>>https://www.bilibili.com/video/av%s' % mv_id)
 print('==' * 60)
 # 下载MV&视频
 # download_mv_bilibili(mv_id)
# 对URL进行访问,得到的数据进行解析
def get_html(access_url):
 response = requests.get(access_url,headers=headers)
 html = response.text
 json_data = json.loads(html)
 mv_infor = explain_json(json_data)
# 主函数拼凑URL
def main():
 base_url = 'https://space.bilibili.com/ajax/member/getSubmitVideos?mid=43636152&pagesize=30&tid=0&page={}&keyword=&order=pubdate'
 for k in range(1,4):
 time.sleep(2)
 access_url = base_url.format(k)
 html = get_html(access_url)
if __name__ == "__main__":
 main()

结果展示:

Python-获取B站UP主的所有视频-七朵组合为例

 

好啦,今天的python爬虫分析就到这里,有需要交流的可以私信或者加我的微信【其他文章中留过,大家记得关注我,以后会给大家分享更多!】

谢谢啦!



Tags:Python   点击:()  评论:()
声明:本站部分内容来自互联网,转载是出于传递更多信息之目的,内容观点仅代表作者本人,如有任何标注错误或版权侵犯请与我们联系,我们将及时更正、删除,谢谢。
▌相关评论
发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表
▌相关推荐
zip() 是 Python 中最好用的内置类型之一,它可以接收多个可迭代对象参数,再返回一个迭代器,可以把不同可迭代对象的元素组合起来。我之前写迭代器系列的时候,在《Python进阶:设计...【详细内容】
2020-07-10   Python  点击:(0)  评论:(0)  加入收藏
目标:在中国的股票市场上盈利,每周都有单个股票盈利2%,月总盈利超过2%计划实现方式:Pycharm + Anaconda3 + Python3 + Django + AKShare + MongoDB目前采用的实现方式:Pycharm +...【详细内容】
2020-07-10   Python  点击:(0)  评论:(0)  加入收藏
0. 序言在做数据分析之前,我们首先要明确数据分析的目标,然后 应用数据分析的思维,对目标进行细分,再采取相应的行动。我们可以把数据分析细分为以下 8 个步骤:(1)读取(2) 清洗(3) 操...【详细内容】
2020-07-09   Python  点击:(0)  评论:(0)  加入收藏
我们这个世界充满了数据,而图像是这些数据的重要组成部分。然而,要想使用这些图像,需要对它们进行处理。因此,图像处理是分析和处理数字图像的必要的过程,其主要目的是提高图像质量或从中提取一些信息,然后加以利用。...【详细内容】
2020-07-09   Python  点击:(0)  评论:(0)  加入收藏
在Python Console中执行,会报错,错误提示与代码匹配不上。例如:runfile('D:/project/python/example/pythonExample/LanguageExample/ObjectOrient/biz_handle.py', wd...【详细内容】
2020-07-09   Python  点击:(1)  评论:(0)  加入收藏
再见HTML ! 用纯Python就能写一个漂亮的网页我们在写一个网站或者一个网页界面的时候,需要学习很多东西,对小白来说很困难!比如我要做一个简单的网页交互:天啊,听听头都大呢!其实...【详细内容】
2020-07-09   Python  点击:(1)  评论:(0)  加入收藏
今天给大家带来了12个在GitHub等开源网站中最受欢迎的Python开源框架。如果你正在学习python,那么这12个开源框架,千万别错过,这些框架包括事件I/O,OLAP,Web开发,高性能网络通信,测...【详细内容】
2020-07-09   Python  点击:(0)  评论:(0)  加入收藏
大家好,这里是弘创共享时刻。 本视频是面向编程零基础学员的Python入门教程,内容涵盖了Python的基础知识和初步应用。以较轻快的风格,向零基础学习者介绍了一门时下比较流行的...【详细内容】
2020-07-08   Python  点击:(0)  评论:(0)  加入收藏
1 说明:=====1.1 SnakeViz:一个基于浏览器的 Python's cProfile 模块输出结果查看工具。1.2 SnakeViz是用于Python分析数据的查看器,该数据在浏览器中作为Web应用程序运行...【详细内容】
2020-07-07   Python  点击:(0)  评论:(0)  加入收藏
今天用一个实际例子带大家走遍多元线性回归模型机器学习的全程。实例问题描述 我们现在拿到如上图的数据集,今天要做的就是建立多元线性回归模型,利用area, bedrooms, age来预测...【详细内容】
2020-07-05   Python  点击:(0)  评论:(0)  加入收藏
情景(Situation)上文说到小爱面临着要给总部集团的李总每天早上固定发送日报邮件,而且他也找到自动化的方式了,那究竟是什么呢?其实在讲方法之前,其实我们也可以先简单学一下邮件...【详细内容】
2020-07-05   Python  点击:(0)  评论:(0)  加入收藏
一、字符编码初探字符编码其实就是将人类能识别的字符与计算机能识别的数字对应起来。ASCII(American Standard Code for Information Interchange)美国信息交换标准代码,是...【详细内容】
2020-07-05   Python  点击:(0)  评论:(0)  加入收藏
前言Python由于其易用性而成为最流行的语言,它提供了许多库,使程序员能够开发更强大的软件,以并行运行模型和数据转换。有这么一个库,它提供了并行计算、加速了算法,甚至允许您将...【详细内容】
2020-07-04   Python  点击:(1)  评论:(0)  加入收藏
考虑到现在大部分小伙伴使用 Python 主要因为爬虫,那么为了更好地帮助大家巩固爬虫知识,加深对爬虫的理解,选择了爬取百度文库作为我们的目标。 废话不多说,我们开始。TXT、DOCX...【详细内容】
2020-07-03   Python  点击:(0)  评论:(0)  加入收藏
前言交易系统的"止盈",作者认为是一个非常重要的模块。我常说,好的开仓仅仅决定你的策略浮盈大小,而最终的交易结果却只有止盈决定。作者之前就曾写过,比较经典的跟踪止盈方法之...【详细内容】
2020-07-03   Python  点击:(1)  评论:(0)  加入收藏
选择的这些工具将简化你的 Python 环境,以实现顺畅和一致的开发实践。 来源:https://linux.cn/article-12369-1.html 作者:Moshe Zadka 译者:Xingyu.Wang(本文字数:2747,阅读时长...【详细内容】
2020-07-02   Python  点击:(2)  评论:(0)  加入收藏
亲测有效,针对 阿里云, 华为云 centos 7 轻量服务器python ==> 3.7.8pip ==> 3一,打开python官网,找到下载Python的tgz文件,有两种方式下载 (版本可能更新,进官网核实为准) 1,直接在...【详细内容】
2020-07-01   Python  点击:(0)  评论:(0)  加入收藏
前言Python Web框架里比较有名当属Django,Django功能全面,它提供一站式解决方案,集成了MVT(Model-View-Template)和ORM,以及后台管理。但是缺点也很明显,它偏重。就像是一个装潢好...【详细内容】
2020-07-01   Python  点击:(1)  评论:(0)  加入收藏
首先要说明的一下,所描述的是 Python 中的 运算表达式 的部分,不是 Python 表达式的部分。关于什么是 Python 中的运算表达式,可以参考 Python 文档 10.3.1. Mapping Operators...【详细内容】
2020-07-01   Python  点击:(1)  评论:(0)  加入收藏
用任何编程语言来开发程序,都是为了让计算机干活,比如编写一篇文章,下载一首MP3等,而计算机干活的CPU只认识机器的指令,所以,尽管不同的编程语言差异极大,最后都得“翻译”成CPU可...【详细内容】
2020-06-29   Python  点击:(1)  评论:(0)  加入收藏
最新更新
栏目热门
栏目头条