最新公告
  • 欢迎您光临起源地模板网,本站秉承服务宗旨 履行“站长”责任,销售只是起点 服务永无止境!立即加入钻石VIP
  • 如何使用python网络爬虫抓取视频?

    正文概述    2020-10-20   271

    之前跟大家说过使用python爬到很多内容,比如图片,比如文字,那大家有没有知道可不可以用python去爬取视频的呢?小伙伴们有没有见到过呢?由于这个好奇心,小编于是去看了很多资料,果然世间万物都是大同小异,全部都是可以融会贯通的,下面就是小编给大家整理出来的内容,有需要的可以了解下呢~

    准备工作:

    Chrome 浏览器

    Vim

    Python3 开发环境

    Kali Linux

    API 寻找 && 提取

    1、我们通过 F12 打开开发者模式。

    如何使用python网络爬虫抓取视频?

    2、再查看一下 Headers 属性

    3、再看下看到Request URL这个属性值

    代码实现

    写好脚本,利用爬虫下载片断

    ##导入的两个模块,其中requests模块需要自行下载
    from multiprocessing import Pool
    import requests
    ##定义一个涵数
    def demo(i):
        ##定义了一个url,后面%3d就是截取后面三位给他加0,以防止i的参数是1的时候参数对不上号,所以是1的时候就变成了001
        url="https://vip.okokbo.com/20180114/ArVcZXQd/1000kb/hls/phJ51837151%03d.ts"%i
        ##定义了请求头信息
        headers={"user-agent":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/49.0.2623.221 Safari/537.36"}
        ##构建自定义请求对象
        req=requests.get(url,headers=headers)
        ##将文件保存在当前目录的mp4文件中,名字以url后十位数起名
        with open('./mp4/ {}'.format(url[-10:]), 'wb') as f:
            f.write(req.content)
     
    ##程序代码的入口
    if __name__=='__main__':
        ##定义一个进程池,可以同时执行二十个任务,不然一个一个下载太慢
        pool = Pool(20)
        ##执行任务的代码
        for i in range(100):
            pool.apply_async(demo, (i,))
     
        
        pool.close()
    pool.join()

    复制电影存放的路径

    如何使用python网络爬虫抓取视频?

    用进入windows命令行模式,粘贴地址

    如何使用python网络爬虫抓取视频?

    复制该目录下所有以*.ts结尾的文件,复制成一个文件

    如何使用python网络爬虫抓取视频?

    进行合并

    如何使用python网络爬虫抓取视频?

    进行验证

    如何使用python网络爬虫抓取视频?

    好啦,以上内容可以供小伙伴们在闲暇之余爬取看下自己想看的视频哦~或者可以用于之后的工作中呢,是个非常实用的技巧,大家要好好学习掌握住哦~


    起源地下载网 » 如何使用python网络爬虫抓取视频?

    常见问题FAQ

    免费下载或者VIP会员专享资源能否直接商用?
    本站所有资源版权均属于原作者所有,这里所提供资源均只能用于参考学习用,请勿直接商用。若由于商用引起版权纠纷,一切责任均由使用者承担。更多说明请参考 VIP介绍。
    提示下载完但解压或打开不了?
    最常见的情况是下载不完整: 可对比下载完压缩包的与网盘上的容量,若小于网盘提示的容量则是这个原因。这是浏览器下载的bug,建议用百度网盘软件或迅雷下载。若排除这种情况,可在对应资源底部留言,或 联络我们.。
    找不到素材资源介绍文章里的示例图片?
    对于PPT,KEY,Mockups,APP,网页模版等类型的素材,文章内用于介绍的图片通常并不包含在对应可供下载素材包内。这些相关商业图片需另外购买,且本站不负责(也没有办法)找到出处。 同样地一些字体文件也是这种情况,但部分素材会在素材包内有一份字体下载链接清单。
    模板不会安装或需要功能定制以及二次开发?
    请QQ联系我们

    发表评论

    还没有评论,快来抢沙发吧!

    如需帝国cms功能定制以及二次开发请联系我们

    联系作者

    请选择支付方式

    ×
    迅虎支付宝
    迅虎微信
    支付宝当面付
    余额支付
    ×
    微信扫码支付 0 元