码迷,mamicode.com
首页 > 其他好文 > 详细

爬虫利器_you-get

时间:2018-02-03 16:55:54      阅读:168      评论:0      收藏:0      [点我收藏+]

标签:python   info   err   http   download   目标   图片   完成   抓取   

用Python做爬虫也很久了,今天分享一个轻巧的爬虫库:you-get

you-get 是用 Python3写成的视频,图片,音频下载工具,堪称盗链,爬虫神器。其支持的网站,都是直接破解其算法,直接算出playurl的方式,

不仅仅能抓取目标的封面,标题描述等信息,还可以下载源视频,非常的好用。

首先你需要安装python3,然后安装pip,具体操作这里不赘述。

配置好环境变量之后,在cmd下执行 

pip install you-get

技术分享图片

安装完成之后就可以去试试身手啦,比如我们爬取一个腾讯视频,就直接在cmd中敲:you-get "https://v.qq.com/x/cover/2tr6sh7iw7wyvhl/w0025xphmun.html"

可以看到正在执行爬取

技术分享图片

you-get 支持的网站很多,具体可以在github上看GitHub - soimort/you-get: Dumb downloader that scrapes the web

 

爬虫利器_you-get

标签:python   info   err   http   download   目标   图片   完成   抓取   

原文地址:https://www.cnblogs.com/Zfc-Cjk/p/8409848.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!