p
43553
- eqblog2018-02-05论坛元老84321
- 本帖最后由 eqblog 于 2018-2-8 16:31 编辑 *

没错,我又来发布爬虫了
Github项目地址:https://github.com/eqblog/pornhub-
去除url中所有*即可借帖更新:91的视频爬虫已经修改了2个错误跳过。
借帖更新:91的视频爬虫已经修复过118页不能正常抓取问题(其实是因为分类目录的原因)
去github重新下载代码即可代码下载:
*

58841
(1.98 KB, 下载次数: 72)2018-2-5 16:59 上传
点击文件名下载附件*
python所需库安装:
pip3 install requests
pip3 install lxml
pip3 install bs4
使用方法(示例):
视频爬虫使用:python3 **hub_spider.py [分类] [清晰度]
例如:python3 **hub_spider.py 111 240
视频url使用(会生成url.txt文件,url储存在此文件内):python3 **hub_spider_url.py [分类] [清晰度]
例如:python3 **hub_spider_url.py 111 240
#注意最高可以下载720 1080不能下载
建议使用视频url爬虫,然后爬下视频下载url使用多线程下载器下载
分类获取https://www.**hub.com/video?c=[分类]
如果遇到视频无你设置的清晰度时会跳过