今天双12,也没什么好分享的,就分享个影视采集站的爬虫吧

zjxubinbin · 发表于 2018-12-12 11:42:38

本帖最后由 zjxubinbin 于 2018-12-12 17:16 编辑

下载下来之后后缀名改成".py"

我是在Python3.6环境下编写,Linux上面运行的,CentOS/Fedora/Ubuntu测试通过,暂时没有Windows的机器,所以就没有测试...

先安装MongoDB数据库,然后装上Reuqests和PyMongo类库

代码的urls可以自己添加其他影视采集站,请查找适用于MacCMS V10的地址,
里边有两种采集方式CrawlerAll和Crawler24,
前者用于全部采集,后者用于采集24小时更新的内容.

Have fun~

(5.99 KB, 下载次数: 61)

2018-12-12 11:34 上传
点击文件名下载附件
阅读权限: 20

update on 2018-12-12 17:07:50

找到一个BUG,
请搜索代码里边的 '
video.last
' 不包含引号,
改成
video['last']

guonning2000 · 发表于 2018-12-12 11:43:12

前排支持，围观大佬

qistcn · 发表于 2018-12-12 11:43:27

前排战略mark

李子 · 发表于 2018-12-12 11:44:52

感谢大佬分享

西瓜 · 发表于 2018-12-12 11:52:27

感谢大佬分享

Kestrel · 发表于 2018-12-12 11:53:14

战略性Mark

akigeoops! · 发表于 2018-12-12 11:58:00

akige 发表于 2018-12-12 12:08

打包啊兄day
就一个文件,打包不如直接改个后缀名快捷

WuXieOne · 发表于 2018-12-12 11:58:03

长见识，用pdf分享代码？

Abbey · 发表于 2018-12-12 11:58:30

Abbey 发表于 2018-12-12 11:58

长见识，用pdf分享代码？
论坛不允许上传".py"后缀的文件

zjxubinbin · 发表于 2018-12-12 12:05:14

打包啊兄day

感谢分享

今天双12,也没什么好分享的,就分享个影视采集站的爬虫吧

本帖子中包含更多资源