找回密码
 立即注册
搜索
热搜: 活动 交友 discuz
楼主: xiaohared

建立小说网站

[复制链接]

10

主题

2495

回帖

5046

积分

论坛元老

积分
5046
发表于 2019-2-4 15:44:27 | 显示全部楼层
机器有了,域名还没吧?xiuzhen.net  要吗。哈哈
回复

使用道具 举报

1471

主题

4903

回帖

1万

积分

论坛元老

积分
14383
发表于 2019-2-4 15:30:00 | 显示全部楼层

西崽猪猪 发表于 2019-2-4 15:25

楼主你要跪,大盘鸡不适合开小说站。
现在小说站标配都是 4块SSD RAID10。
小文件太多了采集加访问非常影响 ...

之搞过一个,没那么高要求,hatch家搞个1.5t就可以,然后反代快点,重点是哪里可以采集到优质不缺章节广告插入少的资源
回复

使用道具 举报

17

主题

113

回帖

305

积分

中级会员

积分
305
发表于 2019-2-4 15:30:30 | 显示全部楼层

biubiu 发表于 2019-2-6 08:40

之搞过一个,没那么高要求,hatch家搞个1.5t就可以,然后反代快点,重点是哪里可以采集到优质不缺章节广 ...



你这么说那你肯定是没访问量
频繁读取 I/O的资源监测可以看见
HDD单盘基本130MB/s满载
回复

使用道具 举报

200

主题

1411

回帖

3470

积分

论坛元老

积分
3470
发表于 2019-2-4 16:33:40 | 显示全部楼层

西崽猪猪 发表于 2019-2-6 12:33

你这么说那你肯定是没访问量
频繁读取 I/O的资源监测可以看见
HDD单盘基本130MB/s满载 ...

强迫症受不了缺章节,内容被插入符号组合广告,后来折腾规则也未果,找某宝写的规则也不行,就不搞了
回复

使用道具 举报

1471

主题

4903

回帖

1万

积分

论坛元老

积分
14383
发表于 2019-2-4 15:44:00 | 显示全部楼层
有没用大佬发个程序啊,现在大盘鸡有好几个就差小说程序了 本帖最后由 timelo 于 2019-2-6 20:01 编辑

我用的wmcms  但是代码写的贼**差 今年准备重写……  自己写的Python 爬数据  
回复

使用道具 举报

200

主题

1411

回帖

3470

积分

论坛元老

积分
3470
发表于 2019-2-4 16:54:57 | 显示全部楼层
wmcms  但是源码很差
回复

使用道具 举报

0

主题

23

回帖

60

积分

注册会员

积分
60
发表于 2019-2-4 18:55:30 | 显示全部楼层

西崽猪猪 发表于 2019-2-4 15:25

楼主你要跪,大盘鸡不适合开小说站。
现在小说站标配都是 4块SSD RAID10。
小文件太多了采集加访问非常影响 ...

访问量低的话,楼主大盘鸡没问题。
你这个配置,起码得千万pv往上了,才会硬盘IO瓶颈。
回复

使用道具 举报

0

主题

23

回帖

60

积分

注册会员

积分
60
发表于 2019-2-5 10:56:57 | 显示全部楼层
"

我一般都是派森自己爬,什么登录验证,cf验证都突破了。就是麻烦一点,一个目标站点点对点的爬
回复

使用道具 举报

55

主题

327

回帖

847

积分

高级会员

积分
847
发表于 2019-2-4 18:55:00 | 显示全部楼层
最近爬科技文章做流量垃圾站来着。。。
回复

使用道具 举报

54

主题

311

回帖

834

积分

高级会员

积分
834
发表于 2019-2-6 02:59:10 | 显示全部楼层

achen0207 发表于 2019-2-6 18:12

我一般都是派森自己爬,什么登录验证,cf验证都突破了。就是麻烦一点,一个目标站点点对点的爬 ...



   对, 每个目标站点都要研究一下爬取的规则 ,  但是自己写的 比较方便呀
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|小黑屋|Discuz! X

GMT+8, 2025-5-24 11:12 , Processed in 0.017326 second(s), 3 queries , Gzip On, Redis On.

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表