V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
itcastcn
V2EX  ›  分享发现

分享一个小说搜索和 TXT 下载的开源项目,刚刚试完了一下,还不错,使用爬虫 1 小时爬取了几万本小说,数据库占用 16kb

  •  
  •   itcastcn · 2020-12-18 10:34:08 +08:00 · 4655 次点击
    这是一个创建于 1470 天前的主题,其中的信息可能已经有所发展或是发生改变。

    之前分享过一个小说和漫画在线阅读的项目,玩起来不错,但是太占用磁盘空间了,所以后来就没用了,昨天作者新发布了一个小说搜索和 TXT 下载的项目,今天摸鱼的时间就去体验了下,基本上能满足我这种小说爱好者了,也不占用啥资源,嫌麻烦的,也可以直接去作者提供的演示站,刚才看到的已经有十几万本小说了,

    Github 地址: https://github.com/201206030/novel-download

    哈哈,下面贴一下官方的介绍和截图:

    小说精品屋-download 是基于小说精品屋-plus 改造的小说搜索&TXT 下载网站,低配置服务器建站的福音,适合个人使用,满足小说爱好者对小说搜索和下载的需求,主要特色如下:

    1. 服务器只保存小说关键信息,不保存章节内容,减少硬盘占用和提升爬虫效率( 1 小时大约可爬取 10 万本小说,占用磁盘空间不足 1M )。
    2. 多爬虫源配置,提高小说资源的有效性。(内置多条爬虫源规则,可根据需求自定义爬虫规则)
    3. 项目版本、爬虫规则和安装使用方式和小说精品屋-plus 保持完全一致,减少学习成本。

    截图:

    mini-codemini-code

    mini-codemini-code

    mini-codemini-code

    22 条回复    2020-12-22 11:00:48 +08:00
    auto8888
        1
    auto8888  
       2020-12-18 11:20:17 +08:00
    试了下,下了一本小众书,网站还不错
    watermelon11
        2
    watermelon11  
       2020-12-18 11:29:48 +08:00
    一直好奇这种小说网站是如何规避风险的?自己做一个自娱自乐都不行吗
    itcastcn
        3
    itcastcn  
    OP
       2020-12-18 11:40:37 +08:00
    @watermelon11 自用的话没事呀
    ztxcccc
        4
    ztxcccc  
       2020-12-18 11:43:25 +08:00
    建议技术入股新笔趣阁
    20015jjw
        5
    20015jjw  
       2020-12-18 11:44:35 +08:00 via Android
    前两年不是一个老哥干这个然后被告几百万吗 就在这个站
    justin2018
        6
    justin2018  
       2020-12-18 11:52:46 +08:00
    不错 不错 😁
    itcastcn
        7
    itcastcn  
    OP
       2020-12-18 12:09:53 +08:00
    @20015jjw 噢,那应该是利于盗版小说盈利的吧
    20015jjw
        8
    20015jjw  
       2020-12-18 12:11:47 +08:00 via Android
    @itcastcn 不知道 帖子太长没看
    WordTian
        9
    WordTian  
       2020-12-18 12:48:29 +08:00 via Android
    搜索功能略渣,其余还不错
    itcastcn
        10
    itcastcn  
    OP
       2020-12-18 13:08:50 +08:00
    @WordTian 搜索好像可以切换到 elastic search
    liyang5945
        11
    liyang5945  
       2020-12-18 13:13:17 +08:00
    你这 id,是不是跟传智播客有关系
    itcastcn
        12
    itcastcn  
    OP
       2020-12-18 14:54:47 +08:00 via Android
    @liyang5945 哈哈,你眼神真好,这么久就你注意到了(*^▽^)/★*☆
    liyang5945
        13
    liyang5945  
       2020-12-18 15:11:11 +08:00
    @itcastcn #12 我之前看传智的视频自学的,对着几个字母还是印象深刻的,你是传智的老师吗?
    itcastcn
        14
    itcastcn  
    OP
       2020-12-18 16:38:25 +08:00 via Android
    @liyang5945 哈哈,我和你差不多的情况
    warcraft1236
        15
    warcraft1236  
       2020-12-18 16:59:03 +08:00
    简单搂了一眼代码,感觉可优化空间挺大的
    201206030
        16
    201206030  
       2020-12-18 17:23:02 +08:00
    @warcraft1236 不知道你是看的哪个项目代码,如果是这个下载的项目的话,因为前面已经说过了,作用就是给小说爱好者一个下载的平台,是基于小说精品屋-plus 改造的,以最快的速度保证基本的功能,后面也不会去维护了,里面很多功能代码都是在小说精品屋-plus 上面删删改改的,复制过来复制过去的,然后代码的话就不要看了,如果是小说精品屋-plus 或者小说精品屋-微服务版的话,那么麻烦大佬指点一下需要优化的地方,非常感谢🙏
    itcastcn
        17
    itcastcn  
    OP
       2020-12-18 23:51:51 +08:00
    @201206030 哈哈,你也进来了🤦‍♂️
    enderftt
        18
    enderftt  
       2020-12-21 08:39:05 +08:00
    @201206030 novel-download 已经 404 了 咋回事呢
    itcastcn
        19
    itcastcn  
    OP
       2020-12-21 09:26:05 +08:00 via Android
    enderftt
        20
    enderftt  
       2020-12-21 09:54:24 +08:00
    @itcastcn 好的 谢谢
    201206030
        21
    201206030  
       2020-12-21 10:06:00 +08:00
    @enderftt
    @itcastcn 是的,和小说精品屋-plus 的仓库合并了,后面和小说精品屋-plus 保持同步更新
    FFF5279
        22
    FFF5279  
       2020-12-22 11:00:48 +08:00
    好活,插眼
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   4531 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 05:36 · PVG 13:36 · LAX 21:36 · JFK 00:36
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.