有没有开源爬虫程序可以爬公众号文章？

实测不行

主要是见识太少，信息闭塞，城里人不见得好太多。这个社会就是一个信息交换的社会。

@wheat0r 我现在 AIO ，很爽。unraid 做底层系统，VM1:黑裙，VM2:ubuntu 系统的开发机：VM3:truenas scale 直通了 100T 的硬盘存储，smb/nfs 共享给所有：VM4:Openwrt ，VM5: haas 。unraid 上还跑了 emby ，xiaoya ，grafana 等几十个 docker 服务。轻松 hold 。

i3-8100 还是很抗打的，上这个性价比最高

@yylucian 找到地方了，但是通过 tailscale 的 exit node 模式之后 clash 已经只能看到 ip 地址了，需要根据 ip 地址来设置规则，看到 https://learn.microsoft.com/en-us/microsoft-copilot-service/about-limits-quotas 有 ip 段，但是太多了，如何设置规则才能匹配到规则，而不是默认漏网之鱼


[2024-01-08 18:09:29][INFO] [TCP] 192.168.31.158:36698 --> 34.226.69.105:443 match Match using 🐟 漏网之鱼[中国-台湾 04]
[2024-01-08 18:09:29][INFO] [TCP] 192.168.31.158:40596 --> 3.163.125.69:443 match Match using 🐟 漏网之鱼[中国-台湾 04]
[2024-01-08 18:09:29][INFO] [TCP] 192.168.31.158:54256 --> 199.59.148.8:443 match Match using 🐟 漏网之鱼[中国-台湾 04]
[2024-01-08 18:09:29][INFO] [TCP] 192.168.31.158:54882 --> 159.138.20.20:443 match Match using 🐟 漏网之鱼[中国-台湾 04]

@qishouvip2022 不妨试试 clash ，比 passwall 智能多了

@yylucian 谢谢，我试试，clash 也支持分流

同问，也需要这个功能

@xceszzy 能省多少钱？

@ayugesheng scraydweb 你也可以试试，也是可视化的，不过我还是喜欢命令行，包一堆框架出 bug 很不容易调试

@adoal 同样的用途，只用带宽还是很香的，3m 的小水管够用了

@ayugesheng 我就一台 nas ，你是整了一个集群？，那还不如上 k8s 整个调度

挺好，我一般是 crontab 或者用 docker ，k3s 管理，webui 的话有个 scrapydweb 的项目还凑合，但是 bug 太多了，最后我觉得还是 crontab 最方便

@shirasu unraid 和 truenas scale 都支持 zfs

@numoone 避免被封

主要是我要在 ipad 上远程开发，目前部署了 code-server （ vscode 的开源版本）

用 scrapyd 调度下即可，可以用 docker 来部署，或者直接 crontab 搞 50 个并发执行

每天看 CNN 新闻学的更快，发音和词汇量都蹭蹭的涨