CainWang 最近的时间轴更新
CainWang

CainWang

V2EX 第 321365 号会员,加入于 2018-06-08 14:35:41 +08:00
CainWang 最近回复了
60 天前
回复了 ayugudu 创建的主题 MySQL 请教一下 mysql longtext 字段优化
挪出该字段到新表 在新表中对该字段建立全文索引,主表和该表的 id 关联
152 天前
回复了 jtiantian666 创建的主题 问与答 阿里网盘怎么发挥最大价值?
下个电视端的 app
172 天前
回复了 bailitusu 创建的主题 问与答 请问如何克服在一个新城市的孤独感?
刚到一个新城市总是新鲜感大于孤独 逛逛街头巷尾特色美食
咋不用 java 呢
有后端 Java 岗吗
哪个平台都是这一个套路,前期发点纯内容攒人气 起来后就开始广告收割
292 天前
回复了 homie2018 创建的主题 程序员 有没有比较好的日志聚合工具或者技术
基础的查询 bug sls 也能满足的 前提是日志规范;比不上 kibana 但是也差不了太多
2021-05-13 15:10:30 +08:00
回复了 Colorful 创建的主题 Python 关于爬虫这块有个比较好奇的问题,想请教
可以把不想要重复的字段在数据库做个唯一索引。
或者把不想要重复的字段值拼接取一个 hash 放 redis 里,每次抓取入库前做 hash 校验过滤一遍
楼主解决了吗 = =
关于   ·   帮助文档   ·   API   ·   FAQ   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   1750 人在线   最高记录 5497   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 16ms · UTC 16:58 · PVG 00:58 · LAX 09:58 · JFK 12:58
Developed with CodeLauncher
♥ Do have faith in what you're doing.