V2EX › shrugginG 的所有回复 › 第 1 页 / 共 2 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 2

❮

❯

46 天前

回复了 Goalonez 创建的主题 › 问与答 › Windows 下有没有类似 manico 或者 Raycast 一样可以给应用设置快捷键呼出隐藏的，不想用 autohotkey

同问

47 天前

回复了 shrugginG 创建的主题 › MySQL › mysql 小白请教大佬一个问题

@redog 感谢解答，这个内外表的概念我确实没有了解，看来确实该加强学习了哈哈，还有就是 phishy_url 是很多表的汇总表，里面应该是有 300w+的数据量的，所以之前非常慢。

55 天前

回复了 shrugginG 创建的主题 › MySQL › mysql 小白请教大佬一个问题

@HolderRoberts
-- auto-generated definition
create table phishy_urls
(
id int auto_increment
primary key,
url varchar(2048) not null,
url_sha256 char(64) not null,
ecrimex tinyint(1) default 0 null,
ecrimex_brand varchar(255) null,
phishtank tinyint(1) default 0 null,
phishtank_brand varchar(255) null,
openphish tinyint(1) default 0 null,
openphish_brand varchar(255) null,
created_at timestamp default CURRENT_TIMESTAMP not null,
is_crawled tinyint(1) default 0 null,
page_url varchar(2048) null,
is_accessible tinyint(1) null,
is_completed tinyint(1) null,
status_code smallint unsigned null,
title varchar(255) collate utf8mb4_unicode_ci null,
ip varchar(39) null,
port int null,
updated_at timestamp default CURRENT_TIMESTAMP not null on update CURRENT_TIMESTAMP,
traffic_captured tinyint(1) default 0 null,
last_crawled_time datetime null,
constraint url_sha256_unique
unique (url_sha256)
);

58 天前

回复了 shrugginG 创建的主题 › MySQL › mysql 小白请教大佬一个问题

@sagaxu 我用 explain 测试过了
```
EXPLAIN
INSERT INTO phishing_intelligence.phishtank_database (phish_id, url, url_sha256, phish_detail_url, submission_time,
verified, verification_time, online, target, etag)
VALUES ('8746113', 'https://free-5477419.webadorsite.com/',
'66c5960b2546bb5d7807213f8d0b6c574ac9b329aca4cc9db6ded49dbc7c4662',
'http://www.phishtank.com/phish_detail.php?phish_id=8746113', '2024-09-06T11:43:49', 'yes',
'2024-09-06T11:53:23', 'yes', 'Other', '7c90038b7ae65365a87c0ef8615e98e4');
```
结果是
```
[
{
"id": 1,
"select_type": "INSERT",
"table": "phishtank_database",
"partitions": null,
"type": "ALL",
"possible_keys": null,
"key": null,
"key_len": null,
"ref": null,
"rows": null,
"filtered": null,
"Extra": null
}
]
```
我看了这应该就是全表扫描了吧，根本没有用到唯一索引

58 天前

回复了 shrugginG 创建的主题 › MySQL › mysql 小白请教大佬一个问题

@ttoh 我还真测试过 drop 掉 url_sha256 的唯一索引，但是测试发现 drop 前后插入速度基本没有区别

59 天前

回复了 shrugginG 创建的主题 › MySQL › mysql 小白请教大佬一个问题

@Gilgamesh7 感谢大佬，2s 是不包含获取 url 的时间的，就是单纯的 sql 执行时间

98 天前

回复了 shrugginG 创建的主题 › 程序员 › 为啥 IPv4 很快就耗尽了，而 MAC 地址却没有呢

@cnevil 我承认自己对于这个问题没有足够的思考，也建议您仔细阅读一下别人的问题，我在问题中并没有表明 ipv4 和 mac 长度一致的想法

103 天前

回复了 ztfot 创建的主题 › 程序员 › 有没有用自然语言进行文档内内容搜索的工具?

好想法，码住回来看

119 天前

回复了 capgrey 创建的主题 › Linux › Fedora/ Linux 下有什么好用的 GUI 网络代理工具吗？

直接 clash-verge-rev ，我自己的实验室的 ubuntu 机器 22.04 在用

172 天前

回复了 wsseo 创建的主题 › 程序员 › vscode 右侧的滚动条看不清怎么办？

"workbench.colorCustomizations": {
"scrollbarSlider.background": "#AF5F5F",
"scrollbarSlider.activeBackground": "#AF5F5F"
// "scrollbar.shadow": "#ff0000"
},
颜色可以自定义

212 天前

回复了 xxxxdingdong 创建的主题 › Node.js › 关于自动化测试的正确方式

playwright

252 天前

回复了 LindenRerrent 创建的主题 › 问与答 › 11408 出分了，有工作了的仙贝指点一下吗

网安专业不读博你去找计算机专业也没有问题，投简历只要是计算机大类都没什么区别，只不过可能硕士期间既要学习网安知识又要一手准备找工作

253 天前

回复了 lakie 创建的主题 › 问与答 › 想开个电信卡，请问有什么最便宜的保号套餐？

昨天刚改了 5 元无忧卡套餐，很简单。中国电信 APP 上找在线客服，然后他们会安排一个你归属地的客服给你发在线视频链接，然后你准备好身份证 5 分钟搞定

253 天前

回复了 SherlockKevin 创建的主题 › 问与答 › 请教 Bazel 官网的设计使用了什么框架，尤其是文档系统

用 Wappalyzer 和 buildwith 扫一下试试呢

278 天前

回复了 hepin1989 创建的主题 › 程序员 › Scala 在选择编程语言的吉祥物，恳请大家给中国龙投一票

@BeiChuanAlex 前几年实习还用到了一些大数据的技术，当时 spark 还算主流，也看了一下 Flink ，请教大佬现在大数据流行的是什么组件呢

278 天前

回复了 gdb 创建的主题 › Markdown › 请问在写 Markdown 文档的时候，在不修改图片情况下，如何给图片添加标注（例如图片上面加一些方框或者箭头）

latex 中是如何实现的呢

308 天前

回复了 shrugginG 创建的主题 › 程序员 › 进程，线程，协程如何配合可以发挥最大的效率

@0o0O0o0O0o 感谢解答，其实 Cookie 并不是我主要考虑的，和传统的爬虫目的还不太一样，我爬虫的目的是要收集网站加载过程中的各种数据，就是类似于 Chrome Dev Tools 中的 Network 面板，同时还需要采集一定量的网站指纹，所以还是 playwright ，pupytter 这种的合适一点感觉。那如果脱离开爬虫的场景，有什么比较推荐的可以深刻理解学习进程/协程/线程的学习方法嘛

1 2

❮

❯