V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  jamesyf  ›  全部回复第 1 页 / 共 1 页
回复总数  2
2016-11-12 12:16:28 +08:00
回复了 phttc 创建的主题 Kafka kafka 流量大
尽量多用 batching, 一次网络沟通多发几个信息,这样你的 network 效率比较高,硬盘性能也会好很多

基本思路:
1. producer type 用 async
2. batch.size 尽量调大
3. linger.ms 适当调大
2015-10-29 06:03:46 +08:00
回复了 yhf 创建的主题 Hadoop Mac Intellij 下远程调试 Hadoop 代码有什么好的方案?
你是写什么 hadoop 代码?如果是 java/scala 的 mapreduce 代码的话一般你可以使用 maven/gradle/ant 来做依赖管理,只要把这些东西陪好的话 intellij 就可以自动把对应的依赖拉下来做代码补全。
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3110 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 13ms · UTC 14:18 · PVG 22:18 · LAX 06:18 · JFK 09:18
Developed with CodeLauncher
♥ Do have faith in what you're doing.