heyyyy 最近的时间轴更新 heyyyy 最近的时间轴更新 |
heyyyy🏢 数据开发 V2EX 第 366840 号会员，加入于 2018-11-30 13:13:45 +08:00 |
上海
| 正在使用 doris，遇到一些问题需要答疑解惑，有偿按小时结算！ 程序员 • heyyyy • 2023-08-02 19:11:44 PM • 最后回复来自 1018ji | 4 |
| 上海 2 号线东昌路地铁站附近求几颗布洛芬 上海 • heyyyy • 2022-12-22 21:36:25 PM • 最后回复来自 heyyyy | 8 |
| 毕业 2 年，收获很多，但也逐渐丧失斗志了。
2 程序员 • heyyyy • 2022-10-08 17:06:10 PM • 最后回复来自 YuTengjing
|
28 |
| 沿海地区买房考虑战争因素是多虑了嘛？ 无要点 • heyyyy • 2022-10-05 23:10:53 PM • 最后回复来自 kimwang | 17 |
| XDM，打算去威海养老，海景房有什么坑？ 问与答 • heyyyy • 2022-09-21 09:04:10 AM • 最后回复来自 3297269 | 16 |
| 请教一个 spark dataframe 问题 问与答 • heyyyy • 2022-06-27 15:04:32 PM |
| 不懂就问：跟据官网说明算的 StorageMemory 和 SparkUI 显示的对不上 问与答 • heyyyy • 2022-03-25 22:44:50 PM • 最后回复来自 disk | 7 |
| 不懂就问： Spark 处理业务逻辑写 SQL 还是 DataFrame? 程序员 • heyyyy • 2022-02-21 17:51:43 PM • 最后回复来自 Aksura | 5 |
| 迫于二楼，老鼠在天花板里安家 问与答 • heyyyy • 2021-11-23 18:15:47 PM • 最后回复来自 Daming | 10 |
heyyyy 最近回复了
2022-12-22 21:36:25 +08:00 回复了 heyyyy 创建的主题 › 上海 › 上海 2 号线东昌路地铁站附近求几颗布洛芬 |
已经想办法匀了几颗救了急，谢谢大家
2022-12-22 18:57:21 +08:00 回复了 heyyyy 创建的主题 › 上海 › 上海 2 号线东昌路地铁站附近求几颗布洛芬 |
@zheshiasd 朋友，怎么联系
2022-12-22 18:49:40 +08:00 回复了 heyyyy 创建的主题 › 上海 › 上海 2 号线东昌路地铁站附近求几颗布洛芬 |
@xx19941215 已经发了但没有回音
2022-12-22 18:49:16 +08:00 回复了 heyyyy 创建的主题 › 上海 › 上海 2 号线东昌路地铁站附近求几颗布洛芬 |
@infun 朋友，怎么联系
2022-10-06 14:03:53 +08:00 回复了 airbotgo 创建的主题 › 问与答 › 来来来，让大学生看看这道二年级的题怎么做 |
不太理解，小学 2 年级做出来又有什么意义
2022-09-21 00:14:04 +08:00 回复了 heyyyy 创建的主题 › 问与答 › XDM，打算去威海养老，海景房有什么坑？ |
@Light3 对，我就是去看的环翠区的靖子海边。华润在那边确实有个填海的楼盘，房子三面靠海。
2022-03-25 21:14:44 +08:00 回复了 heyyyy 创建的主题 › 问与答 › 不懂就问：跟据官网说明算的 StorageMemory 和 SparkUI 显示的对不上 |
@disk 谢谢大佬，client 模式下，sparkConf 中的 spark.executor.memory 不会生效，因为执行到那行的时候 jvm 已经启动过了。我的 jvm 参数是-Xmx4g ，spark 拿到的是 3.6g ，减去 ReservedMemory 的 300m 再乘以 0.6 跟 sparkUI 是一致的。
2022-03-25 19:53:13 +08:00 回复了 heyyyy 创建的主题 › 问与答 › 不懂就问：跟据官网说明算的 StorageMemory 和 SparkUI 显示的对不上 |
@disk (1g-300m) * 0.6 得到的是包括 ExecutionMemory 和 StorageMemory 的内存大小。
2022-03-25 17:33:58 +08:00 回复了 heyyyy 创建的主题 › 问与答 › 不懂就问：跟据官网说明算的 StorageMemory 和 SparkUI 显示的对不上 |
更正一下：storageMemory = (1g-300m) * 0.6 * 0.5 = 217m
2022-03-20 18:14:46 +08:00 回复了 Jihua 创建的主题 › 程序员 › 程序员们你们喜欢现在正在做的工作吗？喜欢做现在的业务吗？ |
不喜欢，所以辞职了。业务贼鸡儿复杂，产品屁都不懂，项目管理只会催，老板除了捣乱还会压排期。
Select Language