V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  winchang  ›  全部回复第 2 页 / 共 2 页
回复总数  25
1  2  
2022-08-27 23:19:54 +08:00
回复了 winchang 创建的主题 Spark 真的深入了解开源项目是动手实现--《Spark Core 精简版》
update ,完整实现了 rpc 模块,可独立运行
2022-08-24 18:49:42 +08:00
回复了 winchang 创建的主题 Spark 真的深入了解开源项目是动手实现--《Spark Core 精简版》
又来更新了,通过这一阵时间的理解,算是吃透了 spark rpc 的实现( netty 本身不算哈)。
核心是理解 Dispatcher+MessageLoop+(Inbox/Outbox),项目已经集成了 Inbox 的特性,持续更新中...
2022-08-15 23:30:17 +08:00
回复了 rehoni 创建的主题 程序员 学技术,看 o reilly 的书好,还是 in action 系列好?
我的天,好歹也说说具体学啥
2022-08-14 19:17:20 +08:00
回复了 winchang 创建的主题 Spark 真的深入了解开源项目是动手实现--《Spark Core 精简版》
接下准备集成 rpc 部分,因为并行计算是 rdd 的核心特性; cache 和 checkpoint 也很重要,但可以看成是优化的部分。
1 ,官方在 2.0 时弃用了 akka ,所以也将不依赖这个库
2 ,本着理解核心逻辑,周边逻辑不考虑(例如 metrics )
2017-08-18 19:07:17 +08:00
回复了 changzhiwin778 创建的主题 酷工作 [深圳]对,就是找你的, vue/nodejs 工程师
js 全栈啊
1  2  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1638 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 14ms · UTC 16:50 · PVG 00:50 · LAX 08:50 · JFK 11:50
Developed with CodeLauncher
♥ Do have faith in what you're doing.