V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  min  ›  全部回复第 61 页 / 共 137 页
回复总数  2729
1 ... 57  58  59  60  61  62  63  64  65  66 ... 137  
2016 年 3 月 28 日
回复了 zy65334 创建的主题 问与答 如何让烂泥扶不上墙的人走上正途?
止损要果断,可以考虑换女友
2016 年 3 月 28 日
回复了 mycsc 创建的主题 问与答 Windows 平台下, Thinkpad 依旧没有对手?
你的需求指向非常明确,其实没有什么讨论的余地,答案就在那里。

举个不恰当的例子:
利用缩进来控制代码结构的语言, python 依旧没有对手?
你的数据库系统什么情况?

用 jdbc 把数据都读到 Spark 里面是可行的,而且是可以分 partition 的。

然而这些数据的读取速度仍然取决于你的数据库到 spark 之间的网络性能。

spark 的好处是读取完成后的所有操作是分布在 spark cluster 上的,而你自己写的程序是单机的,最多能用多线程利用到机器上所有的 cpu 核。

要决定用 spark 还是都到一个 list 里面自己处理,需要你自己评估、测试,跟数据量、处理逻辑都是有关的。
2016 年 3 月 23 日
回复了 mx3y 创建的主题 职场话题 该如何抉择?八年之痒,降薪,股权,搏一搏?
还不如弄点钱扔在股市里,说不定还会涨呢。。。
2016 年 3 月 23 日
回复了 smqhws 创建的主题 职场话题 请问各位领导工资涨 50%可行吗?
我觉得你拿一个+50%的 offer 去谈会比较有力
2016 年 3 月 21 日
回复了 Threezj 创建的主题 程序员 大家最喜欢哪种后端语言?
也许 scala 或者 f#是比较好的
不过现实情况是 java 或者 c#比较多
2016 年 3 月 8 日
回复了 Wongzigii 创建的主题 AlphaGo 李世石 vs AlphaGo 在线直播地址
letv 上有柯洁解说的版本
2016 年 3 月 7 日
回复了 liko 创建的主题 AlphaGo AlphaGo VS 李世石,你觉得谁会赢?
不知道 google 在比赛时会开多少资源给阿尔法狗用,所以很难预计啊。。。
床太小了
google 出了个 paper 说明了 mr 的原理,但是没有放出内部的 mr 框架实现
yahoo 按照 paper 做了 hadoop ,实现了 mr ,不过效率一般
spark 提供了一系列 api 用来处理数据,包括了 mr , spark 做 mr 效率比 hadoop 高

#2 楼说得不是很准确
hdfs 是 hadoop 框架下用来存超大数据的分布式存储系统实现, spark 也可以存取 hdfs 中的数据
spark data frame 是基于 spark rdd 的
工资高奖金理所当然也要高, ceo 呵呵是什么鬼
2016 年 1 月 31 日
回复了 Livid 创建的主题 硬件 New Toy for 2016
可以用来下围棋了。。。
2016 年 1 月 25 日
回复了 Meerebrise 创建的主题 V2EX 你是如何读完微积分学教程这本书的?
其实没有学完,只是把书后习题全部做了一遍然后考试通过而已。。。
Semantic-UI github 上面 open issue 好多啊,不知道 lz 有没有遇到什么比较难搞的 bug 。

最近有项目也想用它。
只要钱够,其他都好办
2016 年 1 月 14 日
回复了 Busy 创建的主题 问与答 我们是否要绑死在一个手机号上
数据分析连你换几个电话号码都搞不定还分析什么
放心换吧,对 data scientist 的工作完全没有影响
2016 年 1 月 8 日
回复了 sumhat 创建的主题 编程 由快播的庭审说说加密解密的问题
缓存应该切成 chunk 存嘛,干嘛存完整文件
30-35w 起
关服务器有很大吃牢饭的可能,这样的结局算不错了。
1 ... 57  58  59  60  61  62  63  64  65  66 ... 137  
关于   ·   帮助文档   ·   自助推广系统   ·   博客   ·   API   ·   FAQ   ·   Solana   ·   2766 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 65ms · UTC 10:54 · PVG 18:54 · LAX 03:54 · JFK 06:54
♥ Do have faith in what you're doing.