z****e 发帖数: 54598 | 1 现在软件都是做一个平台
保证最基础的东西能搞定
之后都是通过类库或者plugin之类的去拓展
spark就是一个平台
java,hadoop这些其实都是平台
跟linux什么没有太大的区别,从这个角度看 |
|
z****e 发帖数: 54598 | 2 spark本身就是对hadoop旧模式的改良
是hadoop多年经验的总结
不排除可能会有新问题冒出来
但是目前看,还没怎么看到
估计这一块以后就这样了 |
|
|
n*****3 发帖数: 1584 | 4 gg 原来 的 东西比hadoop 强多了,
现在呢?
除非 你从 gg fb 出来 要再造新轮子,
要不你那经验 不如 hadoop spark 的经验 |
|
a********5 发帖数: 1631 | 5 取决于你要干嘛啊。。
工具只是手段不是目的啊。
只是想随便瞎玩玩就HADOOP、PIG吧。SPARK确实现在工业界用的还不算很多 |
|
T******7 发帖数: 1419 | 6 storm和spark, maprduce比有什么优势? |
|
z****e 发帖数: 54598 | 7 没有说是一回事啊
一开始就说了是苹果和橘子
后面说的是牛肉姐的具体需求未必需要用spark呀 |
|
|
t**r 发帖数: 3428 | 9 上spark。回头除了新的再上。
都是相通的。c++ server后端作10年不还是那样 |
|
x***4 发帖数: 1815 | 10 spark组是做什么方向:ML,streaming还是什么别的? |
|
m***4 发帖数: 24 | 11 Spark right now : Hadoop couple years ago == Data Bricks : Cloudera
For Hadoop eco-system, current key players are.
Cloudera still private
MapR still private
Hortonwork so-so IPO |
|
b**********5 发帖数: 7881 | 12 看了看documentation, examples, 都是些简单的basic operation, 比如count,
join, filter啊什么的。。。
我以前有个storm topology, 很多bolt, 其实就是一个asynchronous http call to
some other API。。。 但是在apache stream里,好像没有哪个transforming step是
能够asynchronous http call的?
比如我现在有这个
class Tweet {
id;
text;
language;
}
我现在tweet DStream, 要call 一个3rd party web API, 那个3rd party web api
要text, response会告诉我是什么language, 然后我save到Tweet class的language
field。
这个在apache spark里怎么搞啊? |
|
h*******0 发帖数: 270 | 13 牛肉姐,这样行吗?
stream.map{asyncall}.map{
_ onSuccess {...}
}
如果3rd api很慢, 会导致memory不够。 spark 1.5以后有backpressure,用这个限制
流量吧。 |
|
发帖数: 1 | 14 Title: Senior Hadoop/SPARK Engineer
Location: San Mateo, CA
work type: FULL-TIME
Base Salary : 150K + BONUS +PRE-IPO Stock
Requirements:
BS/MS/PhD from top school & strong aptitude toward problem solving and
working with large data sets. Experience with Map Reduce over large dataset.
1 - 2 years hands-on experience with the Hadoop stack (e.g. MapReduce, Pig,
Hive, Hbase).
Procient knowledge in Java/C/C++.
Basic understanding of SQL.
Experience in Machine Learning not required but highly desired... 阅读全帖 |
|
发帖数: 1 | 15 好奇那些牛逼开源项目比如spark, hadoop, tensorflow什么的committer牛不牛逼啊,
出来找工作值几多个钱啊? |
|
d******y 发帖数: 322 | 16 涓埇鏉ヨcommitter閮借繕涓嶉敊锛屼絾鏄笉鍚岀殑committer涔嬮棿姘村钩鍜岃
础鐚樊寰堣繙銆備笉灏戜汉寮鎶辨Spark鐨勫紑鍙戞ā寮忎簡锛氬湀瀛愬お灏
忥紝涓嶉鏄br />
銆鍦xyz14 (xyz14) 鐨勫ぇ浣滀腑鎻愬埌: 銆br />
contributer鐩告瘮宸偣銆 |
|
|
|
w********o 发帖数: 440 | 19 都是过时的。。。
还不如看看container, aws...
spark |
|
w*****1 发帖数: 6807 | 20 我(非常菜鸟)的学习经验是:
spark容易些,如果你需要自己写一些小程序的话
因为只需要用scala或者python这些脚本语言搞起来简单一些
hadoop好像只能用java吧(不确定),而且程序都好大 |
|
b********e 发帖数: 151 | 21 【北美职业论坛视频】讨论hadoop/spark学习 |
|
l*********r 发帖数: 122 | 22 最近接到一面试,
job description 提到spark, hadoop,
这种一般面试会怎么考查? 谢谢! |
|
d*******o 发帖数: 126 | 23 只要去我sparks的朋友那里取货或者在家里收快递,一周50磅左右的货,我会给出好
FEDEX的SHIPPING LABELS,收到后帮我发走就可以,非常轻松。费用好商量
有兴趣的朋友联系我
imessage+8618970069996
QQ 41672 0153
邮箱 d*******[email protected] |
|
|
g******4 发帖数: 6339 | 25 【 以下文字转载自 Chicago 讨论区 】
发信人: gogo2004 (挑灯看剑), 信区: Chicago
标 题: Suburban School's Radon Report Sparks Concern
发信站: BBS 未名空间站 (Sun Oct 19 20:20:34 2014, 美东)
Pleasantdale Elementary School
The levels were elevated in 15 classrooms, according to the release. One
classroom recorded levels at 34.8 pCi/L- nearly eight times the EPA
guidelines. An office was at 25.3 and another classroom was at 12.4.
http://www.nbcchicago.com/news/local/Suburban-Schools-Radon-Rep
Wednesday, Oct 15, 2014 • Updated... 阅读全帖 |
|
e*p 发帖数: 526 | 26 这个spark ignitor一共3根线,我应该测量T1和T2间的电压对吧?不用拔掉哪根线吧 |
|
e*p 发帖数: 526 | 27 T1和T2拔掉的话,我应该测量两根电线间的电压?那怎么证明spark ignitor是不是坏了? |
|
e*p 发帖数: 526 | 28 刚才我又仔细看了看furnace的电路图,发现之前电源输入的地方没找对,这回找对了,终
于在furnace电路板上的两个pin上测到了120v电压,看来不是电路的问题.
不过我刚才因为搭错线,把transformer烧了.先去ebay上买个便宜的通用furnace变压器
,是40VA的,收到后试一下,然后再排查24v电压是否正常.要是24v电压正常就换个spark
ignitor,再不行就换新的furnace,差不多了吧? |
|
e*p 发帖数: 526 | 29 修好了,变压器的问题,eBay上买了个通用的,18块钱,换上好了,说明spark ignitor没坏.
运气不错,换的第一个零件就对了.再次致谢imore版主的指导! |
|
|
r******l 发帖数: 10760 | 31 C1的Spark business card看起来不错啊,为啥没人讨论?
- Get 2% cash back on every purchase, every day
- Earn a one-time $100 bonus once you spend $1,000 on purchases within the
first 3 months
- Earn a one-time $50 bonus when you sign up for one or more employee cards
within the first 60 days
- Redeem your cash rewards anytime
- There's no limit to the amount of cash you can earn
- Cash rewards don't expire
而且这个是Visa,接受的地方比AMEX多得多。 |
|
l**y 发帖数: 2103 | 32 这里的人都是搞Chase Ink 5X 的,Spark 只有2X,相形见拙。
我年初开了一个,很不错,跟你说的一样,接受的地方比AMEX 多不少。 |
|
w*********w 发帖数: 1497 | 33 Spark 2%版的有无年费的? 不是第一年无年费么? |
|
w*********w 发帖数: 1497 | 34 Spark 2%版的有无年费的? 不是第一年无年费么? |
|
y*******i 发帖数: 182 | 35 spark cash和miles,现在都是送$500。不知申请难度如何,有无可能一天批两张?主
要是C1 pull三家信用局,如果只申请一个感觉不太值。有申请过的没?多谢 |
|
c*****h 发帖数: 14923 | 36 就他们家官网啊
Spark Cash Business,2% cash back all purchase的那张 |
|
V**A 发帖数: 1596 | 37 收到Venture 五万的邀请,准备跟Spark同时申请,Pull应该可以合并吧?
三个Pull换$1000。 |
|
h*******s 发帖数: 616 | 38 楼主撸卡琐男一枚,一家之言,大家轻拍。
---------------
几个月前开了 CapitalOne Spark Business,冲着 50k bonus 去的。审核很宽松,LD
和楼主各开了一张。LD 那张拿到 bonus 后就关了。对方也就礼貌性地询问了一下,一
点也没有让楼主这琐男觉得难堪。
今天偶然发现这张关了的卡有十几块钱 balance。打电话去查询,原来是之前有一笔
dispute transaction。CapitalOne 退了全款。一个月后,发现商家也退了一部分
,于是就向楼主要商家退的那部分。楼主本来是打算付了,谁知对方竟说“我帮你
write
off 吧”。真是一股暖流涌上心头。本来自己开那张也打算关的。冲着这服务态度,打
算长期保留。
---------------
再来说一下高大上的 Amex。
用 Costco 的 Amex 超过十年了。服务虽然没有什么亮点,但也过得去。但最近一件事
令我完全改观。
同样是楼主和 LD 各开一张 Amex Premier Rewards,为的是撸 50k bonus。楼主的先
撸完,打电话关卡。对方态度非常恶劣,可... 阅读全帖 |
|
v*******8 发帖数: 1013 | 39 spark这卡F1学生能申请不,审核严不严呢。 |
|
v*******8 发帖数: 1013 | 40 spark这卡F1学生能申请不,审核严不严呢。 |
|
v*******8 发帖数: 1013 | 41 spark这卡F1学生能申请不,审核严不严呢。 |
|
|
b***c 发帖数: 2280 | 43 Spark Miles可以兑换成statement credit么?可以的话,兑换比率是多少?
谢谢! |
|
c********8 发帖数: 95 | 44 今天收到C1 spark biz card,打电话激活的时候说需要提供biz相关的document,请问
这个怎么处理啊。 还是直接pass,浪费我的hard inquiry。或者告诉他们现在还没有
,以后打算有biz?
谢谢 |
|
s******g 发帖数: 6072 | 45 Captail one搞了spark business cash后还可以搞miles么?多谢,两个offer都可以拿
么? |
|
e******e 发帖数: 10121 | 46 可以,不过这俩卡消费都高。同时搞等于半年内花$10万。
:Captail one搞了spark business cash后还可以搞miles么?多谢,两个offer都可以
拿么? |
|
s******g 发帖数: 6072 | 47 以前申过capital one spark business,拿的是1000/10000,现在再次申请2000/50000
,还可以再拿bonus么?多谢 |
|
g******4 发帖数: 6339 | 48 【 以下文字转载自 Chicago 讨论区 】
发信人: gogo2004 (挑灯看剑), 信区: Chicago
标 题: Suburban School's Radon Report Sparks Concern
发信站: BBS 未名空间站 (Sun Oct 19 20:20:34 2014, 美东)
Pleasantdale Elementary School
The levels were elevated in 15 classrooms, according to the release. One
classroom recorded levels at 34.8 pCi/L- nearly eight times the EPA
guidelines. An office was at 25.3 and another classroom was at 12.4.
http://www.nbcchicago.com/news/local/Suburban-Schools-Radon-Rep
Wednesday, Oct 15, 2014 • Updated... 阅读全帖 |
|
g******4 发帖数: 6339 | 49 【 以下文字转载自 Chicago 讨论区 】
发信人: gogo2004 (挑灯看剑), 信区: Chicago
标 题: Suburban School's Radon Report Sparks Concern
发信站: BBS 未名空间站 (Sun Oct 19 20:20:34 2014, 美东)
Pleasantdale Elementary School
The levels were elevated in 15 classrooms, according to the release. One
classroom recorded levels at 34.8 pCi/L- nearly eight times the EPA
guidelines. An office was at 25.3 and another classroom was at 12.4.
http://www.nbcchicago.com/news/local/Suburban-Schools-Radon-Rep
Wednesday, Oct 15, 2014 • Updated... 阅读全帖 |
|
d*******o 发帖数: 126 | 50 只要去我sparks的朋友那里取货或者在家里收快递,一周50磅左右的货,我会给出好
FEDEX的SHIPPING LABELS,收到后帮我发走就可以,非常轻松。费用好商量
有兴趣的朋友联系我
imessage+8618970069996
QQ 41672 0153
邮箱 d*******[email protected] |
|