由买买提看人间百态

topics

全部话题 - 话题: kafka
首页 上页 1 2 3 4 5 6 7 8 9 10 下页 末页 (共10页)
w****j
发帖数: 5581
1
来自主题: History版 - 明末文字獄嚴重麼?
哈,你还在较劲哪,不过终于学会用维基了,也不提什么皇家档案了,有一点点进步。
不过你好歹把维基内容看一遍好不?史迁其他作品一个是一封书信,一个是悲士不遇賦
,这个级别的作品,曹雪芹留下来的诗文也不是没有啊。陈寿么,除了三国志,还有什
么其他原创作品啊?嗯?既然及一二三四五,我也有样学样。
1. 你给了两个wiki的链接,完全是证实他们两个都是只有一部原创著作。谢谢你帮我
找证据,虽然其实不需要你忙活。
2. 好吧,鲁迅名下的作品其实都不是周树人写的。你满意了?这也能成为质疑曹雪芹
是作者的理由,你的逻辑是啥啊?
3. 史迁生前怎么有知名度啊?证据? 别跟我说他是朝廷官员所以就有知名度好不好。
曹雪芹在朋友圈里也有名气啊。好吧,就算他没名气,那Kafka生前有个屁的名气,孤
独寂寞中死去的时候还要求烧掉所有手稿。按你这个标准,Kafka名下的作品一定都不
是他写的,不知是抄谁的。是吧?
4. 自序,你说的是史记吧?太史公自序我下面全文copy/paste, 恕我愚鲁,你给我指
出来那里说到太史公自己是谁,老爸是誰, 老婆是誰。三国志没自序,按你这个标准
,陈寿应该不是三国志的作者了?
5... 阅读全帖
o**********e
发帖数: 18403
2
来自主题: Military版 - 对L股价大跌的一点看法 (转载)
【 以下文字转载自 SanFrancisco 讨论区 】
发信人: onetiemyshoe (onetiemyshoe), 信区: SanFrancisco
标 题: 对L股价大跌的一点看法 (转载)
发信站: BBS 未名空间站 (Fri Feb 12 10:40:24 2016, 美东)
发信人: whiteknight0 (whiteknight0), 信区: JobHunting
标 题: 对L股价大跌的一点看法
发信站: BBS 未名空间站 (Fri Feb 12 03:55:47 2016, 美东)
近来股市大盘不好, L家更是突然跌掉一半,市值缩水到才区区一百来亿 甚至还不
如小米,联想等这些国内公司的市值, 一群人在网上分析各种原因, 老衲作为L的前
员工, 觉得这其实原因没有那么复杂, 其实很简单, 就是L里面很多manager不会做
业务,也不想好好做业务。
怎么讲呢? 举个简单的例子, 去年大概3-4月的某个时候, L主管技术的一个VP给工
程师群发了一个邮件,表示以后不再继续用Scala开发了,重新转回使用Java. 不到
两年时间里面,程序设计... 阅读全帖
l*****t
发帖数: 2019
3
什么real time processing?
kafka + hbase?
storm-on-yarn?
kafka + storm?
你同事怎么说的?
o**********e
发帖数: 18403
4
【 以下文字转载自 Programming 讨论区 】
发信人: goodbug (好虫), 信区: Programming
标 题: Pinterest陶涛:三个教训和三个发展选择
发信站: BBS 未名空间站 (Wed Sep 3 03:19:03 2014, 美东)
http://tech.huanqiu.com/per/2013-08/4307208_2.html
我们作为创业公司总结了一些经验和教训跟大家分享一下:
1、保持简单,这对创业公司来讲非常重要,一个简单的系统出错的可能性就很小
,出错以后解决问题的可能性就变得很大。保持简单我们认为对创业公司来说是非常关
键的问题。
2、我们认为一项技术的超级用户遇到的难度是远远大于普通用户的。我们知道大
家今天都在用一些开元软件,这些开元软件是逐步发展的过程,很多软件在早期并没有
经历过很大的压力测试,在一定的流量基础上他们都工作的非常少,但是超过一定流量
的话都有各种各样的问题。如果你作为超级用户,你可能接触到的问题是前人完全没有
遇到的,你很难在社区里得到任何求助,需要自己读它的代码,去看是不是我能解决,
如果解决不了的话... 阅读全帖
o**********e
发帖数: 18403
5
【 以下文字转载自 Programming 讨论区 】
发信人: goodbug (好虫), 信区: Programming
标 题: Pinterest陶涛:三个教训和三个发展选择
发信站: BBS 未名空间站 (Wed Sep 3 03:19:03 2014, 美东)
http://tech.huanqiu.com/per/2013-08/4307208_2.html
我们作为创业公司总结了一些经验和教训跟大家分享一下:
1、保持简单,这对创业公司来讲非常重要,一个简单的系统出错的可能性就很小
,出错以后解决问题的可能性就变得很大。保持简单我们认为对创业公司来说是非常关
键的问题。
2、我们认为一项技术的超级用户遇到的难度是远远大于普通用户的。我们知道大
家今天都在用一些开元软件,这些开元软件是逐步发展的过程,很多软件在早期并没有
经历过很大的压力测试,在一定的流量基础上他们都工作的非常少,但是超过一定流量
的话都有各种各样的问题。如果你作为超级用户,你可能接触到的问题是前人完全没有
遇到的,你很难在社区里得到任何求助,需要自己读它的代码,去看是不是我能解决,
如果解决不了的话... 阅读全帖
b********r
发帖数: 620
6
来自主题: JobHunting版 - 秒杀设计题
牛们,推荐一两个入门的real world design case based upon kafka + spark +
cassandra?
我的理解是
kafka = tibco-like broadcasting/p-p messaging
spark = enhanced hadoop
cassandra = kv storage
不知道对不对。
q****F
发帖数: 51
7
来自主题: JobHunting版 - 究竟怎么回答System Design问题
从某做过面试官的业内资深人士处了解到的信息,要是有收获的话给个包子啊。
System Design问题本质上非常庞大,比如Design News Feeds,这种东西没有固定答案
,说七天七夜也说不完,甚至在实际生产中也是根据各种需求换来换去,所以正因为这
个原因,解答没有固定答案。但是怎么评分呢,一个成功的解答需要具备以下几点:
一,全,这个是指能够将整个问题的宏观全局描述下来。也就是类似之前网上发布的
Harvard的System Design视频中画各种圆圈方框的流程图,这里一个load balancer,
那里一个database之类的。
二,深,面试官任意挑一个模块,你要能挖多深挖多深,比如如果你提到consistent
hashing,最好能直接谈到hash函数的选择,比如可以看看Twemproxy里面的具体实现。
再比如你说要用Kafka,你就要能说出为什么Kafka这么快,别的MQ就没有这么快。
三,观察,这里主要是指密切关注面试官的反馈。有的时候面试官对你的设计不满意,
不会直接说出来,甚至说这样应该可以(this should work),其实有可能是他已经对你
放... 阅读全帖
z*c
发帖数: 63
8
来自主题: JobHunting版 - Linkedin vs Salesforce vs Early Startup?
在版上看了很多大公司vs startup的文章,感觉各执一词。
有说年轻人就要去startup的,有说刚毕业应该去大公司学习的。
有说绿卡身份最重要应该去大公司呆着的,也有说只要有本事去startup也完全不用考
虑身份的。
实在还是纠结和迷茫啊。
目前手头有好几个offer,推掉了好几个startup,目前留了一个startup,salesforce
和linkedin,纠结了很久立即就要做最终决定了,求问大家意见。
先上package信息:
saleforce:120k base, 15k sign on, 税后9.5k的relocation,价值27k的RSU/4年
startup(实在太小不方便说名字):120k base,10k sign on,15k stock options/4
年,他家对股票超有信心,股票估值60万
linkedin:还未知,看版上的数据感觉挺一般的...组也未知,是application track
优缺点:
linkedin:dream company。以及由于个人原因,相比三番更倾向于南湾。不过本人是
最想做infrastructure的,sam... 阅读全帖
s*****s
发帖数: 94
9
来自主题: JobHunting版 - L家 index设计题
是不是大约这个意思, 问的不是数据库里面如何做index而是kafka内部如何做index
0.8中增加了逻辑offset,那么就需要做逻辑offset和物理地址间的转化
简单的方法,直接用hashmap,cache所有offset,问题就是这样空间耗费比较大
所以kafka的方式,是分段索引,用offset通过二分查找中index中找出段的起始地址,
然后再去file里面遍历找出精确的地址, 时间换空间的设计
1. LogSegment.translateOffset
首先是从index文件中找到近似的物理地址
前面说了,index中从效率考虑并不会为每个offset建立索引entry,只会分段建立
offset索引, 所以从index中直接可以找到精确物理地址的概率不大,但是可以找到最
接近的那个物理地址
如果你觉得index的粒度比较粗,可以直接给出开始查找的startingFilePosition
所以精确的物理地址需要到MessageSet文件里面去继续找
g****o
发帖数: 547
10
来自主题: JobHunting版 - Linkedin 面经
system design可不可以这样做
每个server每30s,把自己server的top100 link,分别点击几次 log到kafka.
同时也作为kafka subscriber接受所有的top link log,
每个server读到log后自己汇总,得出last 5 min的 top 100 link
汇总 (5min/30s)*机器数 的top 100 link花不了太多时间。
好像不需要一台server专门算这个,另外也更reliable

how
explain
pass
g****o
发帖数: 547
11
来自主题: JobHunting版 - Linkedin 面经
system design可不可以这样做
每个server每30s,把自己server的top100 link,分别点击几次 log到kafka.
同时也作为kafka subscriber接受所有的top link log,
每个server读到log后自己汇总,得出last 5 min的 top 100 link
汇总 (5min/30s)*机器数 的top 100 link花不了太多时间。
好像不需要一台server专门算这个,另外也更reliable

how
explain
pass
b**********5
发帖数: 7881
12
来自主题: JobHunting版 - 一个小公司的面经
avvo吧。。。
做real time analytics, 用spark, kafka, hbase等等。。。
面试, 一个spark, kafka, hbase都没问, 先问怎么design他们website上的search
。。。怎么scale, 怎么priority search result。。。
然后一个简单题, 问how to find common elements in two array, 给了hashset,
sort two array,和sort one array再binary search。。。 写了sort two array的算
法。 然后问,怎么solve in a distributed environment, 答: distributed
hashset, 或者external sort。。。
然后好了, 来了一个director, 问了我probablility的问题, 基本没答出来
再来了CTO, 聊了一大通, 然后问了这个问题:
http://www.glassdoor.com/Interview/there-is-a-disk-hal... 阅读全帖
y*****e
发帖数: 712
13
谢大牛分享,只想说图灵自杀不是定论,留下很多疑点。
还想问一下kafka支持的这个avro serialization format,这个是在browser request
阶段就转成了avro的形式,传输给kafka是吗?这个代替传统的json或xml,因为更
compact?
b*****n
发帖数: 618
14
这个题目我觉得我答的挺简单的,但是看起来对面那边也不怎么懂。。
这是个经典的top trend问题,有很多现成的solution来首先得到和处理数据。
因为这个题目当时要求可能query near-real-time的结果,所以我当时直接上Kafka +
Storm,
如果对数据的latency要求没那么高的话,用batch process更好,比如spark/hadoop
mapreduce都可以。
Kafka用来stream event flow,然后Storm process event stream可求top trend
具体用Storm怎么做这一篇文章比较经典:
http://www.michael-noll.com/blog/2013/01/18/implementing-real-t
归根结底是sliding window aggregation,随便一个能做这种事情的工具都可以,自己
写一个出来也可以,方法都是一样的。
把时间分成可以容忍误差的小块(比如,每秒),然后每个小块求每种type的event的
数量。
process的结果需要存到persistent data... 阅读全帖
b*****n
发帖数: 618
15
This is a well known issue for Kafka
基本每个用Kafka的公司都会遇到,Jay自己的一篇文章讨论这个问题:
http://blog.empathybox.com/post/62279088548/a-few-notes-on-kafk
t*********r
发帖数: 387
16
不说明道理,贴个帖子有意思么?kakfa就是王道真理?F家前一段还发呸破鄙视了某家
的kafka
你自己发的东西里面也写了:
> there is no correct algorithm for guaranteeing consistency in the face of
f failures with fewer than 2f+1 servers
反之,there are correct algorithms for guaranteeing consistency (with
availability) in the face of f failures with 2f+1 or more servers, e.g. some
partition with a majority.
说到某家,我一学长之前看某家的人写blog吹kafka多快,还叫大家下载核实。结果这
位学长下了一个benchmark script一看,呵呵
某家的script量的是async send有多快,而不是真正量的ascknowledgement的速度
学术/工业界大忽悠到处都是,做不出来好的系统推卸责... 阅读全帖
b*****n
发帖数: 618
17
Kafka不是王道,这个是为了解释partition的时候出现master election就会出现data
loss,我不知道你怎么看的这篇文章,Jay要解释的是这种情况无法避免,唯一解决的
方法就是要么放弃A,要么就忍这个data loss。
我也不知道你对这些系统有没有真的用过体验过,你的意思是你凭空就能搞一个牛逼的
系统出来,还是说你比Jay这些人还牛逼。
最后再教给你怎么看文章,这个文章里面第一行就说明了,这篇文章是基于另外一片文
章的一篇follow up:
https://aphyr.com/posts/293-call-me-maybe-kafka
这个文章里面有详细的什么时候会出现data loss的解释。
刚才就想说混淆CAP概念的人是你,没好意思说而已。
你要是真牛逼就给按照你的想法做个比现在市面上都牛逼的kv store出来,然后给个
benchmark证明不管从latency,scalability发面都能达到要求,不用高,就用spanner
的标准,read/write lookup就web app level,50ms latency就行,然后什么复杂
q... 阅读全帖
t*********r
发帖数: 387
18
My comment was referring to the second half of your comment. I don't think
kafka is representative of necessarily the best design space.
In particular, consider the case where kafka uses a quorum rather than
primary/backup for its replication scheme (as it applies to providing data
loss guarantees during partition).
Also, what do you think should be the provided guarantees for *uncommitted*
data?

change
each
of
b*****n
发帖数: 618
19
quorum system本身就不是A的。
Cassandra tunnable consistency也不是你说的这种C,tune来tune去的结果是只能让
得到的结果是正确的概率更高而已,小数点后面几个9的差别。跟你想要的C根本不是一
回事。
A这个东西其实是你能接受的latency到底有多少,可以完全在有machine failure的这
段时间停止process任何request,然后等到完全恢复之后再继续,如果无限大的
latency还可以被认为是A,那就能实现A。关键是看这种cost有多大,能不能接受。
分布系统处理failure困难的一个地方就在于,在跟remote发信息的时候如果没收到ack
,不能分辨出到底是remote挂了还是network partition的,所以如果想要所谓的C,A
跟P基本上不能共存。Kafka design的时候有一个重要的假设,就是所有机器在同一个
network里面,假设不会出现partition。
即使是所谓的CP,CA系统,也不是完全100%的CP,CA,总有个别的case能break,只是
侧重点在什么上面,说来说去其实都是tra... 阅读全帖
t*********r
发帖数: 387
20
> Cassandra tunnable consistency也不是你说的这种C,tune来tune去的结果是只能
让得到的结果是正确的概率更高而已,小数点后面几个9的差别。跟你想要的C根本不是
一回事。
你确定跑个QUORUM也不能达到我所说的C?来个例子举证。
当然所有机子挂了我也没办法。
> A这个东西其实是你能接受的latency到底有多少,可以完全在有machine failure的
这段时间停止process任何request,然后等到完全恢复之后再继续,如果无限大的
latency还可以被认为是A,那就能实现A。
理论上A跟LATENCY没半毛钱关系。我不喜欢胡扯,直接引用文献:http://webpages.cs.luc.edu/~pld/353/gilbert_lynch_brewer_proof.pdf
Available Data Objects
For a distributed system to be continuously available, every request
received by a non-failing node in the sy... 阅读全帖
S*******r
发帖数: 14
21
注:如果你看到此贴,说明该opening还在,欢迎投简历。
我是Uber data infrastructure的engineering manager,急召一名有丰富经验的full-
stack engineer,需要build dashboards and management tools for Kafka &
Streaming.
2+ year experiences. 有类似big data经验的都可以。如果有兴趣,请发信到data-
[email protected]
/* */,并标题注明"Apply for full-stack opening in Kafka/
Streaming team"
工作地点在SF,提供relocation package & stock
多谢
c******n
发帖数: 4965
22
Kafka 人家有 ops tool, 你为啥自己弄? 省不了钱的

full-
/* */,并标题注明"Apply for full-stack opening in Kafka/
p*u
发帖数: 2454
23
来自主题: JobHunting版 - FB 主页上 software engineer opening 0
why bother?
"
发信人: fantasist (fan), 信区: Programming
标 题: Re: 大家公司里kafka是dev弄还是ops折腾
发信站: BBS 未名空间站 (Thu Oct 1 12:46:29 2015, 美东)
有的转dev有的跳槽,人数越来越少,我们就干脆不招人了,primary oncall让dev承担。
最近培训我们怎么解决ops问题,比如mongo挂了怎么重启之类的,烦啊
"
http://www.mitbbs.com/article/Programming/31443747_0.html
"
发信人: fantasist (fan), 信区: Programming
标 题: Re: 大家公司里kafka是dev弄还是ops折腾
发信站: BBS 未名空间站 (Thu Oct 1 18:20:51 2015, 美东)
其实fb给的很少,股价不涨pkg都到不了20万,比亚麻强的有限。另外E5 E6据说
refresh很少,不像G和A能给到Base的水平,所以走的人很多。

"
http://www.mitbbs.com/ar... 阅读全帖
m******3
发帖数: 346
24
来自主题: JobHunting版 - 讨论两道L家的设计题
不懂kafka,打算去看看了解一下。不过我理解好虫你的意思是说,server(producer)把
产生的log直接丢到Kafka Q里面, 然后有一个dedicated cluster(consumer)不断的从
queue里面取出log然后processing, 这个用来处理log的工具可以Storm or Spark,对么
j*****i
发帖数: 7
25
来自主题: JobHunting版 - ebay内推,上海组内加海外
最近组内找人,个人感觉待遇很不错,适合有经验的,至少3~4年吧,要求Java要熟练
,做大数据相关,用到很多热门的技术,比如Hadoop/Spark/Storm/Kafka,在上海算是
比较有竞争力的,有意者可帮忙内推,以下是组内职位的JD,如果对其他职位比较感兴
趣,可以自己去eBay career找,应届或实习无法内推。我会每天检查邮件,无论是否
成功都会在在一周内给您回复,请有意者把简历发到[email protected]
/* */。ebay
没有冷冻期,大家可尽力尝试。
Position Title
MTS 2 Software Engineer
Description
This position is located in eBay Center of Excellence in Shanghai in the
Engineering team of eBay Cloud Services organization in eBay. This team is
focusing on engineering design and implementation t... 阅读全帖
j*****i
发帖数: 7
26
来自主题: JobHunting版 - ebay内推,上海组内加海外
最近组内找人,个人感觉待遇很不错,适合有经验的,至少3~4年吧,要求Java要熟练
,做大数据相关,用到很多热门的技术,比如Hadoop/Spark/Storm/Kafka,在上海算是
比较有竞争力的,有意者可帮忙内推,以下是组内职位的JD,如果对其他职位比较感兴
趣,可以自己去eBay career找,应届或实习无法内推。我会每天检查邮件,无论是否
成功都会在在一周内给您回复,请有意者把简历发到[email protected]
/* */。ebay
没有冷冻期,大家可尽力尝试。
Position Title
MTS 2 Software Engineer
Description
This position is located in eBay Center of Excellence in Shanghai in the
Engineering team of eBay Cloud Services organization in eBay. This team is
focusing on engineering design and implementation t... 阅读全帖
w**********0
发帖数: 192
27
来自主题: JobHunting版 - 对L股价大跌的一点看法
近来股市大盘不好, L家更是突然跌掉一半,市值缩水到才区区一百来亿 甚至还不
如小米,联想等这些国内公司的市值, 一群人在网上分析各种原因, 老衲作为L的前
员工, 觉得这其实原因没有那么复杂, 其实很简单, 就是L里面很多manager不会做
业务,也不想好好做业务。
怎么讲呢? 举个简单的例子, 去年大概3-4月的某个时候, L主管技术的一个VP给工
程师群发了一个邮件,表示以后不再继续用Scala开发了,重新转回使用Java. 不到
两年时间里面,程序设计语言就变了两次。 一会儿必须用Scala, 不用不行; 一会儿
不让用Scala, 用了不行。 这真是”NZND“的最好注解。 要知道, L家的招聘是非常
偏向java的。 多年以来一直沿用的招聘和出题流程, 给公司积累了大量的java背景的
人才。 可是不知道什么时候,某位manager突然拍脑袋想出来咱们要用scala, 一夜之
间把大批资深的java熟练工变成了三脚猫scala小学徒。 一时间办公室里面人手一本
scala编程书,一边查着看着一边写三脚猫代码, 原本用java闭着眼睛也能实现的小功
能,写个c... 阅读全帖
w**********0
发帖数: 192
28
来自主题: JobHunting版 - 对L股价大跌的一点看法
好像就是他
Kafka这种东西同质化产品太严重 同类的多的是,kafka远不是最polular的
更大的问题是 消息队列这种东西 在整个技术体系里面是非常非常不重要的一个次要环
节,写的再好也不过是一个消息队列
有本事搞个spanner这种领先业界五年的黑科技出来不?
c*****e
发帖数: 210
29
来自主题: JobHunting版 - yelp vs 微软
如果你是刚毕业,去微软还不错。
学学C#,C++,WPF什么的,学学软件开发的流程,设计模式,各种测试的技术,打个好
基础。拿个十几万的年薪不少了,业余学点儿东西,周末游山玩水,生活很自在。干个
两三年,H1B和140(甚至绿卡)都到了手,跳槽去湾区甚至纽约的金融行业也不晚。如
果微软干得爽,4-5年能升职到Senior,也能赚个20几万,和第一阵营的公司也没什么
区别。英语好的话,转行当PM。
kafka, spark什么的,说实话,自学一下就行了。不是每个公司都用kafka,spark,也
不是每个职位都需要这些东西。现在的新技术层出不穷,你学的过来吗?你要不要学
angular,要不要学meteor,要不要学MongoDB,要不要学hadoop,要不要学mesos,要
不要学docker,要不要学go,要不要学react native,要不要学Storm?
一个有经验的马公出去找工作,这些具体的技术一般都不是障碍。更重要的是你的基本
功,你的学习能力,你的设计经验,你的交流能力。
说实话,湾区80%的公司不配给微软提鞋。
当然你想自己创业(不是说去创业公司当炮灰),那么一定要去湾... 阅读全帖
h*****2
发帖数: 114
30
来自主题: JobHunting版 - Staff Software Engineer- Cloud and Big Data
please send resume to [email protected]/* */
Thanks!
----------------------------------------
Job description
Position Title: Staff Software Engineer
Location: Milpitas, CA
The Company:
FireEye has invented a purpose-built, virtual machine-based security
platform that provides real-time threat protection to enterprises and
governments worldwide against the next generation of cyber attacks. These
highly sophisticated cyber attacks easily circumvent traditional signature-
based defenses, suc... 阅读全帖

发帖数: 1
31
Palo Alto well- established Start-up 高薪招聘full-time Sr.Software Engineer
. JD
如下:
#Title: Sr. Software Engineer(full-stack)
Work type: full time
Location: Palo Altoe, CA
Base Salary Range: 140K-160K + bonus+ stock option+ other benefits
What You'll Do:
• Meteor: We can iterate quickly using Meteor. We can get a highly
responsive and production ready application within days rather than weeks
using Meteor stack.
• Kubernetes and docker: We are in charge of our infrastructure.
Wh... 阅读全帖

发帖数: 1
32
来自主题: JobHunting版 - 苹果软件组内推
内推苹果的infrastructure部门,在cupertino,我是一个小组的hiring manager。
技术方面,基本上是java,cassandra和kafka。 面试主要是算法加系统设计,刷题是
必要的。
工作经验最好有3年以上经验的,用过cassandra和kafka有加分。
人员方面,大组里印度人中国人都没有,所以要大力发展国人势力,嘿嘿。
感兴趣给我发邮件吧,我的邮件是:tommiemoore007 at gmail
另外,如果对苹果其它职位感兴趣的,我也可以内推到hiring manager。请把job id告
诉我:
http://www.apple.com/jobs/us/

发帖数: 1
33
来自主题: JobHunting版 - 苹果软件组内推
内推苹果的infrastructure部门,在cupertino,我是一个小组的hiring manager。
技术方面,基本上是java,cassandra和kafka。 面试主要是算法加系统设计,刷题是
必要的。
工作经验最好有3年以上经验的,用过cassandra和kafka有加分。
人员方面,大组里印度人中国人都没有,所以要大力发展国人势力,嘿嘿。
感兴趣给我发邮件吧,我的邮件是:tommiemoore007 at gmail
另外,如果对苹果其它职位感兴趣的,我也可以内推到hiring manager。请把job id告
诉我:
http://www.apple.com/jobs/us/
m**********w
发帖数: 60
34
来自主题: JobHunting版 - Linkedin 这个大组好不好
这个组算是L家技术含量比较高的几个组之一了,kafka,samza,databus都出自该组。
kafka现在这么热,去干两年再出来找工作很受欢迎
h**o
发帖数: 548
35
来自主题: JobHunting版 - 贡献个系统设计题兼讨论
Thanks mknoodle. 你确实很strong.
6 的 queue 用 kafka 不能绝对FIFO。aws sqs 据说可以。如果是其它queue, 我觉得
可以 给 message seqNo
然后 consum每次取所有queue中最小seqNo那个message.
queue 要死了怎么办?kafka 有 replication 机制。不是很懂。大致是每个message
在其它queue 有备份。

发帖数: 1
36
来自主题: JobHunting版 - pinterest前景如何
L的infra方面拿得出手是Kafka。而且原来做kafka的那帮人都走光了。
现在力推的samza似乎没怎么被用。uber在用。
ML方面什么都没有。
application端不用说了。相信大家都知道。shit都不如。
现在就剩一滩烂摊子。management非常成问题。
也就福利还不错,食堂挺好。乌黑乌黑的烙印混吃等死。
H**********5
发帖数: 2012
37
来自主题: JobHunting版 - pinterest前景如何
L家烙印也多?记得板上谁说过L家都白皮和老中


: L的infra方面拿得出手是Kafka。而且原来做kafka的那帮人都走光了。

: 现在力推的samza似乎没怎么被用。uber在用。

: ML方面什么都没有。

: application端不用说了。相信大家都知道。shit都不如。

: 现在就剩一滩烂摊子。management非常成问题。

: 也就福利还不错,食堂挺好。乌黑乌黑的烙印混吃等死。

c*****8
发帖数: 23
38
有兴趣的同学请发站内信,帮忙介绍的同学如果内推成功,可平分奖金:)
email: [email protected]
Sr Software Engineer - Data Science Pipeline - Big Data, Java, Python
Job LocationsUS-IL-Chicago
Qualifications
A BS or MS in Computer Science or related field
5+ years of programming experience Java, Python, and Java Script.
3+ years of working experience with AWS services (EC2, SNS, SQS, S3, EMR,
Data Pipeline, VPC and etc.)
Development experience of Web Services (RESTful, SOAP)
Development experience with web application framewor... 阅读全帖

发帖数: 1
39
岗位职责:
1.负责大数据相关产品设计和开发,参与需求分析,系统分析及详细设计
2 负责滴滴数据平台系统的架构&开发,系统承载数据报表、工具平台、数据服务及大
数据可视化相关项目
3.负责数据可视化及数据服务项目架构&开发
任职要求:
1. 研究生或以上学历,计算机相关专业,3年以上工作经验,1年以上大数据相关产
品研发经验
2.JAVA基础扎实,理解io、多线程、集合等基础知识,对JVM原理有一定的了解;
3.熟悉Python/shell等一种或多种脚本语言
4.熟悉大型分布式系统设计与开发,熟悉各种web缓存、消息队列技术原理。在实际项
目中使用过redis、kafka。
5.熟悉MySQL数据库原理及常用优化方法
6.具备良好的工程意识,熟悉git代码管理流程,熟悉maven项目管理工具。
7.熟悉hadoop,有MapReduce开发经验,了解YARN。
8.密切关注大数据相关技术的发展趋势,有hadoop/hbase/Kafka/flume/Zookeeper/
spark/kylin/es等相关技术研究或开发经验者优先
滴滴出行3年多时间,发展到5千人的规模,大数据作... 阅读全帖

发帖数: 1
40
滴滴快的(滴滴出行)是扎根中国、全球最大的一站式多元化出行平台, 截至2015年
11月,滴滴在中国360余座城市为2亿5千万用户提供专车、出租车召车、专车、快车、
顺风车、代驾、企业级和智慧公交等全面出行服务,目前员工发展到5千人的规模。第
三方数据显示,滴滴拥有80%以上的中国专车市场份额;99%以上的网约出租车市场份额
。公司致力于以共享经济实践响应中国互联网经济创新战略,与不同社群与行业伙伴协
作互补,运用精准的大数据算法技术,解决中国的出行和环保挑战,提升用户体验,创
造社会价值,建设高效、永续的移动出行新生态。目前滴滴大数据正在启动面向全球高
校博士、硕士、优秀本科生的“新锐计划”招聘项目,引进高素质的计算机基础研究人
才和大数据核心人才,研究方向包含机器学习、人工智能、计算机视觉、机器人、自动
控制、汽车工程、数据挖掘、最优化理论、分布式计算等;觉得你的背景和研究方向和
我们很匹配,请关注滴滴出行的机会,我们将提供全新的工作机会。滴滴美国的研究院
也在成立中,不管国内国外,期望你和滴滴一起通过出行改变世界,滴滴立志于做一个
全球性的出行平台。
滴滴研究院(DIDI Res... 阅读全帖

发帖数: 1
41
A silicon valley high tech company is currently looking for an experienced
data infrastructure engineer to join our big data analytics team to build
the company next-generation data center management Platform together. Our
Big Data Infrastructure team is responsible for all real-time and batch
processing infrastructure for the company’s analytical data as well as
analytics algorithm design/development. We heavily utilize open-source
software stack including Hadoop, Akka, Spark, Storm, Kafka an... 阅读全帖

发帖数: 1
42
资本寒冬
科技企业缩招
暑期实习招满在即
简历苍白的你机会在哪?
大数据行业蓬勃发展
1个小时
高级大数据工程师
为你全方位解读行业
带你终点冲刺
获取优质实习
1个小时,带你全方位解析Big Data行业环境、Big Data最新技术(Hadoop/Spark/
Storm/Kafka/Cassandra等)、硅谷一线公司大数据架构,助你明晰节奏、获取面试、
找到优质工作!
目标人群:
大数据爱好者,大数据工程初中级学者,对Big Data Engineer感兴趣的人群,希望找
到Big Data Engineer实习/全职的人群
讲座大纲:
【求职篇】
Big Data Engineer职位有多火(发展前景、薪资水平、市场需求)
Big Data Engineer实习怎么找(刷题、简历、时间节点)
Big Data Engineer实习做什么(职责、技能提升、Return Offer如何拿)
Big Data Engineer实习对于找全职的意义
3月底如何抓紧冲刺,找到优质实习
对正在这条道路上奋斗的朋友们的一些建议
【技术篇】
硅谷一线公司大数据架构(Big Data Infr... 阅读全帖

发帖数: 1
43
资本寒冬
科技企业缩招
暑期实习招满在即
简历苍白的你机会在哪?
大数据行业蓬勃发展
1个小时
高级大数据工程师
为你全方位解读行业
带你终点冲刺
获取优质实习
继前几年的疯狂扩招后,美国各大科技企业包括FLAG都在2017年紧急缩招,如何在美国
就业市场上,把握好求职时间节点,如何准备求职,如何提升背景,都变得极为关键。
随着大数据应用的爆发性增长,越来越多的公司开放Big Data Engineer的岗位。
1个小时,带你全方位解析Big Data行业环境、Big Data最新技术(Hadoop/Spark/
Storm/Kafka/Cassandra等)、硅谷一线公司大数据架构,助你明晰节奏、获取面试、
找到优质工作!
目标人群:
大数据爱好者,大数据工程初中级学者,对Big Data Engineer感兴趣的人群,希望找
到Big Data Engineer实习/全职的人群
讲座大纲:
【求职篇】
Big Data Engineer职位有多火(发展前景、薪资水平、市场需求)
Big Data Engineer实习怎么找(刷题、简历、时间节点)
Big Data Engineer... 阅读全帖
o**********e
发帖数: 18403
44
【 以下文字转载自 SanFrancisco 讨论区 】
发信人: onetiemyshoe (onetiemyshoe), 信区: SanFrancisco
标 题: 对L股价大跌的一点看法 (转载)
发信站: BBS 未名空间站 (Fri Feb 12 10:40:24 2016, 美东)
发信人: whiteknight0 (whiteknight0), 信区: JobHunting
标 题: 对L股价大跌的一点看法
发信站: BBS 未名空间站 (Fri Feb 12 03:55:47 2016, 美东)
近来股市大盘不好, L家更是突然跌掉一半,市值缩水到才区区一百来亿 甚至还不
如小米,联想等这些国内公司的市值, 一群人在网上分析各种原因, 老衲作为L的前
员工, 觉得这其实原因没有那么复杂, 其实很简单, 就是L里面很多manager不会做
业务,也不想好好做业务。
怎么讲呢? 举个简单的例子, 去年大概3-4月的某个时候, L主管技术的一个VP给工
程师群发了一个邮件,表示以后不再继续用Scala开发了,重新转回使用Java. 不到
两年时间里面,程序设计... 阅读全帖
c*****8
发帖数: 23
45
有兴趣的同学请发站内信,帮忙介绍的同学如果内推成功,可平分奖金:)
Sr Software Engineer - Data Science Pipeline - Big Data, Java, Python
Job LocationsUS-IL-Chicago
Qualifications
A BS or MS in Computer Science or related field
5+ years of programming experience Java, Python, and Java Script.
3+ years of working experience with AWS services (EC2, SNS, SQS, S3, EMR,
Data Pipeline, VPC and etc.)
Development experience of Web Services (RESTful, SOAP)
Development experience with web application frameworks - Spring /Spring Boot
/Angu... 阅读全帖
o**********e
发帖数: 18403
46
【 以下文字转载自 Programming 讨论区 】
发信人: goodbug (好虫), 信区: Programming
标 题: Pinterest陶涛:三个教训和三个发展选择
发信站: BBS 未名空间站 (Wed Sep 3 03:19:03 2014, 美东)
http://tech.huanqiu.com/per/2013-08/4307208_2.html
我们作为创业公司总结了一些经验和教训跟大家分享一下:
1、保持简单,这对创业公司来讲非常重要,一个简单的系统出错的可能性就很小
,出错以后解决问题的可能性就变得很大。保持简单我们认为对创业公司来说是非常关
键的问题。
2、我们认为一项技术的超级用户遇到的难度是远远大于普通用户的。我们知道大
家今天都在用一些开元软件,这些开元软件是逐步发展的过程,很多软件在早期并没有
经历过很大的压力测试,在一定的流量基础上他们都工作的非常少,但是超过一定流量
的话都有各种各样的问题。如果你作为超级用户,你可能接触到的问题是前人完全没有
遇到的,你很难在社区里得到任何求助,需要自己读它的代码,去看是不是我能解决,
如果解决不了的话... 阅读全帖
o**********e
发帖数: 18403
47
来自主题: SanFrancisco版 - 对L股价大跌的一点看法 (转载)
【 以下文字转载自 JobHunting 讨论区 】
发信人: whiteknight0 (whiteknight0), 信区: JobHunting
标 题: 对L股价大跌的一点看法
发信站: BBS 未名空间站 (Fri Feb 12 03:55:47 2016, 美东)
近来股市大盘不好, L家更是突然跌掉一半,市值缩水到才区区一百来亿 甚至还不
如小米,联想等这些国内公司的市值, 一群人在网上分析各种原因, 老衲作为L的前
员工, 觉得这其实原因没有那么复杂, 其实很简单, 就是L里面很多manager不会做
业务,也不想好好做业务。
怎么讲呢? 举个简单的例子, 去年大概3-4月的某个时候, L主管技术的一个VP给工
程师群发了一个邮件,表示以后不再继续用Scala开发了,重新转回使用Java. 不到
两年时间里面,程序设计语言就变了两次。 一会儿必须用Scala, 不用不行; 一会儿
不让用Scala, 用了不行。 这真是”NZND“的最好注解。 要知道, L家的招聘是非常
偏向java的。 多年以来一直沿用的招聘和出题流程, 给公司积累了大量的java背景的... 阅读全帖
o**********e
发帖数: 18403
48
来自主题: Seattle版 - 对L股价大跌的一点看法 (转载)
【 以下文字转载自 SanFrancisco 讨论区 】
发信人: onetiemyshoe (onetiemyshoe), 信区: SanFrancisco
标 题: 对L股价大跌的一点看法 (转载)
发信站: BBS 未名空间站 (Fri Feb 12 10:40:24 2016, 美东)
发信人: whiteknight0 (whiteknight0), 信区: JobHunting
标 题: 对L股价大跌的一点看法
发信站: BBS 未名空间站 (Fri Feb 12 03:55:47 2016, 美东)
近来股市大盘不好, L家更是突然跌掉一半,市值缩水到才区区一百来亿 甚至还不
如小米,联想等这些国内公司的市值, 一群人在网上分析各种原因, 老衲作为L的前
员工, 觉得这其实原因没有那么复杂, 其实很简单, 就是L里面很多manager不会做
业务,也不想好好做业务。
怎么讲呢? 举个简单的例子, 去年大概3-4月的某个时候, L主管技术的一个VP给工
程师群发了一个邮件,表示以后不再继续用Scala开发了,重新转回使用Java. 不到
两年时间里面,程序设计... 阅读全帖
b*s
发帖数: 82482
49
来自主题: LeisureTime版 - 【活动】各有因缘莫羡人
"Kafka finished none of his full length novels and burned around 90 per cent
of his own work, much during the period he lived in Berlin with Diamant who
helped him burn the drafts of his work. In his early years as a writer, he
was influenced by von Kleist whose work he described in a letter to Bauer as
frightening and whom he considered closer than his own family."

卡夫卡?
“little was published during his lifetime attracted scant public attention.”
How about Kafka?
triumph
safely
out
g****d
发帖数: 3461
50
Die Verwandlung
Als Gregor Samsa eines Morgens aus unruhigen Träumen erwachte, fand er
sich in seinem Bett zu einem ungeheueren Ungeziefer verwandelt.
这个当年文学课上看过,还写了作文。
Samsa
Kafka
这个Samsa好像是他自己,同时映射Samsara
Kafka和同一个人订婚两次,却没有结婚。
首页 上页 1 2 3 4 5 6 7 8 9 10 下页 末页 (共10页)