t*****y
发帖数: 445 | 1 On Thursday, April 21st, Amazon experienced a large outage in AWS US-East
which they describe here. This outage was highly publicized because it took
down or severely hampered a number of popular websites that depend on AWS
for hosting. Our post below describes our experience at Netflix with the
outage, and what we've learned from it.
Some Background
Why were some websites impacted while others were not? For Netflix, the
short answer is that our systems are designed explicitly for these sorts of... 阅读全帖 |
|
l*****a
发帖数: 38403 | 2 你这版本，神的众子为什么翻译成天使，另外据说圣经是有圣灵随着你们，是大有神迹
，不可能有错误冲突滴？ 另外你这没回答，我问的是在创造人类之前就造了上亿天使
的原文是什么，另外按你这逻辑，晨星也是耶稣的称号，你是不是可以认为，有很多耶
稣啊？
真有意思阿
Bible VersionsJob 38Job 38:7Compare Translations
Job 38:7 NIV
New International Version
while the morning stars sang together and all the angels shouted for joy?
Read Job 38 NIV | Read Job 38:7 NIV in parallel
Job 38:7 ASV
American Standard Version
When the morning stars sang together, And all the sons of God shouted for
joy?
Read Job 38 ASV | Read Job 38:7 ASV in p... 阅读全帖 |
|
l*****a
发帖数: 38403 | 3 这里是各种译文
Revelation 12:12 NIV
New International Version
Therefore rejoice, you heavens and you who dwell in them! But woe to the
earth and the sea, because the devil has gone down to you! He is filled with
fury, because he knows that his time is short."
Read Revelation 12 NIV | Read Revelation 12:12 NIV in parallel
Revelation 12:12 ASV
American Standard Version
Therefore rejoice, O heavens, and ye that dwell in them. Woe for the earth
and for the sea: because the devil is gone down unto you, h... 阅读全帖 |
|
b***i
发帖数: 10018 | 4 有两种职位，Data Engineer和Data Research Engineer。给办H1-b和绿卡。Junior也
欢迎。
有意者请把简历发到t*******[email protected]。谢谢。
Senior Data Engineer at Tapjoy in San Francisco, CA
Sr. Data Engineer
About Us:
Tapjoy is a mobile value exchange platform, driving personalized app
discovery for consumers, customer acquisition and engagement for app and
brand advertisers, and rich monetization for innovative developers. The
Tapjoy network spans over 20,000 apps and 800 million global consumers on
iOS, Android and Windows Phone. ... 阅读全帖 |
|
t****3
发帖数: 61 | 5 autoscale with ELB, this should work. It is starting a duplicated server and
adding to ELB. |
|
g*****g
发帖数: 34805 | 6 我们用的是Eureka来做mid-tier load balancing.
https://github.com/Netflix/eureka
不过这个比较适合大型应用。
另一方面，我们所有的服务都是stateless，需要state就存后台数据库里。但据说aws
的ELB是支持sticky session的。你也许应该看看ELB? |
|
g*****g
发帖数: 34805 | 7 ELB 就是一个监控和round robin, ELB本身也是个cluster，不会有问题。 |
|
|
h*i
发帖数: 3446 | 9 是的，我也不用ELB这些。我的各种服务器都放在在docker里面，要搬走是分分钟钟的
事。
唯一很难替代的是S3。有更便宜的方案么？
ELB. |
|
N*****m
发帖数: 42603 | 10 elb问题不大，基本上大的云服务商都提供LB
大不了自己搞个HAProxy
DynamoDB可以避免
ELB. |
|
f******2
发帖数: 2455 | 11 emr，Lambda，kenisis这些亚麻做了点儿trick的计算后台类的东西你们用吗？
elb，auto scaling这些对production traffic有帮助，但是明显有lock-in效应的服务
用吗？比如说，如果我想防止lockin，可以自己架设并管理haproxy来替代elb，但是显
然bootstrap项目的成本要高很多。。。
很想了解一下netflix这方面的策略，非常感谢。如果netflix只用ec2和s3，ebs，剩下
的高级服务都自己搭，我感觉没有lockin风险，但是bootstrap项目成本就太高了，很
想听听。 |
|
i***z
发帖数: 7508 | 12 In April 2009, the Polish Foreign Minister, Radosław Sikorski,
suggested including Russia in NATO. In March 2010 this suggestion was
repeated in an open letter co-written by German defense experts General
Klaus Naumann, Frank Elbe, Ulrich Weisser, and former German Defense
Minister Volker Rühe. In the letter it was suggested that Russia was
needed in the wake of an emerging multi-polar world in order for NATO to
counterbalance emerging Asian powers.[65] However Russian leadership has
made |
|
M******a
发帖数: 6723 | 13 http://hx.cnd.org/?p=129485
2014年春我和太太去德国参加D先生的七十岁生日宴会，然后在欧洲旅游。
德累斯顿（Dresden）是我们在德国到访的城市之一。在那里，在易北河（Elbe）畔，
我们邂逅了两位音乐家，我还“老夫聊发少年狂”了一回。当“狂”劲过去以后，有一
件事让我困惑，想了很久。
德累斯顿是德国东部的重要城市，易北河穿城而过，整个城市就建在蜿蜒18公里长的易
北河谷里。沿岸可见古老的钢桥、铁路、造船厂和更加古老的渡口、牧场、葡萄园，还
有古老的宫殿、纪念碑、公园、郊区别墅及花园，真可说是风光旖旎，怪不得18世纪以
来这里就有“易北河畔的佛罗伦萨（Florence，意大利的文化古城）”之称。
但凡美国人到了欧洲，都会感受到这里厚重的历史和文化的淀积。这也难怪，美国建国
至今才二百多年嘛。可是，对我们这些曾经在中国生活过大半辈子的人，来自东方的文
明古国的人，眼前所见也令我们不胜感慨。例如，苏州城据说有据可查的历史就有两千
多年，光是许多路名和地名就能把你带回古老的春秋时代。可是，就我从五十年代至今
所见而言，她已经迅速地“现代化”了，变得“脱古入今”... 阅读全帖 |
|
b********n
发帖数: 38600 | 14 【 以下文字转载自 USANews 讨论区 】
发信人: beijingren (to thine own self be true), 信区: USANews
标 题: 新总统，新世界
发信站: BBS 未名空间站 (Sat Jan 21 00:36:00 2017, 美东)
http://buchanan.org/blog/new-president-new-world-126437
New President, New World
By Patrick J. Buchanan
“Don’t Make Any Sudden Moves” is the advice offered to the new president
by Richard Haass of the Council on Foreign Relations, which has not
traditionally been known as a beer hall of populist beliefs.
Haass meant the president should bring his National S... 阅读全帖 |
|
b********n
发帖数: 38600 | 15 http://buchanan.org/blog/new-president-new-world-126437
New President, New World
By Patrick J. Buchanan
“Don’t Make Any Sudden Moves” is the advice offered to the new president
by Richard Haass of the Council on Foreign Relations, which has not
traditionally been known as a beer hall of populist beliefs.
Haass meant the president should bring his National Security Council
together to anticipate the consequences before tearing up the Iran nuclear
deal, moving the U.S. embassy to Jerusalem or shoo... 阅读全帖 |
|
b***i
发帖数: 10018 | 16 刚刚加了Data Research Scientist的Job description:
Research Scientist - Machine Learning at Tapjoy in San Francisco, CA
About Tapjoy
A SF-based Private company, Tapjoy (www.tapjoy.com) is the leader in
discovery, engagement, and monetization services for mobile applications.
The company's turnkey in-app advertising platform helps developers, agencies
and brands acquire cost-effective, high-value new users, drive engagement
within their applications, and create incremental income by providing an ad-
fu... 阅读全帖 |
|
f*******s
发帖数: 182 | 17 我的面试也结束了 因为知道FLAG这类公司都会问到System Design的问题 所以这次面
试着重准备了一下 在这里分享给大家 如果有不对或者需要补充的地方 大家可以留言
这里说的System Design和OO Design不同 System Design在FLAG以及很多大公司中主要
是design scalable distributed systems 这里只讨论如何准备这种题目
== 入门 ==
对于0基础的同学们 下面的资料可以按顺序开始看
1. http://www.hiredintech.com/app#system-design
这是一个专门准备面试的网站 你只用关心system design部分 有很多的link后面会重
复提到 建议看完至少一遍
2. https://www.youtube.com/watch?v=-W9F__D3oY4
非常非常好的入门资料 建议看3遍以上！
这是1里面提到的资料 是Harvard web app课的最后一节 讲scalability 里面会讲到很
多基础概念比如Vertical scaling, Horizontal sca... 阅读全帖 |
|
f*******s
发帖数: 182 | 18 我的面试也结束了 因为知道FLAG这类公司都会问到System Design的问题 所以这次面
试着重准备了一下 在这里分享给大家 如果有不对或者需要补充的地方 大家可以留言
这里说的System Design和OO Design不同 System Design在FLAG以及很多大公司中主要
是design scalable distributed systems 这里只讨论如何准备这种题目
== 入门 ==
对于0基础的同学们 下面的资料可以按顺序开始看
1. http://www.hiredintech.com/app#system-design
这是一个专门准备面试的网站 你只用关心system design部分 有很多的link后面会重
复提到 建议看完至少一遍
2. https://www.youtube.com/watch?v=-W9F__D3oY4
非常非常好的入门资料 建议看3遍以上！
这是1里面提到的资料 是Harvard web app课的最后一节 讲scalability 里面会讲到很
多基础概念比如Vertical scaling, Horizontal sca... 阅读全帖 |
|
f*******r
发帖数: 976 | 19 多谢，总结得很好
我的面试也结束了 因为知道FLAG这类公司都会问到System Design的问题 所以这次面
试着重准备了一下 在这里分享给大家 如果有不对或者需要补充的地方 大家可以留言
这里说的System Design和OO Design不同 System Design在FLAG以及很多大公司中主要
是design scalable distributed systems 这里只讨论如何准备这种题目
== 入门 ==
对于0基础的同学们 下面的资料可以按顺序开始看
1. http://www.hiredintech.com/app#system-design
这是一个专门准备面试的网站 你只用关心system design部分 有很多的link后面会重
复提到 建议看完至少一遍
2. https://www.youtube.com/watch?v=-W9F__D3oY4
非常非常好的入门资料 建议看3遍以上！
这是1里面提到的资料 是Harvard web app课的最后一节 讲scalability 里面会讲到很
多基础概念比如Vertical scaling, Hori... 阅读全帖 |
|
f*******r
发帖数: 976 | 20 多谢，总结得很好
我的面试也结束了 因为知道FLAG这类公司都会问到System Design的问题 所以这次面
试着重准备了一下 在这里分享给大家 如果有不对或者需要补充的地方 大家可以留言
这里说的System Design和OO Design不同 System Design在FLAG以及很多大公司中主要
是design scalable distributed systems 这里只讨论如何准备这种题目
== 入门 ==
对于0基础的同学们 下面的资料可以按顺序开始看
1. http://www.hiredintech.com/app#system-design
这是一个专门准备面试的网站 你只用关心system design部分 有很多的link后面会重
复提到 建议看完至少一遍
2. https://www.youtube.com/watch?v=-W9F__D3oY4
非常非常好的入门资料 建议看3遍以上！
这是1里面提到的资料 是Harvard web app课的最后一节 讲scalability 里面会讲到很
多基础概念比如Vertical scaling, Hori... 阅读全帖 |
|
|
F*******1
发帖数: 25 | 22 刚刚hr发过来几个组的信息，想问问了解情况的老司机们，感谢
楼主因为是转专业做码工，基础比较薄弱，第一个是希望自己在组里至少能扛一年下来
，所以希望组做的东西不要太偏.
第二个还是想学点东西 第三个 还是觉得 根据个人水平找一个oncall压力适中的组会
比较好点
Mechanical Truck AWS 完全不知道干嘛的
AWS Sales Marketing 网上很多帖子都说是坑 不太了解
AWS Accounts 不太了解
eCSG 看描述感觉可能是eCommerce的核心组 不知道是不是的 请老司机答疑
Author Service 不太了解具体做啥 但是在几个组里 只看描述感觉 oncall压力最小
不知道是不是的
Mechanical Turk (AWS)
Amazon Mechanical Turk http://www.mturk.com, Amazon.com's latest innovation, combines artificial intelligence, cutting edge business strategies, web services a... 阅读全帖 |
|
T****e
发帖数: 198 | 23 德雷斯顿概况
德累斯顿（Dresden），位于德国的东部，现是萨克森州的州府，有人口48.5万人，在德
国也已经算在大城市之列了（排在第14位）。城市面积237.22平方公里，排在第12位。是
一个人口密度大、工业化程度高的城市，在德国大城市排名十四。德累斯顿市内充满着意
大利文艺复兴时期的气息，拥有众多德国巴洛克风格建筑和十六世纪新文艺复兴式的建筑
，易北河(Elbe)流经城中，美丽的风景数之不尽。
德累斯顿的历史追溯到公元1000年左右，罗马在奥古斯特皇帝（Caesar Augustus）领导
下，朝北方扩张帝国版图，他的军队大举渡过莱茵河和多瑙河，想把当时的德国日耳曼并
吞为罗马帝国的一部分。然而他们遇到了强烈的抵抗，罗马的三支精锐部队约两万士兵被
击败；为了避免日耳曼进一步将反攻转为侵略，罗马军在莱茵河和多瑙河边界，修筑了长
达550公里的“防线”。罗马人在这条遥远的边界上，按照罗马风格建了一个又一个城市
，奥古斯特大帝更把家乡的一切在此地重现，在防线上建造剧院、公共澡堂，以让他的子
民能在日耳曼一样享受在罗马的生活。德累斯顿便是“防线”上的一个城市，奥古斯特大
帝把这里当成他 |
|
发帖数: 1 | 24 贴在indeed上面投的都是烙印，希望找到更多华人应聘者，谢谢。
有兴趣请站内信或联[email protected]/* */
Learning Genie (www.learning-genie.com) is on a mission to support and
empower early childhood educators to achieve high quality early learning
outcomes for children. We create interactive apps for early childhood
educators to document children’s learning progress and to engage parents.
Our office is based in beach city Carlsbad, California in the San Diego
region.
We are looking for a career-driven, self-motivated and passio... 阅读全帖 |
|
m*******n
发帖数: 5103 | 25 你是说哈代的远离尘嚣？哈哈哈，太浪漫了，没那么美好，是照相人的技术好。
那小教堂本身还不错看，但它就在路边，四周的环境一点也不吸引人，甚至有点杂乱，
你开车过去绝对不会注意到。那教堂叫做。。。很贴切的名字。。。The Little White
Church，小有点名气说，坐标（46.764339,-122.194363），在 7 号公路的 Elbe, WA
小镇上，是去雪山南入口的必经之路，附近有坐蒸汽火车的 tour。
对不起，不该打破你充满浪漫情怀的幻想的！（照片来自 Google Maps StreetView） |
|
l*****a
发帖数: 38403 | 26 "Reason is the greatest enemy that faith has; it never comes to the aid
of spiritual things, but - more frequently than not - struggles against
the divine Word, treating with contempt all that emanates from God"
"He who hears this name (God) from a Jew must inform the authorities, or
else throw sow dung at him when he sees him and chase him away"
"I never work better than when I am inspired by anger; for when I am
angry, I can write, pray, and preach well, for then my whole temperament
is quicke... 阅读全帖 |
|
g*****g
发帖数: 34805 | 27 AWS美东不是一个，是三个。一个出问题对Netflix是不会有什么影响的。Xmas前夜是
ELB出了问题，所以才会废掉。 |
|
c******o
发帖数: 1277 | 28 ELB是自动scale的，horizontally, vertically,还有至少两层layer,绝对不会有什么
load支持不了。 |
|
g*****g
发帖数: 34805 | 29 我刚看了一下我跑的一个cluster, 随便拿个instance, 差不多3-5天就会health check
不响应，被shutdown，然后auto-scaling 再起一个。99.95%是不可能的，我看有99%差
不多，但你看小字就知道Amazon的定义不同。
不过单个instance的availability不是很重要。哪怕只有99%，一个cluster同时不
当超过一个的概率就有99.99%，所以不是关键。
就过去两年以我们公司的记录来看，AWS的region availability大约有99.95%，唯一一
次比较长的当是前年平安夜因为人为原因东部3个zone ELB大面积挂掉，导致整个
region挂掉。
如果你的目标是99.9%－99.95%，zone failover应该够了，就是一个region 3个zone平
均分配instance, 每个服务都至少3个zone里都有instance. 如果你的目标是99.95%-99
.99%，需要实现region failover. 东部挂了能自动换到西部。这个AWS的支持不好，要
自己实现一堆东西。我们的platform ... 阅读全帖 |
|
f*****e
发帖数: 57 | 30 Yes it's aws autoscaling.
Our current setup is like this:
When new code is committed, we will create a new AMI for it. The run
integration and staging tests with this newly created AMI. If it pass the
tests, then we will create a new launch config and autoscaling group with
this AMI, then associate the asg with the elb, and scaling down the previous
asg.
Almost half of the time is spent on ami creating and copying.
The reason to use ami is that when a new instance is launched, it is ready
for th... 阅读全帖 |
|
c*****a
发帖数: 1638 | 31 你如果用AWS的ELB，就不需要自己做loadbalacer，会比较便宜（因为等于这台机子会
被复用）。
我不太懂别的VPS怎么样，AWS的好处是，你如果做了一遍，第二遍就很简单，基本上都
是脚本自动的。搞AWS就是各种研究脚本和AMI或者bootstrap的过程。
AWS给程序员非常大的可能性，很多VPS估计做不到。
另外AWS还有个好处就是伸缩性强，可以根据流量自动启动或者关闭机子，如果你的应
用是无状态的（或者不是强状态的），spot instance可以给你省很多钱。
比如我的程序会自动连AWS，看看有没有正在跑的cluster，如果有cluster而且没有
pending的job，就提交。如果pending的太多，就起个新的，跑完自动关掉。从计算角
度，很节约，不过我确实觉得AWS流量不便宜是真的。
BTW：为啥用mongodb？这种只能处理不大不小的数据量的玩意。同时上mongodb和redis
听起来很诡异，是我out了？这种设计是不是很自虐啊？ |
|
w**z
发帖数: 8232 | 32 要不要用ELB？至少搞两个EC2 instances， 要不一个down了，就全歇菜了。 |
|
w**z
发帖数: 8232 | 33 不是在aws 上吗？前面加elb, 后面多加几个instance, 再加 上 multi AZ 的rds, 就
差不多了。 |
|
w**z
发帖数: 8232 | 34 AWS 是总称，底下有EC2， S3， ELB， VPC， Router 53， 等等，你只用了S3？ |
|
c******o
发帖数: 1277 | 35 old AMI是old config, 但是你不要把它接入ELB就行了，等first config run 完了再
接入。这些逻辑都可以在configuration management里。 |
|
d*******r
发帖数: 3299 | 36 二爷你具体只指哪个 Load Balancer?
我会用 AWS EC2 Load Balancer, 简称 ELB
比如 nginx, DNS round robin 也可以做 Load Balancer 实现 Load Balancer 的技术 |
|
w**z
发帖数: 8232 | 37 Netflix 主要用Cassandra。 它的cross region replication是最好用的。只要setup
好，data 都能自动 replicate across data center。 它有现成的snitch
http://www.datastax.com/documentation/cassandra/2.0/cassandra/a
ELB 是用来distribute web traffic 到后台的instance。 autoscaling 是解决后代
instance 不够用的情况下，自动scale up
。等load 下来再scale down
不同region的 fail over， 主要是C＊ 做好来。其他都简单些。 |
|
w**z
发帖数: 8232 | 38 差不多。AWS 的 Autoscaling group 可以保持desired number of instances。 如果
其中一个挂了，（可以是instance的 health check， 也可以设定成 ELB 的health
check） 会根据launch configuration 再起一个。也可以设定 autoscaling policy，
设定 CPU或memory 的 threshold， 过了，就会自动起新的instance。
|
|
g*****g
发帖数: 34805 | 39 这个完全没有vendor lockin，AWS ELB就是一个 load balancer，跟应用无关。后面的
Endpoint是个service layer，也是必须的。 |
|
d*******r
发帖数: 3299 | 40 请问 goodbug, Nehalem,
我不想要 web service (图里的 Golong 那部分).
比如我就想从 mobile device 发回 log messages,
不能直接从 mobile device -> Kafka 吗?
AWS ELB 我在用, Kafka 主要是不能提供 LB 的 single DNS_name --> multiple host
这种 mappging 吗? |
|
w**z
发帖数: 8232 | 41 我们算过，如果server 用的时间超过40%，就是自己机器便宜 。但aWS provision 一
个机器快啊，几分钟搞定。自己买机器，至少得一个星期。aws 机器不想用了，
shutdown 就完事了，自己机器咋办？还有aws 有些Service 还是好用，你自己搞个s3
那样的service,或elb 试试？ |
|
g*****g
发帖数: 34805 | 42 这个事情其实难免，要靠regional failover。上次马鬃也是干了类似的事情，美东所
有ELB起不来，整个region被干掉，导致我们当了12个小时。后来花了一年的时间大量
的人力去做regional failover。没事还要在产品环境里试试确认。 |
|
w**z
发帖数: 8232 | 43 如果你用amazon 的elb, 把它搞down不容易。你后台的instances肯定先挂了。没听说
aws 提供ddos prevention的service. 估计要自己integrate 一个 third party
vendor。 |
|
c*********e
发帖数: 16335 | 44 这个网站建在amazon ws上啊？
prod-wp-web-323106123.us-west-2.elb.amazonaws.com |
|
d*******r
发帖数: 3299 | 45 要看你怎么用 AWS. 我一直避免使用 AWS only 的应用, 比如 DynamoDB, 甚至是 ELB. |
|
l******n
发帖数: 9344 | 46 天下没有免费的午餐，你现在不付钱将来得付。没有客户，那就漫漫培养。
当然也要看公司的能力，自己搞不定又不用第三方的，那就是做死
ELB. |
|
q*********a
发帖数: 300 | 47 早上还看到在Clark+Elbing主页上，中午名字就不见了，难道被雷了？ |
|
