由买买提看人间百态

topics

全部话题 - 话题: 分布式
首页 上页 1 2 3 4 5 6 7 8 9 10 下页 末页 (共10页)
s******7
发帖数: 350
1
这是不同层面的事,RAID在层面上可以跟JBOD比但本身不是文件系统,虽然hadoop,
GlusterFS和Ceph等等分布式文件系统本身就包括类似的RAID功能甚至更高级,ZFS等本
地文件系统本身也包括RAID,但原则上可以建立在JBOD上,也可以在传统RAID,有些像
OPENSTACK也包括VMWARE ESX的不少功能但是不同层面的东西一样。如果只有一台机器
,还是用RAID或者ZFS之类,如果是两台机器做存储,可以考虑Gluster分布式文件系统
什么的,多台机器企业应用再考虑其它的分布式文件系统。另外,不管怎么说,每台机
器的系统盘大多数情况下还是用RAID更合理。
x*******i
发帖数: 777
2
来自主题: Java版 - 学习JAVA的人要注意
1.你需要精通面向对象分析与设计(OOA/OOD)、涉及模式(GOF,J2EEDP)以及综合模式。你
应该十分了解UML,尤其是class,object,interaction以及statediagrams。
2.你需要学习JAVA语言的基础知识以及它的核心类库 (collections,
serialization
,streams,networking, multithreading,reflection,event,handling,
NIO,
localization,以及其他)。
3.你应该了解JVM,classloaders,classreflect,以及垃圾回收的基本工作机制
等。
你应该有能力反编译一个类文件并且明白一些基本的汇编指令。
4.如果你将要写客户端程序,你需要学习WEB的小应用程序(applet),必需掌握GUI设
计的思想和方法,以及桌面程序的 SWING,AWT, SWT。你还应该对UI部件的
JAVABEAN组
件模式有所了解。JAVABEANS也被应用在JSP中以把业务逻辑从表现层中分离出来。
5.你需要学习j... 阅读全帖
x*******i
发帖数: 777
3
来自主题: Java版 - 学习JAVA的人要注意
1.你需要精通面向对象分析与设计(OOA/OOD)、涉及模式(GOF,J2EEDP)以及综合模式。你
应该十分了解UML,尤其是class,object,interaction以及statediagrams。
2.你需要学习JAVA语言的基础知识以及它的核心类库 (collections,
serialization
,streams,networking, multithreading,reflection,event,handling,
NIO,
localization,以及其他)。
3.你应该了解JVM,classloaders,classreflect,以及垃圾回收的基本工作机制
等。
你应该有能力反编译一个类文件并且明白一些基本的汇编指令。
4.如果你将要写客户端程序,你需要学习WEB的小应用程序(applet),必需掌握GUI设
计的思想和方法,以及桌面程序的 SWING,AWT, SWT。你还应该对UI部件的
JAVABEAN组
件模式有所了解。JAVABEANS也被应用在JSP中以把业务逻辑从表现层中分离出来。
5.你需要学习j... 阅读全帖
z*******3
发帖数: 13709
4
来自主题: Java版 - java适合做实时系统吗?
server side实时都是主机在做
因为主机避开了网络io,节省的时间是大大的
而且也避开了db的transaction,自己写transaction
分布式都要用到网络,肯定做不到real time处理
各种算法也都有明显的延迟,不同nodes之间的沟通都需要通过网络
网络非常非常慢,再快都快不到哪里去,比起内存操作来说
所以分布式不可能做到实时,一般实时都是单机
股票交易我没听说有哪个交易所采购过主机
民航倒是很多
db之所以现在不适合搞分布式也跟db本身强要求acid有关
一个consistency和networking就是明显的冲突
再快也做不到real time
z****e
发帖数: 54598
5
来自主题: Java版 - Java 做网站
网站都交给php就好了
剩下的主要是hadoop
楼主如果打算用hadoop,那么我说的这些比如hbase它哪怕是重新学
成本都会低于去用mongodb那些
搞big data,这些东西是绕不开的
而且折腾db也不简单,我觉得不比搞hdfs这些简单,对于一窍不通的人来说
db有transaction,有lock,要rollback这些,烦
hdfs就是一个file system,很低级,很容易搞的
cassandra也没啥fancy的东西
剩下分布式,那搞big data总得搞点分布式吧?要不然搞啥big data
而db在分布式上又弱得一塌糊涂,所以我觉得db可以不用了
z****e
发帖数: 54598
6
来自主题: Programming版 - 迷惑了
hadoop解决分布式存储的问题
但是分布式同时带来了响应时间的问题
big data low latency
为了解决响应时间的问题,内森提出了一整套构架
storm就是real time streaming的处理
内森对于twitter构架的阐述:beat cap theorem
就是一个非常好的例子
storm主要用来对付一些latency要求高的领域
比如google的finance界面,比如twitter,比如网络游戏etc.
java做东西一直都有一个gc停顿时间的问题
分布式加重了latency的停滞时间
现在要缩短这个latency,话说linkedin上有一个group就叫做
big data low latency,我跟卡桑都是成员之一
你加没加?
f****4
发帖数: 1359
7
来自主题: Programming版 - 好虫,看看你的东东有没有问题?
你不是一直说你的是在线实时么?分布式的 -_-
我就想知道分布式的scale上去之后,数据同步能不能回避1票多卖。淘宝双11能把货卖
爆掉,就说明它没解决这个问题。
我相信你们几个做分布式的一定能解决这个问题。
m******t
发帖数: 635
8
你这个就机械了,单机能解决的话,为什么要上分布式?分布式有分布式的问题,
Amazon那套也不是没有崩过呢。
g*****g
发帖数: 34805
9
来自主题: Programming版 - 春运火车票2个方案比较
耍赖。所有分布式设计的假设,都是单机撑不住。单机都能撑住要分布式干啥?
你干脆说分布式设计都是耍赖了。
f****4
发帖数: 1359
10
来自主题: Programming版 - 春运网站架构之争 MapReduce vs MPI
你这个功力还是赞的
我之前的分析是假设goodbug的4数据库分表,每个是单独的数据库。但没理解到
goodbug说的是分布式数据库,具体实现是数据库提供的。
我之前的假设,都是基于4个数据库是单独的数据库,认为这样能缩短排队时间。这样
有些case不再适用,我得再想想。
我们简单点说,排队时间。既然你要分段票买票上锁,你说实现的效率上,是分布式的
数据库快还是一个集中的主机快?更何况集中的主机上如果不上多线程的话都可以不用
上锁。这点我已经分析过了。
我之前的分析排队时间的时候举了个300人排队时间被拉长的例子,现在的情况一样糟
糕。搞不好还要糟糕。
换个话说,魏老师那个集中的出票自动机的实现,给goodbug的这个看似分布的实际概
念上集中的分布式数据库代替了。恩,就是这样。

了)
z****e
发帖数: 54598
11
老魏总得来说,智商不算低
知道有些地方比较老旧,比如主机
不应该转过去,所以虽然没有什么人忽悠他用分布式
而且搞分布式的几乎都对他评价颇低
老魏还是坚决不走主机那条路
这点还是聪明的,然后死皮赖脸凑到分布式之后
开始试探cloud,从他那几个对cloud的简单描述可以看出
丫就是一cloud处男,根本不懂cloud
但是经过点拨之后,陡然明白,哦
原来web server用cloud可以省几百个server的钱啊
于是赶紧上cloud,所以老魏虽然技术落伍
但是知道那块有金子,所以哪怕那一块的人都骂他
他还是要往那一块凑
m****a
发帖数: 2593
12
来自主题: Programming版 - 从12306来看,国内IT水平不高
http://www.ccthere.com/article/3965719
我曾在淘宝写过一段时间代码,2012年在一家百强民企做电商副总,当时在极为艰苦的
条件下带队开发了一个B2C网站,走支付宝和银联支付通道,年营业额千万级(当然实
在太少了,我只是说这个网站投入了实际的运营)。
也就在那个时候,我对12306嗤之以鼻,觉得他们做得太烂了,认为自己能带队花几百
万半年时间做个好的出来。于是我狂妄地想做一个开源的订票系统给他们。我花了一个
星期时间思考建立数据模型,思考到库存这一步的时候,我才发现,12306的库存复杂
性比淘宝、京东高很多倍,运算量也大很多倍。传统的分布式数据库、缓存、负载均衡
技术并不能恰好满足12306的需求。
在平时,12306也就是个正常的电商网站。但一到黄金周,12306就是一个全站所有商品
都秒杀,所有SKU都是动态库存的变态。
即使不考虑线下既有的电话、代售点等渠道,要实现一个12306,最少最少也是千万级
别的硬件投入(这是当时的估算,没有精算,可能与实际相差较大,总之,我说得不一
定对,12306的业务也许没我说的那么复杂,但也绝不是某些人喷的那... 阅读全帖
s*****r
发帖数: 43070
13
1月11日起,12306网站开始销售除夕当日火车票。每到此时,铁路系统唯一的官方购票
网站12306就会成为众矢之的。今年也不例外,12306再次被淹没在一片埋怨声中。
1月5日,观察者网刊登了问答网站“知乎”上的用户王强的解答,回答“如果把12306
外包给IBM或者阿里巴巴来做的话,能不能比现在做得好?”这一问题。
1月10日,一位ID名为“代码狗”的前淘宝工程师,后来在一家电商公司做技术副总的
IT业内人士也在著名论坛“西西河”上发文,表达了他自己对12306系统的看法。
值得注意的是,“代码狗”在12306系统刚上线时也有过不少微词。为了证明12306系统
很容易搭建,“代码狗”甚至曾经发起过一个名为“替12306设计系统”的开源项目。
通过工作中的实践,“代码狗”对于12306系统也有了新的认识。
观察者网转载此文,供读者参考。
全文如下:
官方订票网站12306崩溃时的页面(资料图)
本人淘宝技术专家,2012年在一家百强民企做电商副总,当时在极为艰苦的条件下带队
开发了一个B2C(企业针对个人开展的电子商务活动——观察者网注)网站,走支付宝
和银联支付通道,年营业额千万级... 阅读全帖
g*****g
发帖数: 34805
14
你完全不懂得什么叫做松散耦合,什么叫分布式数据库。你查100遍还是查cassandra
db里你的订单状态,对后台出票完全没有任何影响。
做不到的是又要分布式,又要支持transaction,所以要前后分开,用不同的数据库。
拿号能拿瘫痪,那是因为架构不scale out. 分布式的设计就是人多跟着线性加机器。
来一亿用户照样能撑住。
c******3
发帖数: 296
15
来自主题: Programming版 - 淘宝内部人谈设计12306
淘宝内部人谈设计12306
一直觉得从讨论12306的设计,可以学到很多东西。本版俩大牛老魏和goodbug的设计各
有千秋,精彩绝伦。也很遗憾地看到,凭俩位这么多年的经验,居然设计中都有完全忽
视最最基本需求的地方。前者最初的设计不保证同车同座,后者的设计不保证实时。凭
这种低级硬伤,FLG面试设计一轮估计悬了。
俩大牛都搞不定,我等更没折了。坐下好好学习吧。搜到一篇淘宝内部人写的心得,在
此分享。不觉得他写的都对,例如超卖.淘宝大牛也比不上本版俩大牛,但毕竟是做过
类似系统的淘宝人,可能他的师哥师妹就曾帮12306做过,所以应该是有参考价值的。
===========http://www.cchere.com/topic/3965719==============
我曾在淘宝写过一段时间代码,2012年在一家百强民企做电商副总,当时在极为艰苦的
条件下带队开发了一个B2C网站,走支付宝和银联支付通道,年营业额千万级(当然实
在太少了,我只是说这个网站投入了实际的运营)。
也就在那个时候,我对12306嗤之以鼻,觉得他们做得太烂了,认为自己能带队花几百
万半年时间做个好的出来。于是我... 阅读全帖
z****e
发帖数: 54598
16
算法是数学
分布式有分布式算法
就专门针对这种网络上的差异,failure做设计
单机算法发展很多年了,自然在有些方面会比分布式走得远一点
但是并不代表以后就都hpc去了,不可能的
最终一堆烂机器拼凑起来,替代掉hpc是大势所趋
那怎么让这一堆烂机器听话,顶用,那这个就是现在要对付的问题
网络是future,各个单机算法可以做成网络版的
统计也可以做成网络版的,就是因为以前没做过,所以现在才要做
做了才有搞头,别人做过的东西,你可以不用做了,抄就行了
不懂就问,就是因为以前都是unix/c/fortran这些,所以现在才要做jvm上的版本
因为没有才要做,有了你可以不用做了,直接抄
scala就是搞这些东西的利器,搞hpc的可以不用scala,用fortran就好
D*****r
发帖数: 6791
17
西西河 上的 代码狗 发文。
本人淘宝技术专家,2012年在一家百强民企做电商副总,当时在极为艰苦的条件下带队
开发了一个B2C(企业针对个人开展的电子商务活动——观察者网注)网站,走支付宝
和银联支付通道,年营业额千万级(作者注:当然实在太少了,我只是说这个网站投入
了实际的运营)。
也就在那个时候,我对12306嗤之以鼻,觉得他们做得太烂了,认为自己能带队花几百
万半年时间做个好的出来。于是我狂妄地想做一个开源的订票系统给他们。我花了一个
星期时间思考建立数据模型,思考到库存这一步的时候,我才发现,12306的库存复杂
性比淘宝、京东高很多倍,运算量也大很多倍。传统的分布式数据库、缓存、负载均衡
技术并不能恰好满足12306的需求。
在平时,12306也就是个正常的电商网站。但一到黄金周,12306就是一个全站所有商品
都秒杀,所有SKU都是动态库存的变态。
即使不考虑线下既有的电话、代售点等渠道,要实现一个12306,最少最少也是千万级
别的硬件投入(作者注:这是当时的估算,没有精算,可能与实际相差较大,总之,我
说得不一定对,12306的业务也许没我说的那么复杂,但也绝不是某些... 阅读全帖
D***n
发帖数: 6804
18
来自主题: Programming版 - 请不要盲目崇拜FP语言
分布式?笑话,我问你:你现在真正用的程序,有哪个是把运算分布到你的手机,若干
台电脑上了?
Python做分布式计算这事倒是很简单,真要是玩分布式计算,开发速度是用Java的若干
倍。
g*****g
发帖数: 34805
19
你说的不就是内行和外行的典型区别吗?我老对各种轮子的熟悉,对各种架构的优劣烂
熟于胸,碰到难题可以直奔重点,直接找最合理的妥协,跟需求方协商达成一致并实施
。这就是我的本职工作而已。我老难道吹过宇宙第一吗?这个版上我认识的几个资深业
内人士,都很快能得出异步是最合理的解决方案。而像太监,对CAP Theorem一无所知
,拍着胸脯我宇宙第一强实时,结果必然跟永动机一样,而附庸他的,清一色的外行。
这个我从最开始就知道了,我只不过没想到外行们连数据库transaction这么基本的概
念都没有而已。也没想到外行们明明方向错了还那么嘴硬而已。
另外关于C10M,我老人家C10M的系统做过了,现在还在跑。知道怎么做,有资格说你这
路子没戏,你
爱信不信呗。不还是那句话,不服做出来让我闭嘴呗?做不出来就是太监别嘴硬。你的
单机C10M根本就是个风车,我老没像你那么愚蠢要去挑战。而且我老教育过你,出于
failover考虑,并不是单机撑得越多越好。这年头云计算,AWS有各种价格的instance
,你弄个大机器可以轻松比我100个面机器还贵。单机极限除了满足你装逼的心理,并
不说明任何问题。你单... 阅读全帖
m***r
发帖数: 359
20
来自主题: Programming版 - Web技术日报 2015年3月楼
Web技术日报 2015-03-03
@好东西传送门 出品, 过刊见
http://web.memect.com
订阅:给 [email protected]
/* */ 发封空信, 标题: 订阅Web技术日报
更好看的HTML版
http://web.memect.com/archive/2015-03-03/short.html
1) 【玩转CSS的新特征】 by @前端大全
关键词:HTML/CSS, CSS
《关于CSS 2015年你会因此而激动的东西》CSS是一门不断发展的语言,在2015年年初
之际,我们就先来体验一下CSS的新特征吧。本文中,我会介绍一些浏览器所支持的新
模块和CSS新特性。 [1] (感谢伯乐在线 - 木木的乔安娜 译,欢迎加入翻译小组: [
2] )
[1] http://web.jobbole.com/82168/
[2] http://www.jobbole.com/groups/6/
2) 【Algolia分布式搜索网络架构】 by @网路冷眼
关键词:架构, 搜索引擎, 博客
【Algolia分布式搜索网络架构】 [1] Algol... 阅读全帖
r***s
发帖数: 737
21
您老还是找本分布式数据库的教课书看看吧
看书不丢人
分布式系统里这些问题怎么解决很多年前就有很成熟的方案了
现在大家不用原因是在表很大的情况下的速度问题, 以及速度
问题带来的死锁问题,而不是在分布式系统下transaction 没法做的问题。
z*******3
发帖数: 13709
22
来自主题: Programming版 - MapReduce 的思想是怎么发明的?
mr只是一种处理方式,用了fp而已,本质上是用来对付分布式的一些需求的
hdfs是分布式文件系统,分布式的发展比较迟,因为虚拟技术发展比较迟
cloud出来之后才大概有搞头,之前都是自己搞个cluster,4-8-16个机器
大概就这样了,然后自己一个个伺候过去
cloud出来之后,各种傻瓜化操作使得暴多个节点变得容易起来
之前都是少数nodes在搞,parallel的话,建connection pool啊,弄多线程啊
搞ejb啊,弄jms啊,这些都是parallel programming的一种
z****e
发帖数: 54598
23
来自主题: Programming版 - 联票问题是非常简单的问题

分布式当然会带来问题,否则就根本不会有人说分布式了
但是分布式带来的问题是否值得看,那就是另外一回事了
打开并发锁的方式很多,但是不去思考解决方案
一股脑往单机上去堆,那就不是解决问题,而是回避问题了
还是那句话,单机跑,不管你做了多少次热备
这都属于上一个时代的老人,老年人,你们好
z****e
发帖数: 54598
24
来自主题: Programming版 - 静态计数器和订票系统的区别

你们上个世纪的人,除了暴力解,还有什么其他的招没有?
反正就是有冲突,就回单机,然后相互独立的部分就爆机器
只要相互不独立,就回去找单机,然后拼命拆逻辑
做各种精简,你不觉得你在回避问题么?
分布式的并发问题,关于如何处理分布式事务等等
都讨论了几十年了,最近十年尤为热门,乱七八糟的paper什么到处都是
你随便去个seminar,都可以听到演讲者在解释如何对付这些问题
为什么你还要回到上个时代的解法去捏?
就你那个联锁问题,是分布式的入门问题好不好?
一个联锁就把你吓得要回去用单机,也是服了
你们这些上个世纪的老头子实在是很幽默啊
d***a
发帖数: 13752
25
别这么激动...你这么做当然可以,机器资源投入足够大就行。这里只是做技术性讨论
,看哪一种方案效率高。
如前面所说,很多方案最终都可以达到结果,只不过效率不同。在公司里,很多时候并
不是以技术决定谁的方案会被使用,是看谁的power更大。一个低效的方案,多砸几十
倍的资金,有的时候也可行。但不是任何时候都可行,要看具体的问题,对性能的需要
有多大,等等。
象12306的问题,按他们现有的系统架构,我个人觉得,要保证春运时不崩溃,加几倍
甚至十倍的硬件投入,都不知道能不能保证。但从领导的角度来说,加硬件是最简单的
,并且可以让本部门的重要性进一步提高,也许是更好的办法。
至于你后面说的方案,并不是12306现有的系统架构吧。把查询和预占空位的功能从数
据库系统里拿出来,另外用一个分布式的构件来实现,当然可以。但是这个功能,用单
机来实现,在性能上绰绰有余,在实现上简单得多,也可靠得多,那为什么要用分布式
的做法呢?当然,如果你从哲学角度出发,一定要用分布式的做法,也是可以的,但这
并不意味着单机方案本身在技术上有什么问题。

redis
i*****9
发帖数: 3157
26
来自主题: Programming版 - zt 商业计划 by 王垠
分布式数据库不好写,至少到去年初的时候开源项目还只有 mongodb 能提供一致性有
保障的分布式数据库。速度啥的是很差,问题是不把业务逻辑整个迁移到 map-reduce
上的话根本没啥别的靠谱选择。
你要真能把关系数据库的所有功能都在分布式数据库上实现了当然好,不过真有这能耐
去狗家也能弄个T9了

:其实是个人都是这个套路。
n*w
发帖数: 3393
27
来自主题: Programming版 - zt 商业计划 by 王垠
Cassandra呢?


: 分布式数据库不好写,至少到去年初的时候开源项目还只有 mongodb 能提供一
致性有

: 保障的分布式数据库。速度啥的是很差,问题是不把业务逻辑整个迁移到 map-
reduce

: 上的话根本没啥别的靠谱选择。

: 你要真能把关系数据库的所有功能都在分布式数据库上实现了当然好,不过真有
这能耐

: 去狗家也能弄个T9了

: :其实是个人都是这个套路。

: :

T********i
发帖数: 2416
28
你别闹了。分布式单机,发条齿轮,分布式发条齿轮,都能等价图灵机,啥实现不了?
胡搅蛮缠最终自己难看


: 你就别现眼了

: 你的精神导师在问:

: 有人说这种系统分布式实现不了么?

a****i
发帖数: 1182
29

前面给过你引用了,能看懂中文吧?
分布式不能做是Nisayer说的,不是我说的
分布式单机又是什么鬼?别捏造一个词就拿来装B
你单机单机的说,忽悠的那些个脑残个个以为分布式不能做了
T********i
发帖数: 2416
30
说来说去,Nisayer就说了这一句:“强耦合问题非要上分布式数据库,这都不只是技
术没学好了 ,这是基因出大问题了”
你从哪里看出来他说分布式不能做了?这东西用分布式发条齿轮都能做,你咋不用分布
式发条齿轮去做?
人家首先就强调了强耦合问题。这话除了言语有些激烈,技术上没任何毛病。
拜托你就别继续现眼了 :)
z****e
发帖数: 54598
31
c把跨平台,gc这些常见问题都给搞定了的话,那就是java了
java本身就是c like的语言,跟c++,obj c什么一样,都是c家族
不过可能是唯一一个不把c作为key letter放进去的c like语言
跟python这种非c like语言不太一样
java最早设计出来就是把那些c/c++工程中常见的问题
给统一用一个类库或者环境给搞定,所以最早有说法说是java类库最全最多
分布式并不是适合数据传递较少,相反,是传递较多才用分布式
但是尽量减少网络的io,是一个常见的优化手段
但是再少,都比并行计算用得多呀,毕竟网络是分布式的一个主要特征
而并行计算不用网络也没啥,弄点共享内存什么的,hpc一样可以搞并行计算
小程序没问题,用什么写都有可能,但是一旦项目变大
再在跨平台gc这种问题上折腾的话,实在是吃不消,力不从心,太累
大多数时候都是拿个轮子,直接抄来用了,java哲学比较讨人喜欢
如非万不得已,不要重复造轮子

把C
z****e
发帖数: 54598
32
c把跨平台,gc这些常见问题都给搞定了的话,那就是java了
java本身就是c like的语言,跟c++,obj c什么一样,都是c家族
不过可能是唯一一个不把c作为key letter放进去的c like语言
跟python这种非c like语言不太一样
java最早设计出来就是把那些c/c++工程中常见的问题
给统一用一个类库或者环境给搞定,所以最早有说法说是java类库最全最多
分布式并不是适合数据传递较少,相反,是传递较多才用分布式
但是尽量减少网络的io,是一个常见的优化手段
但是再少,都比并行计算用得多呀,毕竟网络是分布式的一个主要特征
而并行计算不用网络也没啥,弄点共享内存什么的,hpc一样可以搞并行计算
小程序没问题,用什么写都有可能,但是一旦项目变大
再在跨平台gc这种问题上折腾的话,实在是吃不消,力不从心,太累
大多数时候都是拿个轮子,直接抄来用了,java哲学比较讨人喜欢
如非万不得已,不要重复造轮子

把C
z****e
发帖数: 54598
33
来自主题: DataSciences版 - Data Scientist的编程能力
那个算法不涉及分布式处理
连最基本的map reduce都没有
现在算法的趋势是分布式算法
而非单机算法,单机上的算法已经被人做烂了
已经很复杂了,其复杂度远不是leetcode能比的
再做也很难有特别大的突破
真要开发算法,leetcode在分布式环境中帮不了太大的忙
当然作为基础,你刷刷还是挺好
但是说刷过了就怎样怎样,这倒不至于
m***r
发帖数: 359
34
来自主题: DataSciences版 - 大数据日报 2015年3月楼
大数据日报 2015-03-15
@好东西传送门 出品, 过刊见
http://bd.memect.com
订阅:给 [email protected]
/* */ 发封空信, 标题: 订阅大数据日报
更好看的HTML版
http://bd.memect.com/archive/2015-03-15/short.html
1) 【构建一个 ARM 集群,运行分布式 Docker 容器服务】 by @登州知府
关键词:数据库, 虚拟化, Docker, etcd, 容器
构建一个 ARM 集群,运行分布式 Docker 容器服务:第一部分,硬件 [1] 第二部分,
系统镜像 [2] 第三部分,分布式容器服务 [3]
[1] http://mkaczanowski.com/building-arm-cluster-part-1-collecting-wiring-and-powering-devices/
[2] http://mkaczanowski.com/building-arm-cluster-part-2-create-and-write-system-image-w... 阅读全帖
Q*K
发帖数: 3464
35
温家宝8月底视察迅雷时,邹胜龙作为公司CEO汇报工作说中国在下载领域领先,而迅雷
在下载行业领先,并向温家宝赠送了“001”的会员资格。
如果国务院总理温家宝想在互联网上下载点什么资源,他一定会比普通网友快上很
多,这不是因为他的政治局常委的身份,而是因为他的迅雷VIP资格。
在今天中国的互联网,下载在某种意义上等同于迅雷(占据八成市场份额),一如百
度之于搜索,阿里巴巴之于电子商务。
在迅雷的墙报上写着一个100亿的数字,这是公司计划未来5年内达到的市场规模。
看起来不可思议,而邹胜龙说:“5年百亿的市场是基于复合增长率分析,建立在对比
百度和腾讯上市前同期的数据基础上,这也是迅雷这样一个用户数量级公司对资本市场
的承诺。”
对于一个今年预计营收几亿的公司来说,这是一个幻象还是一个梦想?
邹胜龙说,他已经找到了方向。
技术的力量
邹胜龙闷着头捣鼓他的笔记本电脑,一边回应我的提问。
突然安静下来,我停下提问,看着对面这个发福的家伙:白色衬衣和深色西裤、黑
色皮鞋,办公室还挂着西装,一副CEO的范儿。
但是,没有领带,衬衣袖子撸到肘部,裤子已经没有裤缝,皮鞋也不闪亮,背后的
玻璃板上写满... 阅读全帖
c****s
发帖数: 5892
36
美国联邦调查局(FBI)一份文件显示,一群为维基解密网站(WikiLeaks)「复仇」的匿名网民,所使用的网络服务,与卑诗省一家网络公司有关联。
据星岛日报报道,「确凿证据」(The Smoking Gun)网站(thesmokinggun.com),引述FBI一份长达5页的宣誓书指出,被一群匿名网民用作攻击多家美国公司的网络服务,部分涉及卑诗省大维多利亚区(Greater Victoria)一家网络公司。
自从去年11月底,维基解密公开多份内容敏感的美国外交文件后,美国多家公司包括:PayPal、Visa及万事达(Master Card)等,决定暂停这个「爆料」网站的户口,理由是该机构正受到当局调查。
后来,一批自称「匿名人士」(Anonymous)的维基解密复仇者,向上述公司进行「分布式阻断服务」(Distributed Denial of Service,简称DDoS)。分布式阻断服务攻击,亦称作洪水攻击,即是通过大量合法的请求占用大量网络资源,以达到瘫痪网络的目的。
根据该份宣誓文件内容透露,加拿大皇家骑警及卑诗省萨尼治(Saanich)市警曾经接触上述维多利亚网络公司,并且获... 阅读全帖
i***s
发帖数: 39120
37
昨日,全国政协委员李小琳拿着环保袋参加经济组讨论。
盯人
今年两会,有媒体推出了《两会热搜榜》。根据相关数据,截至昨日,最受网友关注的财经界代表委员是中国电力国际有限公司董事长李小琳。中国铁路总公司总经理盛光祖与香江集团总裁翟美卿紧随其后。
前日,李小琳当天在人民大会堂参加中国人民政治协商会议第十二届全国委员会第二次会议开幕的照片,有超过6000人评论。微博上两张李小琳现身会场的照片,转发也近7000次。
而在昨日,有媒体拍到的照片显示,在当天全国政协十二届二次会议经济组的小组讨论中,李小琳拿着环保袋参加了讨论。此前,出现在公共视野中的李小琳打扮颇为时髦,甚至有网站的时尚频道还专门发文研究过她的穿着。不过,今年李小琳的穿着让很多网友直呼“低调”。
身为全国政协委员的李小琳,过去6年共提交25份提案,涉及电力改革、新能源发展、节能减排、生态文明建设、低碳经济、社会责任等多个领域。据《人民政协报》报道,李小琳今年将目光转向电力规划管理、标准化、分布式能源与智能电网等新领域,准备了三个提案,分别是《加强电力规划管理促进资源有效利用》、《关于将标准化提升为国家战略的建议》、《大力推动分布式能源... 阅读全帖
i***s
发帖数: 39120
38
据外媒报道,美国密苏里中央大学数学家柯蒂斯·库珀(CurtisCooper)通过“互联网梅森素数大搜索”(GIMPS)项目,于1月7日找到了目前人类已知的最大素数2^74207281-1;该素数有22338618位(这个数字有多长?如果用五号字逐位打印出来,从头到尾长达82.7公里),是第49个梅森素数。这一重大发现为GIMPS项目诞生20周年献了厚礼。
M74207281诞生自一台IntelI7-4790CPU电脑。这是库珀教授第四次通过GIMPS项目发现新的梅森素数,刷新了他自己的记录。他上次发现第48个梅森素数2^57885161-1是在2013年1月25日,有17425170位。
2300年前,古希腊数学家欧几里德就已证明素数有无穷多个,并提出一些素数可写成“2^P-1”(其中指数P也是素数)的形式。这种特殊形式的素数,具有独特的性质和无穷的魅力,千百年来一直吸引着众多的数学家(包括数学大师费马、笛卡尔、莱布尼兹、哥德巴赫等)和无数的业余数学爱好者对它进行探究。
17世纪的法国数学家、法兰西科学院的奠基人马林·梅森(MarinMersenne)对“2^P-1”型的素数做过较为系... 阅读全帖
s*****r
发帖数: 43070
39
分布式存储和分布式计算平台,再加上云计算,现在的小公司没这三大法宝都不好意思
跟人打招呼。
b*******y
发帖数: 4304
40
来自主题: Military版 - 列车防护系统
主要组成
地面设备通常情况下由自动闭塞设备构成。
车载设备由机车传感器、信息处理系统、显示屏、测速系统、速度比较系统和制动控制
部分组成。
有别于旧有的自动列车警报装置(AWS)与自动列车停止装置(ATS)B型和S型之单点警
告及控制,通过警告及控制点后,该ATW/ATS-B或S系统无法限制或监视行车速度,而
ATP系统即具有全程速度监控之功能。
列车自动保护系统 - 技术特征
在计算机联锁与地面ATP之间,将发码电路与编码逻辑控制电路合并,用硬件实现发码
,用软件实现编码逻辑控制。
采用ZFFT+GOERTEL算法高可靠识别处理ATP信号技术。
在安全模块之间运用1024HZ的健康链路检控随机系统故障技术。
安全模块内部以分布式A、B机方式的故障-安全门与回绕健康链路检控随机系统故障技
术。
软件采用业务流程与质检流程模式构成ATP信号逻辑与故障输出控制技术。
采用标准脉冲注入分布式软、硬件处理信号故障,利用 “安全与”的故障-安全测检控
技术处理随机共模故障。
在通信应用层额外增加安全核方式,提高总线通信可靠性,容错技术增强通信安全性技
术。
在工程应用中建立了适合国内轨道道床施工... 阅读全帖
d*****g
发帖数: 1616
41
http://www.ict.cas.cn/cxwh/cxqs/201204/P020120409552277976099.p
求实·创新 2012年1月 总第94期
且让世界听龙吟:理实交融的龙芯基础研究
钱 诚 陈云霁
2007年,龙芯3号的设计揭开序幕,当被人问到龙芯3号的意义时,胡伟武老师微笑
不语,提笔写下一行字,“如果说龙芯1号是在迷雾中起步,还看不到先行者的影子,
那么龙芯2号完成后,在当时实际上已经超过了一些同行者,看清了领先者的背影,而
龙芯3号的完成将使龙芯大踏步赶上并超过领先者。”
四年时间过去,龙芯3号已经从设计变成现实,并已发展出一系列改进型号。依托
龙芯3号的研发,龙芯团队已经实现了胡老师的预期,走在了世界体系结构研究的最前
沿。从2008年开始,龙芯在顶级会议和期刊上发表了一系列论文:IEEE Trans.on
Computers、IEEE Micro、ISSCC、ISCA、HPCA、IJCAI、HotChips、SPAA和DATE等等。
可以说,相比美国顶尖大学的一个研究组的论文发表水平也毫不逊色。更重要的是,龙
... 阅读全帖
i*****g
发帖数: 11893
42
2007年,龙芯3号的设计揭开序幕,当被人问到龙芯3号的意义时,胡伟武老师微笑
不语,提笔写下一行字,“如果说龙芯1号是在迷雾中起步,还看不到先行者的影子,
那么龙芯2号完成后,在当时实际上已经超过了一些同行者,看清了领先者的背影,而
龙芯3号的完成将使龙芯大踏步赶上并超过领先者。”
(批注:这些项目,要持续支持30年,直到和米帝分庭抗礼。开始的亏损,不能以寻常
市场经济盈利心理来衡量。)
四年时间过去,龙芯3号已经从设计变成现实,并已发展出一系列改进型号。依托
龙芯3号的研发,龙芯团队已经实现了胡老师的预期,走在了世界体系结构研究的最前
沿。从2008年开始,龙芯在顶级会议和期刊上发表了一系列论文:IEEE Trans.on
Computers、IEEE Micro、ISSCC、ISCA、HPCA、IJCAI、HotChips、SPAA和DATE等等。
可以说,相比美国顶尖大学的一个研究组的论文发表水平也毫不逊色
(批注:也就是说,对阵米帝整体他们的实力其实不强,估计米帝有几百个这样的实验
室。如果说他们一个公司是intel 1/3,那还可以。)。更重要的是,龙芯的研究已经
... 阅读全帖
s*****V
发帖数: 21731
43
来自主题: Military版 - 风电跃居第三大主力电源
新华网北京3月3日电题:风电跃居中国第三大主力电源 大量弃风限电暴露能源
管理问题
记者胡俊超、倪元锦
根据最新发布的中国电力企业联合会2012年全国电力工业年快报统计,201
2年底中国风电并网总装机6083万千瓦,跃居世界第一;2012年风电发电量1
004亿千瓦时,超过核电发电量的982亿千瓦时。
这也是中国风电发电量首次超过核电,由此,风电已经成为继火电和水电之后的中
国第三大主力电源。
尽管发展迅速,风电的利用效率并不高。作为衡量发电效率的重要指标,风电设备
利用小时数2012年出现同比下降。
国家能源局数据显示,2012年,风电设备利用小时数全国平均为1890小时
,较2011年下降30小时。个别省(区)风电利用小时数下降到1400小时左右
,浪费了清洁能源和投资,加剧了环境矛盾。
国家能源局日前下发《关于做好2013年风电并网和消纳相关工作的通知》指出
,随着中国风电装机快速增长,2012年部分地区弃风限电现象严重,全国弃风电量
约200亿千瓦时。
“弃风限电问题导致风电场运行经济性下降,2012年全国风电弃风限电造成的
直接经济损失在100亿元以上。”中国可再生能源学会... 阅读全帖
p*****c
发帖数: 20445
44
2011计划 第一批71个协同创新中心名单
1、科学与社会协同发展研究中心:中国科学院学部,清华大学
2、气候变化研究中心:中国科学院学部,北京大学
3、肿瘤学研究协同创新中心:中山大学,复旦大学,中国医学科学院
4、天津化学化工协同创新中心:南开大学,天津大学
5、量子调控研究协同创新中心:南京大学,中国科学技术大学
6、量子物质科学协同创新中心:清华大学,北京大学,中国科学院物理研究所
7、太空信息工程协同创新中心:西安交通大学,西安卫星测控中心,中国空间技术研
究院西安分院,中国科学院西安光学精密机械研究所
8、先进地面交通创新联盟:北京理工大学,东南大学,哈尔滨工业大学,华中科技大
学,清华大学,同济大学
9、绿色交通技术产学研协同创新联盟:武汉理工大学,长安大学,大连海事大学、重
庆交通大学、长沙理工大学
10、生物技术药物研发与成果转化协同创新联盟:四川大学,北京大学,清华大学,复
旦大学,浙江大学等
11、国家清洁能源协同创新中心:南京大学,协鑫集团
12、中国燃料电池汽车技术创新战略联盟:同济大学,清华大学,武汉理工大学,重庆
大学等
13、拓扑材料科学与技术上海协同创... 阅读全帖
b*****d
发帖数: 61690
45
国务院总理李克强14日主持召开国务院常务会议,部署大气污染防治十条措施,研究促
进光伏产业健康发展。
会议认为,大气污染防治既是重大民生问题,也是经济升级的重要抓手。我国日益
突出的区域性复合型大气污染问题是长期积累形成的。治理好大气污染是一项复杂的系
统工程,需要付出长期艰苦不懈的努力。当前必须突出重点、分类指导、多管齐下、科
学施策,把调整优化结构、强化创新驱动和保护环境生态结合起来,用硬措施完成硬任
务,确保防治工作早见成效,促进改善民生,培育新的经济增长点。
会议确定了防治工作十条措施。一是减少污染物排放。全面整治燃煤小锅炉,加快
重点行业脱硫脱硝除尘改造。整治城市扬尘。提升燃油品质,限期淘汰黄标车。二是严
控高耗能、高污染行业新增产能,提前一年完成钢铁、水泥、电解铝、平板玻璃等重点
行业“十二五”落后产能淘汰任务。三是大力推行清洁生产,重点行业主要大气污染物
排放强度到2017年底下降30%以上。大力发展公共交通。四是加快调整能源结构,加大
天然气、煤制甲烷等清洁能源供应。五是强化节能环保指标约束,对未通过能评、环评
的项目,不得批准开工建设,不得提供土地,不得提供贷款支持,... 阅读全帖
a*****c
发帖数: 2086
46
有些人啊,没有真正的去做过一个project,没有深入去参与其中的开发,就在那里想
当然的发表评论。真正做下去了才知道会碰到多少问题需要去考虑去解决的。一个短时
间内承受巨大交易量,要做到不能当机,让用户不感到速度变慢,购物历史和更新记录
不能冲突,背后采用怎样技术才能支撑,我还是贴个淘宝技术的科普吧。
【编者按】对于淘宝网而言,2012年的“双十一”是一个交易里程碑,是一个购物狂欢
日,在这个“神棍节”里,淘宝创下191亿元的交易额,在交易的背后隐藏着哪些复杂
技术?
你发现快要过年了,于是想给你的女朋友买一件毛衣,你打开了www.taobao.com。这时
你的浏览器首先查询DNS服务器,将www.taobao.com转换成ip地址。不过首先你会发现
,你在不同的地区或者不同的网络(电信、联通、移动)的情况下,转换后的IP地址很
可能是 不一样的,这首先涉及到负载均衡的第一步,通过DNS解析域名时将你的访问分
配到不同的入口,同时尽可能保证你所访问的入口是所有入口中可能较快的一个 (这和
后文的CDN不一样)。
你通过这个入口成功的访问了www.taobao.com的实际的入口IP... 阅读全帖
z********f
发帖数: 452
47
来自主题: Military版 - 这是在黑 李小琳吗?
李小琳低调现身 6000网友评论其参会照片(图)
今年两会,有媒体推出了《两会热搜榜》。根据相关数据,截至昨日,最受网友关注的
财经界代表委员是中国电力国际有限公司董事长李小琳。中国铁路总公司总经理盛光祖
与香江集团总裁翟美卿紧随其后。
前日,李小琳当天在人民大会堂参加中国人民政治协商会议第十二届全国委员会第
二次会议开幕的照片,有超过6000人评论。微博上两张李小琳现身会场的照片,转发也
近7000次。
而在昨日,有媒体拍到的照片显示,在当天全国政协十二届二次会议经济组的小组
讨论中,李小琳拿着环保袋参加了讨论。此前,出现在公共视野中的李小琳打扮颇为时
髦,甚至有网站的时尚频道还专门发文研究过她的穿着。不过,今年李小琳的穿着让很
多网友直呼“低调”。
身为全国政协委员的李小琳,过去6年共提交25份提案,涉及电力改革、新能源发
展、节能减排、生态文明建设、低碳经济、社会责任等多个领域。据《人民政协报》报
道,李小琳今年将目光转向电力规划管理、标准化、分布式能源与智能电网等新领域,
准备了三个提案,分别是《加强电力规划管理促进资源有效利用》、《关于将标准化提
升为国家战略的建议》、《大力... 阅读全帖
s*****V
发帖数: 21731
48
“我们企业现在生产办公都用自己光伏电站发出的电,用不完的剩余电量还能上网
,既可有效缓解高峰时段企业用电难的问题,还能为企业带来额外的收益。”这是浙江
永康群升集团有限公司负责人裘志伟谈到光伏发电时所言。
据了解,2013年11月底,浙江省政府印发《关于进一步加快光伏应用促进产业健康
发展的实施意见》,在出台“对分布式光伏发电项目实行备案管理”“豁免分布式光伏
应用发电业务许可”等放权政策的同时,还实施了“补贴标准在国家规定的基础上,省
再补贴0.1元/千瓦时”的补贴政策,浙江省屋顶光伏发电由此进入规模化发展时代。
企业厂房:渐成光伏发电主战场
群升集团是浙江省较早开发厂房屋顶电站的企业之一。早在2011年,该集团便投入
7000多万元开发金太阳示范工程光伏发电项目,一期工程建在综合楼顶,由9个380伏光
伏发电子系统组成,总功率达1800千瓦,年发电量可达147万千瓦时。
“群升集团综合楼光伏发电项目位于永康市经济开发区,是用电量增长较快的区域
,企业发展对电力需求旺盛。我们在接到项目申请后,迅速制定并网接入方案,现场指
导和检查光伏发电的入网... 阅读全帖
s*****V
发帖数: 21731
49
居民屋顶:把阳光装进“钱袋子”
“这是我家光伏‘微型发电站’去年11、12月两个月的卖电收入,总共366.17元。
”浙江省永康市民舒女士从电力部门拿到第一笔电费收入时喜形于色。她说,钱虽然不
多,但却让我们尝到了甜头、看到了希望。
家住永康市区龙域天城的舒女士,是永康尝试个人光伏发电的第一人。2012年年底
,她花4万元钱,在6层楼屋顶上安装30块非晶硅光伏电板,建成了光伏“屋顶电站”。
在光照充足的情况下,这座电站每小时可发4度电,按每天光照5小时计算,一年可发
7000多度电,而她家一年用电约有4200度“能不能把剩余的电卖掉呢?这样还能赚点钱
。”这成了舒女士的期望。
2013年7月,国家电网公司发布《关于做好分布式光伏发电并网服务工作的意见》
,明确了“接入免费、全额收购”的政策。4个月后,舒女士家的“屋顶电站”通过金
华、永康电力部门的验收并入国家电网。按照和永康市供电公司签订的协议,舒女士用
不完的电可以卖给电力公司,每3个月结算一次电费。
把屋顶上的阳光变成钱装进口袋,舒女士的故事给很多人带来启示,带动了居民“
屋顶电站”的发展。永康... 阅读全帖
z****e
发帖数: 54598
50
来自主题: Military版 - 对付ibm是去ioe的第一步
有个名词,据说是阿里巴巴弄出来的
叫做去ioe
一场庶民的胜利:IOE被逼“去IOE ”
2014-03-17 08:44新浪科技
我有话说
字号:TT
IOE.jpg
文/郭芾菩
“万万没想到,裁员这样的事情会离我这么近”,最近我一个刚工作两年多的小
师弟小西经常谈起这个话题。小西两年多前毕业就进入了“百年王朝”IBM,当时小西
的想法是至少干10年,积累丰富经验后再创业。
但现实是残酷的,几个月前,一直流传的IBM裁员消息捂不住了,“中国区要砍掉
30%,”小西忧心忡忡。而在几千公里外的深圳,上百员工正高举标语抗议,打工为生
的这家IBM工厂即将卖掉,半数员工默默接受了一份不算慷慨的安置协议,剩下的人则
苦苦抗争。
IBM的麻烦还不止这些:2013年全年业绩未达标,今年裁员计划会比去年更大,中
国是重灾区,IBM在中国已经放弃了小型机、X86低端服务器业务,这一切都来源于IBM
痛苦转型,押注IBM大型主机——这是一个里程碑式的事件,做硬件发家的IBM自己在“
去服务器化”,断尾求生把未来压在云计算这个他们曾经不屑的概念上。
曾几何时,一家信息化时代的企业永远摆脱不了的三个名字是:... 阅读全帖
首页 上页 1 2 3 4 5 6 7 8 9 10 下页 末页 (共10页)