p*******f
发帖数: 15 | 1 公司介绍：
CloudBrain 致力于为用户提供全新的机器学习算法和大数据处理服务。公司成立于
2015年，创始人来自Google，Facebook，Microsoft等公司的机器学习核心项目。
CloudBrain 特有的并行计算架构比现有的基于单机或cluster (如spark) 的机器学习
有如下显著优势：
1. 数据安全：用户无需上传数据至CloudBrain或public cloud (如Amazon AWS) 即可
完成所有计算，最大程度保障数据安全
2. 高效建模：CloudBrain利用软硬件相关并行算法的最新发展改进了deep learning，
bayesian learning，generalized linear model和ensemble等算法，提高了建模的速
度和准确度
3. 操作简便：CloudBrain数据服务为复杂机器学习算法打包，用户只需通过简单交互
界面指定数据来源和数据类型
4. 强化训练：CloudBrain数据服务能够自动总结客户端的训练过程，不断自我更新并
提高应对不同数据的能力
招聘岗位：机器学习算法研发工程师，大数据系统研发工程师... 阅读全帖 |
|
h******e
发帖数: 209 | 2 问一个大数据系统架构的事情。
国内同学想找我合作一个跟大数据有关的项目。第一步，跟大家一样，都是在互联网上
采集大量数据，提纯去杂做一些处理后，要开个web服务器显示一些统计信息。用传统
的mysql方式肯定是不行了，数据采集量基本每天都超过1000万条了。采集量太大，而
且采集数据的渠道太多，太杂。考虑用大数据的方式来搞，但是不是很精通这一块。
要求是能横向扩容服务器来解决将来数据量增大的问题，另外，采集是流式的不断流入
数据，显示数据的时候也需要尽快的显示出最新的变化，能做到5分钟内更新采集到的
数据最好。
请教大牛们，这种方式该怎么设计系统，基于哪些模块或者软件开发最好？一定要靠谱
点，不冒出一堆坑的比较好！ |
|
O****s
发帖数: 463 | 3 有没支持million concurrent queries per second的数据系统SQL/NoSQL?
去年淘宝双十一 每秒峰值是8.59万笔交易
如果每秒近百万级，什么系统可以实现？
ElasticSearch/SOlr? |
|
O****s
发帖数: 463 | 4 有没支持million concurrent queries per second的数据系统SQL/NoSQL?
去年淘宝双十一 每秒峰值是8.59万笔交易
如果每秒近百万级，什么系统可以实现？
ElasticSearch/SOlr? |
|
|
a*****c
发帖数: 2086 | 6 有些人啊，没有真正的去做过一个project，没有深入去参与其中的开发，就在那里想
当然的发表评论。真正做下去了才知道会碰到多少问题需要去考虑去解决的。一个短时
间内承受巨大交易量，要做到不能当机，让用户不感到速度变慢，购物历史和更新记录
不能冲突，背后采用怎样技术才能支撑，我还是贴个淘宝技术的科普吧。
【编者按】对于淘宝网而言，2012年的“双十一”是一个交易里程碑，是一个购物狂欢
日，在这个“神棍节”里，淘宝创下191亿元的交易额，在交易的背后隐藏着哪些复杂
技术？
你发现快要过年了，于是想给你的女朋友买一件毛衣，你打开了www.taobao.com。这时
你的浏览器首先查询DNS服务器，将www.taobao.com转换成ip地址。不过首先你会发现
，你在不同的地区或者不同的网络（电信、联通、移动）的情况下，转换后的IP地址很
可能是 不一样的，这首先涉及到负载均衡的第一步，通过DNS解析域名时将你的访问分
配到不同的入口，同时尽可能保证你所访问的入口是所有入口中可能较快的一个 (这和
后文的CDN不一样)。
你通过这个入口成功的访问了www.taobao.com的实际的入口IP... 阅读全帖 |
|
h******k
发帖数: 15372 | 7 【 以下文字转载自 Joke 讨论区 】
发信人: bread22 (bread22), 信区: Joke
标 题: 外媒:大数据会伤害弱势群体
发信站: BBS 未名空间站 (Mon Apr 11 09:49:28 2016, 美东)
网易科技讯 4月11日消息，据《大西洋月刊》报道，从宏观角度来看，大数据绝对是个
好东西，它能解决许多人脑处理不了的复杂问题。它可以帮助公司削减开支，帮助市政
人员规划城市，帮助情报机构追查恐怖分子，帮助卫生部门预测传染病爆发，甚至能帮
助警方预知犯罪的发生。决策者越来越依靠大数据，这一复杂的算法成了推动历史发展
的重要一环。
大数据也有副作用
但如果这些数据是关系到人的，尤其是社会上缺少话语权的弱势群体的话，这一算法就
会产生不少的副作用。对许多美国穷人来说，这些覆盖了他们生活各个角落的数据会成
为他们脱贫致富的绊脚石。
在美国，低收入群体是最受大数据关注的族群。除了预防和打击犯罪的警察，各种公益
项目、儿童福利机构和反家暴组织都在关注着这一群体的一举一动。
在某些地区，为了评估公共福利如食品卷的发放情况，申请人需要录入指纹并进行药物
检测。一旦你... 阅读全帖 |
|
b*****2
发帖数: 11103 | 8 网易科技讯 4月11日消息，据《大西洋月刊》报道，从宏观角度来看，大数据绝对是个
好东西，它能解决许多人脑处理不了的复杂问题。它可以帮助公司削减开支，帮助市政
人员规划城市，帮助情报机构追查恐怖分子，帮助卫生部门预测传染病爆发，甚至能帮
助警方预知犯罪的发生。决策者越来越依靠大数据，这一复杂的算法成了推动历史发展
的重要一环。
大数据也有副作用
但如果这些数据是关系到人的，尤其是社会上缺少话语权的弱势群体的话，这一算法就
会产生不少的副作用。对许多美国穷人来说，这些覆盖了他们生活各个角落的数据会成
为他们脱贫致富的绊脚石。
在美国，低收入群体是最受大数据关注的族群。除了预防和打击犯罪的警察，各种公益
项目、儿童福利机构和反家暴组织都在关注着这一群体的一举一动。
在某些地区，为了评估公共福利如食品卷的发放情况，申请人需要录入指纹并进行药物
检测。一旦你开始领取这些福利，政府就会监控你收入的流向，有时还会有专人来家中
进行家访。
各类机构搜集来的数据最后很有可能都会反馈到警方的系统中，因此警方会加强对此类
群体的监控。“这些数据成了庞大信息流的一部分，不过许多人并不知道自己一直活在
别人眼... 阅读全帖 |
|
i***s
发帖数: 39120 | 9 有网友发微博@潇湘晨报称，湖南工业大学科技学院毕业证书上的编码和学信网上的不一致，眼下正是求职季，这对于毕业生找工作带来不小影响。
记者了解到，该名网友班上38名同学的毕业证编码都与网上的对不上号。7月2日，该校相关负责人解释，之所以出现这种情况可能是上传数据时出现了故障，目前该校已将之前上传的数据全部撤掉，重新上传了初始数据。
7月2日下午，记者联系到发帖网友郭华（化名），他是湖南工业大学科技学院电气工程及自动化专业2013届毕业生。
“毕业证编码与网上不符。”郭华说，6月30日，有一名同学参加面试前，通过中国高等教育学生信息网（学信网）查询，输入毕业证上的编码后，却查询不到自己的信息。随后，班上的同学纷纷登录学信网，发现班上38人的编码全都对不上号。
“眼下正是求职高峰期，面试、入职报到等很多环节，不少单位都会对毕业证编码进行核实查询，一旦被用人单位发现毕业证信息有误，求职就会受影响。”郭华说，学校别的班上也出现了这种情况。
湖南工业大学科技学院副院长张发明说，学校随机编排编码后，打印在毕业证上，6月19日发放给学生。6月30日下午，学校将数据上传至教育部网站，学生才能通过学信网进... 阅读全帖 |
|
z****e
发帖数: 54598 | 10
我们以前做paymeng gateway时候都不怕丢数据，你怕什么？
你数据量再大，有我们大？当时数据是150次交易/s
比amazon和apple交易的总和（80/s）还大接近一倍
你说说你的多大？如果怕丢数据，就减少io，网络是最不可靠的东西
这个没啥疑问，还有就是要上分布式transaction，没那么容易做
http挂了，我们的一个机制就是会不停滴try，先assume它成功
然后不停滴试，最后刷成功为止，是，这样可能会有点问题，比如盗刷
但是一般跟银行的连接，都是可靠而且稳定的，这种情况极少
而且这个risk是资本家所必需承担的，这就是为啥那个系统做得好
能干掉很多同行的原因，风险并不可怕，可怕的是不可控的风险
所以java好啊，java你清楚滴知道它在干嘛，其他语言我靠
一个var可以搞死一片人 |
|
|
c***s
发帖数: 70028 | 12 在统计数据公布之前几天，有位券商行业的朋友很神秘的说，“我们圈里早知道这个月CPI数据是3.1%。”“你们如何这么肯定呢？是预测的总结吧！”我问。“呵呵，听说他们有渠道。” 经济观察网 孙健芳/文 在统计数据公布之前几天，有位券商行业的朋友很神秘的说，“我们圈里早知道这个月CPI数据是3.1%。”
“你们如何这么肯定呢？是预测的总结吧！”我问。
“呵呵，听说他们有渠道。”
其实不仅仅是券商行业有渠道，在海关数据公布之前，路透社也公布出口增幅近50%的信息，而在去年的统计数据发布会上，路透社记者还质问国家统计局关于统计数据泄漏的问题。
这个朋友在行业中摸爬滚打2年，他告诉了我关于经济数据泄漏的N种情况。
一是部委组织经常组织一些高端会议，会上一些大领导会出席讲话，这些大领导经常随口说出一些经济数据，后来经过仔细琢磨，发现很多数据都是相关单位仍没有公布过。事后问及才知道，在相关数据公布之前要先给一些大领导们过目，大领导们虽然记住了数据，但是并不记得数据发布的日期，所以数据经常会被泄露出来。
除了大领导之外，一些数据系统工作的人士也会在一些交际场合中随口泄露各种统计数据，这些数据在他们看来并 |
|
h*******d
发帖数: 272 | 13 大家好 生手急求
我用SPSS 的IMPUTATION 功能填补我原始数据中的MISSING VALUE （SAS 也有这个功能
，但PROJECT 马上要交 没功夫折腾SAS 就偷懒用SPSS）
我学了半天还没明白 比如 SPSS中 iteration=5，那就会出来5组新数据 就是原始数据
+系统填补上的数据 （重复5次 每次不一样的填补数据）
然后我分析怎么办呢？ 到底拿哪组数据呢 我试着5组都分析 发现结果还是有不同的
和原始数据的结果差的更大。 到底怎么把这5组数据 最后总结为我最终的模型呢？
肯请大家指点 |
|
e***e
发帖数: 168 | 14 公司： graphsql.com
资金状况：A 轮融资。
工作地点：硅谷。
工作内容：图查询大数据系统
待遇：市场待遇。提供住处。
职位： intern 3～5个月。 根据工作成绩，可以转成全职。
要求：计算机硕士以上。做过系统的优先。有数据库或系统文章的优先。
有兴趣者，发简历到 [email protected]/* */ |
|
w***g
发帖数: 5958 | 15 google的GFS和mapreduce是05年左右发的paper。发paper的时候他们内部应该用了几年
了。
然后06年的样子hadoop出来，到现在有快１０年了。１０年以前机器的内存没现在这么
大，
CPU也没现在这么快，大数据系统的软件开发也才起步。当时hadoop确实能解决不少问
题。
后来机器内存多了，很多人又发现其实数据没那么大，所以就把hadoop的out-of-core
processing抛弃了，改用spark的in-memory processing。现在hadoop有用的就是
一个HDFS文件系统。直接写mapreduce的应该少了，都是用HDFS上面的ecosystem。
另外需要注意的是这１０年硬件也在发展，传统数据库的处理能力也在增强。
是不是真要用hadoop，得针对具体case分析。 |
|
n****n
发帖数: 11 | 16 你最后也不得不重新回到“统计规律”上来。ＭＬ的弱势是历来已久的，也是纠缠这个
领域多年的问题，你不能期待去解释第N层后向的节点参数就是对结果有功用，也不能
期待那几个随机的小树就是非那么长不可。这是由这种人工智能的特性决定的，除非在
设计思想上有革命性的重大变革。
之所以提到这个topic, 本意是希望从多个角度来和大家探讨一下大数据的深层意义和
将来的发展，不要动不动就一头扎下去，花了大量时间精力，发现只是管中看豹子，丧
失全局的把握。这样的事情在技术领域发生太多了。互联网在９５－２０００是高峰，
人人都在做网站，搞WEB/HTML静态的动态的。现在10多年过去了，泡沫也经历了，当下
的关键技术和热点，云计算，网络视频，Social Network, TW, WeChat etc,,都是当时
很少提及和关注的。即便单纯做网页也很少用HTML网页编辑而是改Blog了吧。
现在真正在做大数据的公司不足１％，想到近期要升级到大数据的不到１０％，要直接
移植换代为大数据系统的更少之又少。大多数公司在观望甚至根本没有提上日程。这里
面，成本，资源，人力，知识，法规都是问题。Ｆ没有办法直接用消费... 阅读全帖 |
|
d****n
发帖数: 12461 | 17 这点很重要啊。因为dimension会改变，如果不在原始数据还在etl的时候和fact联合的
话，以后也许就再也没机会了。
relation只是万不得已的时候才用的。至于fk，那是给前台input时候搞的，中间给自
己用就是枷锁。
在dw里面，其实单个数据可靠不可靠不重要。重要的是即使有一批不可靠数据，系统还
能容错，不可靠数据也不会影响结果。 |
|
|
z****e
发帖数: 54598 | 19 我说说我的经验吧
我个人觉得，mq其实很难用
msg还是以json为佳
因为如果是其他的，尤其是serialisable的object
可读性不强
其次broker本身会产生严重的依赖
你测试就很麻烦
尤其是本机测试，你要连到mq上去
折腾啊，而且强依赖，所有的system都会依赖这个mq
所以我建议干掉mq，mq基本上都是一个坑
而且很多mq都没有直接监听的端口什么的，测试起来很成问题
建议直接http+json就好了
便于测试，或者像vert.x一样，有自己的msg bus
然后就用msg bus传json就好了，vert.x用的是web scoekt协议
用shell service可以直接看bus里面传递的消息
非常方便，便于测试，坑少很多
另外呢，如果你想做persistence，你这种明显没有什么规律的数据
建议直接用file system就好了，不需要用c*
因为c*很大，东西比较多，有cql固然方便，但是这个是基于index的查找
所以你要想清楚，你这个数据到底是semi-structured的，也就是有明显的index的
还是unstructured的，像网页一样完全... 阅读全帖 |
|
J****R
发帖数: 373 | 20 storm, spark, hadoop 可以用来做aggregation，具体要看你们的user case。 如果用
spark, hadoop接在data store后面做query的话，要看你们出什么类型的report，要求
的响应时间是多少。如果是customized ad hoc query， 并且要实时显示report，那用
这些query就不太方便了，可能自己写一个query engine还好一点。如果query的数据量
不小的话，最好自己写点code 用coprocessor,user defined functions 这类东西处理
，能有效的减少响应时间。
c*,hbase这些东西也不是包治百病的，query的数据量大了一样很慢，还是得把计算挪
到cluster上去比较有效。如果你们的report比较固定，那可以用空间换时间，做点pre
process，query起来不管数据量大小都会很快。 |
|
d*******r
发帖数: 3299 | 21 就是说 Storm, Spark, Hadoop 这些是接在 C* 后面吧，从 C* 里按要求提出数据?
如果有 ES, 估计也是接到 C* 后面吧.
C* 放在中间层主要为了提供灵活性，是不是?
毕竟从 Kafka 里提取数据，检索功能有限, Kafka 就当一个巨大 buffer 用? |
|
k*********l
发帖数: 1218 | 22 呵呵，我的大数据系统简单但是全面，那这些人rally总会去吧
即不上网，又去不了rally的，那就是智障人士，这些人选左派情有可原，属于统计上
的outlier
trump不停做rally，到各地，是非常重要和关键的一步
老妖婆自以为在暗地里不停的打黑枪是聪明之举，我只能说老妖婆即蠢又极端evil |
|
k*********l
发帖数: 1218 | 23 呵呵，我的大数据系统简单但是全面，那这些人rally总会去吧
即不上网，又去不了rally的，那就是智障人士，这些人选左派情有可原，属于统计上
的outlier
trump不停做rally，到各地，是非常重要和关键的一步
老妖婆自以为在暗地里不停的打黑枪是聪明之举，我只能说老妖婆即蠢又极端evil |
|
i***1
发帖数: 2534 | 24 一般都是update会产生这种情况，
如果不想保留data或data已经备份，我一般都是选restore,
这样会抹掉现在的全部数据，系统很干净 |
|
J****R
发帖数: 373 | 25 基本上就是我们在干的事情。大概架构就是：
数据源->前台 web server收集数据->processing server(data pre aggregation)->
kafka->processing server (data aggregation)->staging data in Hbase or C*
后台web server query Hbase or C* for report.
data aggregation 如果是off line的就用mapreduce, spark什么的，如果是streaming
就用相应的streaming framework.或者干脆自己写。 |
|
d*******r
发帖数: 3299 | 26 请教，这个 processing server(data pre aggregation) 是指初步的数据处理吧?
比如这些ID来的数据，每分钟 aggregate 一次，有些fields去掉，可能有用的fields
保留.
这一步需要的数据处理能力很小, 不用轮子，基本手写点简单的逻辑就行?
streaming |
|
h******e
发帖数: 209 | 27 初步打算招两个Java开发人员负责这一块。
在国内做，不知道能不能用amazon的那些服务。不行的话，估计得自己搭数据平台了。
先上20台24核/32G的服务器，分别做采集，分析，存储，数据库，web服务器，这样的
硬件配置是不是够了？
几年前学过一些hadoop，大牛们说的这些都没听过，孤陋寡闻了。
需要看那些资料，能尽快进入角色？ |
|
h******e
发帖数: 209 | 28 初步打算招两个Java开发人员负责这一块。
在国内做，不知道能不能用amazon的那些服务。不行的话，估计得自己搭数据平台了。
先上20台24核/32G的服务器，分别做采集，分析，存储，数据库，web服务器，这样的
硬件配置是不是够了？
几年前学过一些hadoop，大牛们说的这些都没听过，孤陋寡闻了。
需要看那些资料，能尽快进入角色？ |
|
d****i
发帖数: 4809 | 29 严重同意，前几天刚看到比这个数据量大的多的case, 八台机器，MySQL加上一些PHP,
Python代码用来做做ETL加data processing完全可以搞定，进了现在这么多hype的忽悠
坑出来就不容易了。 |
|
d******e
发帖数: 2265 | 30 mq是必须的。data 来的时候通常是一个spike.你http要配多强大才好? 丢数据,
connection reject怎么半。http 当了你怎么retry.必要要mq熨平数据流。 |
|
g*****g
发帖数: 34805 | 31 UAP 里U全是Python，只有大数据一块是Java。A前端Ruby后端Java，P前端Python，后
端Java，Python，Go。 |
|
p**r
发帖数: 5853 | 32 从架构上来说，我自己做的项目和楼主的一模一样，
只是俺是抠门大仙，钱都去买奔驰宝马，要么给老婆买爱马，给娃买骑马
#1 采集+分析，自己家所有电脑不用的时候全民皆兵，提炼后结果同步服务器
采集不做任何分析，先采集下来再说
分析最重要，我一有时间就改善分析，
说的好听点machine learning
其实是半人工完善
#2 web服务器MS SQL(read only for front-end)+Cache+Lucene
反正我比较目前市面上的同类产品，说实在的，数据完整和速度还真没我的快，
当然竞争者一堆，不过老子一点都不怕，就怕你不来竞争
不然和老子这种街头派竞争，
你正规军得养个团队，老子谁都不用养，慢慢耗死对手， |
|
|
m********t
发帖数: 13072 | 34 loca server database，这部分可以用javascript建立一个JDBC的web-based 数据系统
，这样你随时都可以show出自己的schedule
不过现在流行data center，都有动态存储servers了，应该不会再用古老的JDBC了
这种topic，要稍微了解一下目前工业所hot的DB存储模式，面试的时候，往上套就行了
，错不了 |
|
l*b
发帖数: 4369 | 35 这个还是可以的
我有个本科同学，在中科院读博的时候，一个项目就是用一个传感器测脉搏，忘了是跟
哪个医院合作了。他负责搞了个自学习系统，从医院搞了几千个孕妇的脉搏样本，让系
统自动生成孕妇脉搏的pattern，然后测了一批新的脉搏数据，系统判断是否怀孕的准
确率在98%以上。 |
|
t******i
发帖数: 35 | 36 是不是支付系统可靠性要求高 需要SQL Server, Cassandra 之类的不是100%
consistency? |
|
t******i
发帖数: 35 | 37 是不是支付系统可靠性要求高 需要SQL Server, Cassandra 之类的不是100%
consistency? |
|
m***e
发帖数: 428 | 38 来源： 中央人民政府网站
“十三五”国家科技创新规划，依据《中华人民共和国国民经济和社会发展第十三
个五年规划纲要》、《国家创新驱动发展战略纲要》和《国家中长期科学和技术发展规
划纲要(2006—2020年)》编制，主要明确“十三五”时期科技创新的总体思路、发展目
标、主要任务和重大举措，是国家在科技创新领域的重点专项规划，是我国迈进创新型
国家行列的行动指南。
第一篇 迈进创新型国家行列
“十三五”时期是全面建成小康社会和进入创新型国家行列的决胜阶段，是深入实
施创新驱动发展战略、全面深化科技体制改革的关键时期，必须认真贯彻落实党中央、
国务院决策部署，面向全球、立足全局，深刻认识并准确把握经济发展新常态的新要求
和国内外科技创新的新趋势，系统谋划创新发展新路径，以科技创新为引领开拓发展新
境界，加速迈进创新型国家行列，加快建设世界科技强国。
第一章 把握科技创新发展新态势
“十二五”以来特别是党的十八大以来，党中央、国务院高度重视科技创新，作出
深入实施创新驱动发展战略的重大决策部署。我国科技创新步入以跟踪为主转向跟踪和
并跑、领跑并存的新阶段，正处于从量的积累向质的飞跃、... 阅读全帖 |
|
k*****u
发帖数: 1688 | 39 应该是到了组建公司的时候了
板上的兄弟们要不要团结起来，振兴中华？
实在不行，还可以贩卖海外各种知识视频，要是天朝真的封网的话，youtube上大量优
质视频可以加工加工转卖了
国务院关于印发
新一代人工智能发展规划的通知
国发〔2017〕35号
各省、自治区、直辖市人民政府，国务院各部委、各直属机构：
现将《新一代人工智能发展规划》印发给你们，请认真贯彻执行。
国务院
2017年7月8日
（此件公开发布）
新一代人工智能发展规划
人工智能的迅速发展将深刻改变人类社会生活、改变世界。为抢抓人工智能发展的重大
战略机遇，构筑我国人工智能发展的先发优势，加快建设创新型国家和世界科技强国，
按照党中央、国务院部署要求，制定本规划。
一、战略态势
人工智能发展进入新阶段。经过60多年的演进，特别是在移动互联网、大数据、超级计
算、传感网、脑科学等新理论新技术以及经济社会发展强烈需求的共同驱动下，人工智
能加速发展，呈现出深度学习、跨界融合、人机协同、群智开放、自主操控等新特征。
大数据驱动知识学习、跨媒体协同处理、人机协同增强智能、群体集成智能、自主智能
系统成为人工智能的发展重点，受脑科学研... 阅读全帖 |
|
f*******1
发帖数: 59 | 40 做一下广告：一家以省政府牵头，有30亿启动资金的民营银行要在上海建立科技和业务
中心。银行以互联网为主，做支付，借贷，理财，境内外转账,etc。
诚征拥有海外多年互联网金融工作及学习的背景，熟悉海内外互联网金融发展趋势，具
有创新理念，致力于归国投生于科技金融事业的人士
公司氛围将秉承创业精神，股权激励，以技术团队为主，占到60%或以上。公司主管将
于四月中旬来美现场招聘。
有意者或者有认识的朋友感兴趣 请与[email protected]/* */联系， 谢谢
招聘岗位：
业务类
资产管理产品设计
工作职责：
1、负责资产项目的引入、流程设计、机构、产品及项目准入、协议签署、除外部渠道
产品引入以外的商务谈判等工作；
2、协助配合持续期管理室和综合财务室与业务的相关工作；
3、牵头完善资管产品部资产引入的有关制度、办法、流程；
工作要求：
1、国外重点院校本科及以上金融相关学历；
2、有资产管理产品设计相关经验5年以上，了解市场客户需求和市场产品动态，具有产
品创新精神；
3、有较强的沟通能力和执行力，有高度的责任心和团队协作精神，能承受较强的工作
压力；
4、热爱移动... 阅读全帖 |
|
D**s
发帖数: 6361 | 41 【环球网综合报道】据商务部官网25日消息,为执行联合国安理会有关决议,根据《中华
人民共和国对外贸易法》第十六条和第十八条规定,禁止向朝鲜出口与大规模杀伤性武
器及其运载工具相关的两用物项和技术、常规武器两用品。以下为公告全文:
【发布单位】商务部 工业和信息化部 国防科工局 国家原子能机构 海关总署
【发布文号】公告2017年第9号
【发布日期】2017-1-25
为执行联合国安理会有关决议,根据《中华人民共和国对外贸易法》第十六条和第十八
条规定,禁止向朝鲜出口本公告所公布的与大规模杀伤性武器及其运载工具相关的两用
物项和技术、常规武器两用品。本公告自公布之日起执行。
商 务 部
工业和信息化部
国 防 科 工 局
国家原子能机构
海 关 总 署
2017年1月25日
增列禁止向朝鲜出口的两用物项和技术清单
本清单根据联合国安理会第2321号决议制定。
一、物项、材料、设备、货物和技术
(一)可用于核和/或导弹的物项
1.异氰酸盐(TDI(甲苯二异氰酸酯),MDI(亚甲基异氰酸苯酯)),IPDI(异佛尔酮 二异氰酸
酯),HNMDI 或 HDI(己二异氰酸酯),DDI(二聚酸二异氰... 阅读全帖 |
|
d********w
发帖数: 363 | 42 http://dongfei.baijia.baidu.com/article/54768
提到大数据分析平台，不得不说Hadoop系统，Hadoop到现在也超过10年的历史了，很多
东西发生了变化，版本也从0.x进化到目前的2.6版本。我把2012年后定义成后Hadoop平
台时代，这不是说不用Hadoop，而是像NoSQL （Not Only SQL）那样，有其他的选型补
充。我在知乎上也写过Hadoop的一些入门文章 如何学习Hadoop - 董飞的回答，为了给
大家有个铺垫，简单讲一些相关开源组件。
背景篇
Hadoop: 开源的数据分析平台，解决了大数据（大到一台计算机无法进行存储，一台计
算机无法在要求的时间内进行处理）的可靠存储和处理。适合处理非结构化数据，包括
HDFS，MapReduce基本组件。
HDFS：提供了一种跨服务器的弹性数据存储系统。
MapReduce：技术提供了感知数据位置的标准化处理流程：读取数据，对数据进行映射
（Map），使用某个键值对数据进行重排，然后对数据进行化简（Reduce）得到最终的
输出。
Amazon Elastic Map Red... 阅读全帖 |
|
d********w
发帖数: 363 | 43 http://dongfei.baijia.baidu.com/article/54768
提到大数据分析平台，不得不说Hadoop系统，Hadoop到现在也超过10年的历史了，很多
东西发生了变化，版本也从0.x进化到目前的2.6版本。我把2012年后定义成后Hadoop平
台时代，这不是说不用Hadoop，而是像NoSQL （Not Only SQL）那样，有其他的选型补
充。我在知乎上也写过Hadoop的一些入门文章 如何学习Hadoop - 董飞的回答，为了给
大家有个铺垫，简单讲一些相关开源组件。
背景篇
Hadoop: 开源的数据分析平台，解决了大数据（大到一台计算机无法进行存储，一台计
算机无法在要求的时间内进行处理）的可靠存储和处理。适合处理非结构化数据，包括
HDFS，MapReduce基本组件。
HDFS：提供了一种跨服务器的弹性数据存储系统。
MapReduce：技术提供了感知数据位置的标准化处理流程：读取数据，对数据进行映射
（Map），使用某个键值对数据进行重排，然后对数据进行化简（Reduce）得到最终的
输出。
Amazon Elastic Map Red... 阅读全帖 |
|
t******t
发帖数: 15246 | 44 人民网北京5月13日电（记者赵亚辉）国家测绘局正式对外发布，历时3年科技攻关
，打破西方技术壁垒，由中国测绘科学研究院牵头承担的“机载多波段多极化干涉SAR
测图系统（简称，机载SAR测图系统）”的研制取得全面成功。作为国内首套具有自主
知识产权的机载SAR测图系统，突破了多项核心技术，获得6项自主知识产权专利，填补
了国内空白，整体技术指标达到国际先进水平。至此，我国复杂地形区域测图将不再受
雨雪云雾，山峦沟壑等恶劣的天气和地理条件制约，成功实现全天时、全天候从万米高
空获取高分辨率测绘数据，快速成图，及时动态监测地理国情。
据悉，该系统作为我国对地观测领域和西部测图工程的重大创新研究成果，已成功
应用于西部测图工程横断山脉区域约11万平方千米、陕西渭南地区1200平方千米的SAR
影像数据获取和 1:1万、1:5万比例尺产品测制。在2010年4月玉树抗震救灾应急响应中
，快速获取了灾区2000平方千米影像数据，完成了灾情信息解译与评估。
10余位院士专家鉴定认为，中国测绘科学研究院研制的机载SAR测图系统解决了复
杂地形区域的测图难题，具备了生产1:1万至1:5万比例尺数字高程模型... 阅读全帖 |
|
|
f***y
发帖数: 4447 | 46 https://www.enmotech.com/web/detail/1/724/2.html
导读：日前，华为公司在京面向全球发布了人工智能原生(AI-Native)数据库GaussDB和
业界性能的分布式存储FusionStorage 8.0，将多年的AI技术和能力以及数据库经验融
入到新品，实现很多创新性突破，比如人工智能技术融入分布式数据库的全生命周期、
一套存储可同时支持块、文件、对象、HDFS协议等。
其中，最为标杆性的场景应用实属招商银行，在实践中：
华为GaussDB管理数据容量提升10倍，AZ内故障恢复速度提升30倍。以故障恢复为例，
GaussDB的RTO时间小于1秒，而其他厂商则需要30秒；
FusionStorage 8.0在招行，部署渠道接入、开发测试、VDI以及大数据系统，一套存储
替代原有4种存储设备，节省40%的TCO，业务上线速度提升9倍。其次，将人工智能技术
融入存储全生命周期管理，从资源规划、业务发放、系统调优、风险预测和故障定位等
方面实现智能运维管理，实现云上云下协同。再者，分布式存储性能业界第一，单节点
性能高达16.8万每秒读写速度(IO... 阅读全帖 |
|
P*V
发帖数: 587 | 47 【 以下文字转载自 Military 讨论区 】
发信人: thinknet (我是云), 信区: Military
标 题: 我国首套自主产权的机载SAR测图系统研制成功
发信站: BBS 未名空间站 (Sat May 14 10:43:13 2011, 美东)
人民网北京5月13日电（记者赵亚辉）国家测绘局正式对外发布，历时3年科技攻关
，打破西方技术壁垒，由中国测绘科学研究院牵头承担的“机载多波段多极化干涉SAR
测图系统（简称，机载SAR测图系统）”的研制取得全面成功。作为国内首套具有自主
知识产权的机载SAR测图系统，突破了多项核心技术，获得6项自主知识产权专利，填补
了国内空白，整体技术指标达到国际先进水平。至此，我国复杂地形区域测图将不再受
雨雪云雾，山峦沟壑等恶劣的天气和地理条件制约，成功实现全天时、全天候从万米高
空获取高分辨率测绘数据，快速成图，及时动态监测地理国情。
据悉，该系统作为我国对地观测领域和西部测图工程的重大创新研究成果，已成功
应用于西部测图工程横断山脉区域约11万平方千米、陕西渭南地区1200平方千米的SAR
影像数据获取和 1:1万、1:5万比例... 阅读全帖 |
|
|
c***s
发帖数: 70028 | 49 马来西亚总理纳吉布15日下午在马来西亚首都吉隆坡召开新闻发布会说，有很高确定性认为失联客机的通信系统被人蓄意关闭，客机航线可能被人为改变。纳吉布说，客机上的飞机通信寻址与报告系统（ACARS）在客机接近马来西亚海岸线时被人为关闭，机载应答系统在客机失联空域被人为关闭，此后飞机从民用雷达上消失。客机在从民用雷达上消失后又飞行了数小时。客机上都有哪些系统，马来西亚因何断定这些通信系统是人为关闭的？失联客机又是如何向卫星发射信号的？
失联客机上都有哪些通信系统？
至少有7套通信系统
飞机通信系统又可分为人工通信和自动通信两大部分。
人工通信方面有甚高频无线电通信系统，它是目前民航飞机的主要通信工具。它的有效作用范围较短，用于飞机起飞、降落时或通过控制空域时机组人员和地面管制人员的双向语音通信。波音777飞机装有3套甚高频无线电通信系统。
其次，高频无线电通信系统是远距离通信系统，通信距离可达数千公里，用于飞机飞行中保持与基地及远方航站的联络。波音777客机等大型飞机一般装置有两套高频通信系统。
此外，选择呼叫系统，也叫应答机系统。在飞行过程中，地面航空管制员会通过无线电通知飞行员分配给他的应... 阅读全帖 |
|
