l*********u
发帖数: 19053 | 1 把高大上简历里"Mapreduce"改成"ETL"，搞不好就有戏了 :) |
|
a******3
发帖数: 170 | 2 data engineers 主要涵盖大数据系统的维护和开发， 比如： hadoop, Spark, storm,
等等，以及基于这些系统之上的 ETL pipeline，主要的活是编程 ＋ 分布式系统设计
。
data scientists 利用上述大数据平台来获取和分析数据。简单的任务比如，运行一个
SQL 语句来拿一些数据； 复杂的任务比如，建立模型来预测用户行为。一般用 SQL,
python, R 等等。
小部分牛逼的data engineers / data scientists 研究如何在大数据平台上实现高效
data mining / machine learning 算法。 |
|
z****e
发帖数: 54598 | 3 相似度理论应该是big data的基石
基于txt的相似，搞出声音和图像的相似
这是人类认知的第一步，现在就在教电脑怎么认知这个世界
然后电脑才能想办法思考，人如果没有文字这些就无法思考
所以这个叫做ml
big data最大的问题在于数据的无规则化
而无规则的数据要从中找出相似的是非常有挑战性的
这就需要用到数学和各种统计了
这个才是big data进而ml那些东东
当然这个有些偏理论化了，应用的话，可以直接用来预测
比如搜索引擎预测哪些文件是你需要的
但是预测这个，其实不是big data真正关心的
在data warehousing时代就有这些东西了
包括什么etl这些，其实都是数据仓库的东东
十年前就有了，跟现在搞的这些不完全是一回事
当然他们也说自己搞的是big data就是了
毕竟是buzz words嘛，写在resume上也好看点 |
|
r******s
发帖数: 602 | 4 我38岁回学校读了mis, 现在做ETL developer， 困难是有的，但是是可以克服的。我
建议先跟着网上的一些视频学一段时间，这样去上课的时候不会跟不上，压力不会太大
。比如lynda.com， 虽然youtube有免费的，但是还是系统的专业好。而且也不贵，才
29-49一个月。 |
|
i***z
发帖数: 31 | 5 有没有人能内推个informatica ETL相关的工作？谢谢。 |
|
g*****1
发帖数: 173 | 6 We be focusing on admin, but it is good to have ETL and coding experiences. |
|
m******g
发帖数: 100 | 7 ETL, data mining, big data |
|
h*******e
发帖数: 1377 | 8 看了天涯eatapple211大哥写得留学和湾区工作生活感觉写得很好，转过来给大家分享
一下。
如果eatapple211大哥看到了莫怪莫怪。
----------------------------------------------------------------------------
---
看了版上很多贴，好像没有人是介绍在美国做IT的生活，于是忽然很想写写自己在湾区
当程序员的生活，算是给大家介绍另一个方面的美国。
楼主是2007年来的美国读计算机的博士，2011年底拿到一个小公司的offer，以硕
士身份开始工作，同时保留学籍，做parttime学生，2013年1月第一次跳槽，同年5月博
士毕业， 2014年10月再次跳槽，然后在当前公司干到现在。三年多的时间，我能感受
到这个全球最有想法，生活节奏最快的地方欣欣向荣的活力。在这里有梦想，有努力，
有汗水， 有眼泪。这里不是天堂，因为这里的房价简直让人崩溃。这里又是最好的淘
金地，因为它有那么多一夜暴富的例子，我希望能够用我贫瘠的文笔向大家展示这里的
生活百态，或者，IT圈子里的生活百态。
首先，湾区的程序员基本是自称... 阅读全帖 |
|
|
|
S***P
发帖数: 194 | 11 如果告HR的话，是从hostile working environment/verbally abuse角度来说，还是
discrimination角度说好？
还是都要说到？
hostile working environment/verbally abuse是上周做这个ETL程序组会上对我和烙
印们说的，至少有人证。
本来这个项目持续1年多，最后两个星期把我加进来，指望我把这些做完也不现实啊。
再说了，他是老板，他应该掌握项目进度，进展缓慢，他应该责任更大吧？ |
|
S***P
发帖数: 194 | 12 谢谢回复。现在主流程跑通了，但是上层意见是要跟以前贵的ETL软件产生的数据一致。
这个程序把1个源数据处理，分别存到3个表中。这其中2个表已经达到要求了99%以上都
一致。但是第三个表数据量差别太大，只有54%一致。 |
|
l*y
发帖数: 21010 | 13 实在受不了无尽的production issue救火，on call。
学习各种层出不穷的framework，无非就是去适应某些人提出来的做事方式而已，研究
各种API轮子怎么用，整天忙于解决一些很琐碎无聊的问题。不断地加班，无尽的
crunch time，没有work life balance。
当初上学时候学的算法、数学完全派不上用场，感觉整个人变得消沉、无趣。
data science行业是一盏明灯，是我觉得唯一一个结合了数学和编程的需求较大的职业
方向。我昨天辞掉了我芝加哥年薪10万的java developer工作，开始全心全意转行学统
计、学r、学ETL，开始转行之路！ |
|
l******i
发帖数: 880 | 14 转完你发现你只能拿9w了
[在 ldy (大才001) 的大作中提到：]
:实在受不了无尽的production issue救火，on call。
:学习各种层出不穷的framework，无非就是去适应某些人提出来的做事方式而已，研究
:各种API轮子怎么用，整天忙于解决一些很琐碎无聊的问题。不断地加班，无尽的
:crunch time，没有work life balance。
:当初上学时候学的算法、数学完全派不上用场，感觉整个人变得消沉、无趣。
:data science行业是一盏明灯，是我觉得唯一一个结合了数学和编程的需求较大的职
业方向。我昨天辞掉了我芝加哥年薪10万的java developer工作，开始全心全意转行学
统计、学r、学ETL，开始转行之路！ |
|
p*********g
发帖数: 2998 | 15 ds也需要写代码, etl难道不要代码, ds高级的是machine learning, ai之类的
如果只是普通数据处理和分析, 和马工一点区别也没有, 一样无聊 |
|
|
E****h
发帖数: 41 | 17 https://angel.co/huami/jobs/125412-senior-big-data-and-machine-
engineer
(send resume to [email protected]/* */ , intern needed as well)
The big data team in Huami's US office, is looking for experienced engineer
with big data background to join the team.
Responsibilities:
Work closely with internal teams and partners, to identity key requirements,
and come with the best solution to address their needs.
Since team is small, you may work on different areas of data processing
pipeline, like ... 阅读全帖 |
|
w******0
发帖数: 467 | 18 Ohio 小公司招人，如果愿意，LZ 请跟我联系。 |
|
f******1
发帖数: 166 | 19 谢谢楼上信息，她还是想在纽约或者新泽西比较好。 |
|
f******1
发帖数: 166 | 20 另外，她是绿卡，马上入籍了，身份没问题。工作经验也有点，可惜没学历。 |
|
发帖数: 1 | 21
你们需要summer 的实习生吗？我学的是统计 会r和sql 经验不多但是学起来快 |
|
|
l***4
发帖数: 1788 | 23 您好！请问您的邮箱可以告诉我吗？统计运筹双硕士找工作，谢谢！ |
|
f*******1
发帖数: 59 | 24 做一下广告：一家以省政府牵头，有30亿启动资金的民营银行要在上海建立科技和业务
中心。银行以互联网为主，做支付，借贷，理财，境内外转账,etc。
诚征拥有海外多年互联网金融工作及学习的背景，熟悉海内外互联网金融发展趋势，具
有创新理念，致力于归国投生于科技金融事业的人士
公司氛围将秉承创业精神，股权激励，以技术团队为主，占到60%或以上。公司主管将
于四月中旬来美现场招聘。
有意者或者有认识的朋友感兴趣 请与[email protected]/* */联系， 谢谢
招聘岗位：
业务类
资产管理产品设计
工作职责：
1、负责资产项目的引入、流程设计、机构、产品及项目准入、协议签署、除外部渠道
产品引入以外的商务谈判等工作；
2、协助配合持续期管理室和综合财务室与业务的相关工作；
3、牵头完善资管产品部资产引入的有关制度、办法、流程；
工作要求：
1、国外重点院校本科及以上金融相关学历；
2、有资产管理产品设计相关经验5年以上，了解市场客户需求和市场产品动态，具有产
品创新精神；
3、有较强的沟通能力和执行力，有高度的责任心和团队协作精神，能承受较强的工作
压力；
4、热爱移动... 阅读全帖 |
|
E****h
发帖数: 41 | 25 多个职位open，全新项目和团队，有职业发展空间。prefer 3-5+以上工作经验。简历
请发送[email protected]/* */，谢谢大家！
更多职位：
https://angel.co/huami/jobs
-----------
Frontend Engineer
The big data team in Huami's US office, is looking for experienced front end
engineer to build state of art virtualization for data.
Responsibilities:
Build the first version of a customer facing web UI, support both mobile and
pc. Working closely with backend engineers to define the interface of
services, and UX to keep improving user experience.
Re... 阅读全帖 |
|
E****h
发帖数: 41 | 26 请斑竹们别再删帖了，我们收到一些简历，大都开始安排面试。既然是供需双方共赢的
事情，请版主们刀下留情。谢谢！
湾区公司招聘多个职位，简历请发送到[email protected]/* */
------------------------
Frontend Engineer
The big data team in Huami's US office, is looking for experienced front end
engineer to build state of art virtualization for data.
Responsibilities:
Build the first version of a customer facing web UI, support both mobile and
pc. Working closely with backend engineers to define the interface of
services, and UX to keep improving user experience.
Requir... 阅读全帖 |
|
t**s
发帖数: 1393 | 27 Location: downtown DC
Full time only. GC or Citizenship required. Market rate。No relocation
assistance.
可内推，有意者请从速。
Job title： PostgreSQL Database Administrator
Responsibilities:
1）Performs all PostgreSQL Database Administration related activities for
major projects independently with minimal supervision.
2）Works with the application development teams and guides them with best
coding practices. Assist developers with code review and design and
help troubleshoot code issues.
... 阅读全帖 |
|
w*******a
发帖数: 10 | 28 data engineer 搞搞ETL， 处理处理脏乱差数据，优化优化db性能？
有没有FUAG的data engineer介绍一下日常工作做什么？
Data engineer有没有机会可以有自己的思想，假设， 然后去处理数据，得出结论？
还是只能给data scientist打杂？
BTW
大妈我， 以前是读社科的， 就是思想，假设，处理数据，得出结论。。。。。
现在是pure software engineering.
总想着将来有一天， 能把这software engineering， 跟自己以前10多年的社科做研究
的经验，结合在一起。 有可能吗？
谢谢。
:-) |
|
s*******1
发帖数: 92 | 29 Maryland, DC, Virginia
面了几个junior,senior后台职位，都以项目经验为主，问些传统技术oracle，web
service, ETL, message queue, J2EE这些，大数据还是以hadoop， mapreduce，hive
为主， 用spark比例不高。
也写code，主要看看能不能写code，test case，别是骗子。题目难度跟本版讨论的没
法比，看大家风风火火的刷题，迷茫啊。 |
|
m**********e
发帖数: 112 | 30 If you are interested in applying for the open position listed below, please
send resume to [email protected]/* */ Please highlight SQL Database
Developer as your targeted job in your resume
Job title SQL Database Developer
Reports to Senior Database DeveloperTeam Lead
Job purpose
Analyzing, developing SSIS projects, custom reports and work closely with
the team on any SQL issues.
Duties and responsibilities
• Develop SSIS projects to handle ETL, transmission, encryption,
an... 阅读全帖 |
|
i***0
发帖数: 8469 | 31 联系我 [email protected]/* */
是在美国的田纳西，不要看错了！！！
这个地方招收人 Clayton Homes @ Maryville, TN. 下面是几个一直招不到人的
openings, 有兴趣短信给我。
- NET Developers (Many openings – Biggest need!!)
- Business Analyst (Two openings)
- ETL Developer/Business Systems Analyst
- Quality Assurance Analyst (Multiple openings)
- Security Engineer
- RPG Programmers (Multiple Openings)
- Enterprise Architects (Multiple Disciplines)
- Iseries/DB2 DBA
- ... 阅读全帖 |
|
发帖数: 1 | 32 同意你的选择！
SQL server 和 ASP.net在很多公司用的，新公司很少用，做SQL的东西还是比较
transferable的，at least 以后做data analyst类的 |
|
x****y
发帖数: 252 | 33 感兴趣。
可以介绍一下你们的背景吗？
I am a senior software engineer, focusing on back-end, and have hands-on
experience on UI and database. I also worked on web application, data
warehousing/ETL/OLAP application, and security application.
Thanks,
Rui |
|
e***e
发帖数: 168 | 34 The Language/Usability Team at GraphSQL focuses on innovative compiler
algorithms and usability tools to close the gap between human reasoning/
intuition and activating graph data. An ideal candidate is passionate about
delivering broad solutions through forward-thinking architecture and
implementing high-quality compiler products with the simplest and most
intuitive user interaction design in mind.
Responsibilities:
Design and implement domain-specific query language engine.
Perform unit and... 阅读全帖 |
|
|
发帖数: 1 | 36 本州的，离得不远，非it公司
上周五电面的，群面，有c-level和managers，普通员工，team不大，感觉还不错，
portfolio啥的他们应该很满意，除了问我ETL 和 ASP.Net我说那是10多年前用过，但
是还可以很快pickup
当天状态变了under consideration, 更新日期是9/30，感谢信也发了
今天10/06, 看到职位更新了，加了些内容，linkedin的职位也重新post了，我的申请
状态还是under consideration,更新日期是10/06
应该是作为备胎，再找些对比？大神，我要不要联系下，强调下他们新增的内容我可以
很快学？还是等？ |
|
x***4
发帖数: 1815 | 37 我觉得现在的跟data science挂上钩的主要是这几种：
1）做 machine learning, deep learning。实现新算法或者深度customize现有的算法
。这种对数学和编程的要求都很高，基本都是phd（大部分cs，小部分统计）。钱肯定
多，bar也更高。但是坑不多，小公司短平快出活的地方一般都不会搞这些。
2）套现有的package（scikit learn，各种r 或者spark package），针对公司的数据
做简单model的。这种要对package熟悉。需要的编程主要是怎样抓数据，工作中不太需
要cs的算法。cs ms或者动手能力强的统计ms也可以干。小公司可能养2-3这样的人，但
是机会肯定比传统码农少。
3）做KPI，分析ab test数据。这种基本不编程，用的工具主要是sql和tableau之类的
。我觉得找个本科生训练一下基本也会干。而且这种对买嘴皮的能力要求比较高，因为
经常要对KPI的变化或者ab test的结果编故事。老中干这个不容易，很有可能后面进来
的小白很快就变成你老板。
还有就是data engineering这一块，搞inf... 阅读全帖 |
|
n*****3
发帖数: 1584 | 38 actually end2end solution for DS is NOT so hard now.
after protype the model, just pipe it with some other ETL tools, spark/spark
streaming, kafaka...
then done.
The key is to have good habit of programming style and take advantage of the
tool like docker, CI tools..
Nowdays, get a system done is like play legos, just pipe them together.
there will be a lot
of "KEN", but with google search, not that bad.
database
DS |
|
发帖数: 1 | 39 招聘有经验 MS BI developer and .Net Web Developer 各一名。
工作地点：Sacramento,CA
(1)MS BI developer Qualification:
Minimum 5 years’ design and coding experience using SQL Server version
2008 or higher.
Minimum 5 years’ data modeling and database design.
Minimum 2 years’ query design experience using SQL Server Reporting
Services(SSRS).
Minimum 5 years’ data warehouse, dimensional schema creation and
reporting
Minimum 3 years’ ETL experience
Minimum 3 years’ data security and data cat... 阅读全帖 |
|
R*********9
发帖数: 342 | 40 Please send your resume to [email protected]/* */ I will forward your resume.
Company: Expedia (Egencia)
Location: Bellevue, WA
Job title: Sr. BI Developer
Contract duration: 6+ months
Within the Global Business Intelligence division of Egencia, we are
developing BI reporting solutions that will transform two regional service
reporting teams into a single global reporting product for Egencia Global
Customer Operations. Your work/contributions have direct and enduring
impacts on the Egencia... 阅读全帖 |
|
f***8
发帖数: 510 | 41 PACKAGE如何最重要吧。绝大多数马工都是APP DEVELOPER（后端，前端，数据PIPELINE
，ETL，等等），没啥独门的技术，对绝大多数老中马工来说，除非你自己好学，任何
IT公司可以参与（不是听听）有核心技术又VISIBLILITY高的项目的，都是烙印们的专
利。PACKAGE，公司是否稳定，W／L怎样，老板是谁，这几个综合一下就可以了。 |
|
发帖数: 1 | 42 您好，我是Elaine
我是猎头公司的，以下列出的职位您或者您周围正在找工作的朋友或许会感兴趣。
推荐候选人，成功入职者，可获得职位的悬赏金， 请关注微信公众号：欧美人才网
Position: Data Analyst
基本信息
技能要求： SQL 行业类别：
Internet Company
雇佣形式： Contract 工作地点：
美国 California Palo Alto
职位开始日期： Open 简历投递日期：
Open
持续时间： 1年-2年 招聘人数： 1人
薪资待遇： 面议- -20-30$/Hour- -美元 待遇说明： 长期职位
招聘状态： 进行中 ... 阅读全帖 |
|
W****T
发帖数: 78 | 43 【 以下文字转载自 Quant 讨论区 】
发信人: WCHEST (ByeBye), 信区: Quant
标 题: Morgan Stanley上海Business Analyst 职位，有必要面吗
发信站: BBS 未名空间站 (Fri Feb 17 20:28:17 2017, 美东)
不知发这里对不对
因为一些原因，需要回上海暂时待一段时间。猎头联系的我，是大摩Institutional
Securities Technology division下一个BA职位，support the global
infrastructure for all kinds of transaction system。
我本科虽是金融，但是所有的工作经验是偏IT的数据库ETL工作，跟金融基本不沾边。
我本人其实对大摩也没什么了解，只知道是投行，离我遥不可及。如果是其他公司BA的
职位，我可能就直接忽略了，但是大摩实在是觉得高大上，不知回去做两年，然后再回
美国（有卡），不知道今后对找金融一方面的工作会有多大帮助。
不知版上是否有人对这一块部门有所了解的？有什么建议吗？跟hiring manag... 阅读全帖 |
|
W****T
发帖数: 78 | 44 最近要准备回魔都了，4年半美国工作经验，一个硕士学位（跟计算机无关），也算是
半路出家，做的主要是SQL Server的ETL/reporting, 外加些salesforce admin的活，
跟IT其实是只能沾点边
在中国的求职网站投了些感觉跟我背景，现在做的都满符合的职位，居然连个phone
interview都没有！
想到我每天处理各种数据，也学过统计分析，想找一些数据分析的工作，但是都是要会
算法，Machine learning，会建模，会海量数据挖掘，我也就好奇，20，30万rmb左右
的年薪，真的能找到这样的人吗
现在只能安慰自己背景太弱，还是个单身的女的，中国满大街都能找到跟我差不多背景
的男人，所以人家HR不屑电话面试一个还在美国的人。
好忧虑，好烦躁，希望回到中国以后，不会像现在那么惨，至少能有些个面试 |
|
W****T
发帖数: 78 | 45 最近要准备回魔都了，4年半美国工作经验，一个硕士学位（跟计算机无关），也算是
半路出家，做的主要是SQL Server的ETL/reporting, 外加些salesforce admin的活，
跟IT其实是只能沾点边
在中国的求职网站投了些感觉跟我背景，现在做的都满符合的职位，居然连个phone
interview都没有！
想到我每天处理各种数据，也学过统计分析，想找一些数据分析的工作，但是都是要会
算法，Machine learning，会建模，会海量数据挖掘，我也就好奇，20，30万rmb左右
的年薪，真的能找到这样的人吗
现在只能安慰自己背景太弱，还是个单身的女的，中国满大街都能找到跟我差不多背景
的男人，所以人家HR不屑电话面试一个还在美国的人。
好忧虑，好烦躁，希望回到中国以后，不会像现在那么惨，至少能有些个面试 |
|
s********e
发帖数: 7 | 46 版上很少有data analyst, product analyst, business analyst的职位，现发一个我
们组最近招的职位：https://www.fitbit.com/careers/search#jobs/587723。有两个
available position。
职位在Data Science & Engineering组下。公司最近有很多新产品under development
，对data的需求增长很快。Team增长很快，Manager希望年底能double size。 Manager
很有vision，整个team都一直在keep learning new things and technologies。
欢迎了解product metrics，有data visualization和ETL相关经验的申请。如有兴趣，
可联系: [email protected]/* */
也可提供其他职位内推(请附上简历，一段自我介绍，要申请的职位－限一个). 如果之
前已找过别人refer, system只认第一个，所以也不需要来找我啦～ |
|
a*****8
发帖数: 26 | 47 Contact me at [email protected] if interested in.
This position is in the same group as me.
Thanks
The data engineer will work within the Data Management Platform (DMP) team
and is responsible for the development and maintenance of data from
Endurance, Constant Contact and third party sources in both batch and near
real time to analytic systems and customer touch point systems such as
Genesys and Salesforce. The DMP is built on the Hortonworks Data Platform
distribution of the hadoop file ... 阅读全帖 |
|
d****n
发帖数: 12461 | 48 这块大的框架快做完了，细节有不少。框架无非是kappa架构，老马车storm, samza，
新马车apex, beam，flink，heron和kafka streams，其实大同小异已经开始争夺niche
市场了。单从Linkedin来说恐怕业务比较单一没太多新东西，单纯做流处理和etl已经
没啥好做了。但是微软和google这些带人工智能的我觉得这只是第一步，所以能做的还
不少。
当然学这些要比说自己做大数据的要好。 |
|
n*******s
发帖数: 17267 | 49 其实狗，脸熟，微软，百度这种级别的公司完全可以把各种题刷入库，其它各种公司只
需要知道怎么用就行，哥老了，就是见到金山都懒得挪腿，你们谁有干劲，不妨圈钱一
试，其实TALEND这家公司走势还可以，不过他家只搞ETL和生成 java code |
|
m********u
发帖数: 3942 | 50 地点Redmond，感兴趣可以站内或者邮件 [email protected]
We are looking for a strong engineer who is passionate about working on Data
and is expected to:
• Design systems to store and process data in a way that can be used
by applications, people and BI systems using Azure Managed Services.
• Make architectural and technical decisions; architect the Data v2
platform.
• Implement the data transformation jobs using latest Azure
technologies.
• Innovate on tools and processes that simpl... 阅读全帖 |
|
