由买买提看人间百态

boards

本页内容为未名空间相应帖子的节选和存档,一周内的贴子最多显示50字,超过一周显示500字 访问原贴
Database版 - 讨论,(Big)Data Engineer到底是个什么职位
相关主题
有人了解hadoop这个玩意嘛, 和传统的数据库到底integration point在哪里?SQL下如何转移储存
从传统数据库转到big data, hadoop怎么样?Is there anyone familiar with data warehouse?
如何入Big data 的门怎么LOAD 大量EXCEL或者CVS DATA?
MS dynamics CRM + SSRSOracle SQL Developer Data Modeler is Now Free
问一下SAS SQL在大数据方面的处理求教:没有CS背景,可以学Data Mining吗? (转载)
Tech Session: How to start learning Hadoopmysql DB - 怎么能很容易地update data?
FB招聘data/BI engineer contractor求data analysis intern工作机会-湾区
partition 表聊Data Warehouse 1. Star Schema (转载)
相关话题的讨论汇总
话题: data话题: engineer话题: big话题: python话题: experience
进入Database版参与讨论
1 (共1页)
x****o
发帖数: 142
1
讨论下, 这个算说的靠谱吗?
----------------------------------------------
(Big)Data Engineer(更偏计算机应用)是一个最近比较流行的职位, 其有部分类
似于但又不完全类同于Data Scientist (更偏统计模型)也不同于以往BI Engineer/
developer。
一般市场对Data Engineer的要求是,
1, Good work experience in using SQL and databases in a business
environment.
熟知数据库技术
2, Strong experience in Data Warehouse and Business Intelligence
application development
深刻理解数据仓库/商务智能应用开发
3, Experience with scripting languages, i.e. Perl, Python etc. preferred
掌握一门语言, 一般推荐学习Python
4, Evaluate and implement various big-data technologies and solutions (Hive
/EMR, Tez, Spark) to optimize processing of extremely large datasets in an
accurate and timely fashion.
大数据的知识(Spark, HIVE, PIG…)
5, Other soft skills
简单归纳, 从以上要求来看, Data Engineer其实就是一个传统的数据库/BI开发人员
+Python+Big Data
原文, http://tinyurl.com/gwjvau9/ct-videos/data-engineer/
L*******t
发帖数: 782
2
Data Engineer就是写SQL。。

【在 x****o 的大作中提到】
: 讨论下, 这个算说的靠谱吗?
: ----------------------------------------------
: (Big)Data Engineer(更偏计算机应用)是一个最近比较流行的职位, 其有部分类
: 似于但又不完全类同于Data Scientist (更偏统计模型)也不同于以往BI Engineer/
: developer。
: 一般市场对Data Engineer的要求是,
: 1, Good work experience in using SQL and databases in a business
: environment.
: 熟知数据库技术
: 2, Strong experience in Data Warehouse and Business Intelligence

x****o
发帖数: 142
3
感觉比写SQL的要求高多了, 有人做这个的吗?可以说说下面课程算靠谱吗?
http://www.01training.com/slider/data_engineer_feb/
z****r
发帖数: 16
4
嘛夹左右互博,实在厉害。
1 (共1页)
进入Database版参与讨论
相关主题
聊Data Warehouse 1. Star Schema (转载)问一下SAS SQL在大数据方面的处理
data analyst和 database administration有什么区别? (转载)Tech Session: How to start learning Hadoop
Attention-Fulltime software Engineer roles- Amazon, Seattle (转载)FB招聘data/BI engineer contractor
Looking for SQL Server Database Engineers in Austin TXpartition 表
有人了解hadoop这个玩意嘛, 和传统的数据库到底integration point在哪里?SQL下如何转移储存
从传统数据库转到big data, hadoop怎么样?Is there anyone familiar with data warehouse?
如何入Big data 的门怎么LOAD 大量EXCEL或者CVS DATA?
MS dynamics CRM + SSRSOracle SQL Developer Data Modeler is Now Free
相关话题的讨论汇总
话题: data话题: engineer话题: big话题: python话题: experience