access自动化数据转移到hive上，大家看看这个过程可行不 - DataSciences版

本页内容为未名空间相应帖子的节选和存档，一周内的贴子最多显示50字，超过一周显示500字访问原贴

DataSciences版 - access自动化数据转移到hive上，大家看看这个过程可行不

相关主题
● question about using Hive parameter	● 你们用的都是pig吗？
● 征集版标	● 初入data science的困惑
● 现在的大数据技术的价值和功用有些被夸大了	● 如何学习Hadoop?
● 请问如何用JDBC连接R和Hive (转载)	● 求助：一个用Hive提取feature的问题
● 三星samsung创新部门招大数据工程师 (转载)	● hive table 转换成csv文件丢数据是什么情况？
● Impala v Hive	● Re: MapR Technologies continue hiring a lot of positions (转载)
● 请问大家有没有直接用java全程写mapreduce的程序的？	● data scientist的五个方面
● big set intersection in pig	● 贴个工作

相关话题的讨论汇总
话题: hive话题: mdb话题: csv话题: 脚本话题: 文件

进入DataSciences版参与讨论

(共1页)

t*********u
发帖数: 26311

1. window 远程上传 mdb到linux上
2.window 远程登录linux，自动运行shell
2.1 用我自己写的jar文件分析mdb的结构，生成hive 脚本用于生成对应的空table

2.2 同时上面的jar文件把对应的数据打包成csv文件
2.3 激活hive脚本，导入csv到table
2.4 删除脚本和csv
3. 远程删除mdb文件
以上应该可以用window batch处理，然后用task scheduler运行

(共1页)

进入DataSciences版参与讨论

相关主题
● 贴个工作	● 三星samsung创新部门招大数据工程师 (转载)
● data scientist position	● Impala v Hive
● 求Google 的 Data Science 有关的位置内推 (转载)	● 请问大家有没有直接用java全程写mapreduce的程序的？
● data scientist对sql要求高吗	● big set intersection in pig
● question about using Hive parameter	● 你们用的都是pig吗？
● 征集版标	● 初入data science的困惑
● 现在的大数据技术的价值和功用有些被夸大了	● 如何学习Hadoop?
● 请问如何用JDBC连接R和Hive (转载)	● 求助：一个用Hive提取feature的问题

相关话题的讨论汇总
话题: hive话题: mdb话题: csv话题: 脚本话题: 文件

#	版面	帖数(主题数)
-	全站	4871 (796)
1	Military	3777 (569)
2	Stock	341 (51)
3	Joke	117 (17)
4	History	116 (3)
5	Automobile	100 (9)
6	USANews	55 (9)
7	Midlife	45 (1)
8	Headline	41 (41)
9	Dreamer	33 (13)
10	FleaMarket	32 (20)
11	Living	30 (7)

boards

未名新帖统计// 7月16日

历史上的今天