牟瑞

大数据 Hadoop 讲师 Hadoop入门课程地址:http://www.hellobi.com/course/39 有架构师,技术总监,CTO的职位请联系我!

始于: 2013-06-09

发私信

1967

总声望

308

次被推荐

16

粉丝

他的回答
排序:

0
投票

大家好,请问我在etc/profile下配置了java_home,怎么做能在hadoop-env.sh下不需要配java_home?我只想使用一个全局的java_home

这个貌似不行,我很早很早的时候也尝试过寻找类似的答案,没有找到。后来习惯了,一个复制粘贴的操作,也用不了多长时间。。

2015-10-12 18:43 回复了该问题
1
投票

Hive表中的字段key数据类型为struct<f1:string, f2:string>,那么该字段的数据在文件中是以什么格式存放的呢?

针对你这个问题,特意写了一篇博客,地址如下: [url]http://www.flybi.net/blog/marey_marey111/2063[/url] ...

2015-10-12 14:02 回复了该问题
1
投票

kettle上怎么实现ETL中实现的效果

这个是控件内传递参数么?我下面的图能解决你的问题么? [attach]7900[/attach]  

2015-10-12 13:53 回复了该问题
2
投票

约 1亿条记录, 每条1k左右,key =>value形式,用于前台查询,选择什么作为存储方案比较合适呢,要求效率比较高并且相对稳定可靠?

简单的说下几种方案: 1.分库分表,读写分离: 将1亿条的数据按照某种规则拆开,存入多个不同的数据库中,读取的时候,根据Key来解析规则,直接去存放数据的sla...

2015-10-12 09:41 回复了该问题
0
投票

请问一下在ETL里边的设置参数 在kettle中是如何设置参数的呢

三种设置方式: 1、 通过命令行 -D 参数。 2、属性文件 kettle.property 中设置, 该属性文件位于 ${user.home}.kettle ...

2015-10-12 09:32 回复了该问题
1
投票

新人请教各位老师,Oracle如何将查询的结果放入一张自定义表中并再查询数据

1.INSERT INTO SELECT语句 语句形式为:Insert into Table2(field1,field2,...) select value1...

2015-10-11 13:29 回复了该问题
1
投票

问下我有多个数据库都需要抽数据,每个数据的表结构都是一样的,数据库的数量也可能增加,我能不能给kettle一个数据库连接的配置文件,让kettle从上往下读取数据库信息列表挨个抽数据呢

在这里提供两种思路: 思路1:利用脚本解析配置文件,然后将数据库的连接配置,作为参数传递给kettle作业,然后批量执行 [code]pan.sh -fil...

2015-10-11 12:17 回复了该问题
1
投票

请教大家一个问题。KETTLE能不能做到不用写SQL。直接通过选择字段钩选来配置交换任务

kettle作为一个开源的ETL工具,应用十分广泛,经过开源社区的不断努力,kettle支持了非常多的数据源。在这些数据源中,有文本,数据仓库,非结构化数据,结...

2015-10-11 12:02 回复了该问题
1
投票

谁知道ETL里边的sql执行和sql输入 在kettle里边是那个步骤啊 请大神赐教啊

1.在作业(Job)里面的SQL执行,如下图所示: [attach]7862[/attach] 2.在转换(Transform)中有SQL执行和SQL输...

2015-10-11 11:53 回复了该问题
3
投票

怎么实现一台服务器上的MySQL数据转储到另一个hadoop集群中的hbase中?

1.可以通过自己写代码的形式导入 2.可以借助Sqoop来导入,如下 [code]sqoop import --connect jdbc:mysql://mys...

2015-10-11 09:23 回复了该问题
1
投票

请问几个表通过关联汇总插入到汇总表 通过kettle可以实现吗? 有没有例子?

如果你的源表和目标表再一个DB Server的话,建议直接select into的方式。

2015-10-10 13:29 回复了该问题
1
投票

kettle调度

可以使用crontab的服务 或者自己写定时任务

2015-10-08 11:41 回复了该问题
0
投票

hive是怎么把存在MySQL下的元数据组合起来的?

你想要什么样的组合?可否详细描述下。

2015-10-08 11:39 回复了该问题
1
投票

在以后的生活中,统计学和大数据会成为怎样的一种相连?

来看看这篇文章,希望对你有所帮助 大数据时代 传统统计学依然是数据分析的灵魂:http://www.flybi.net/blog/marey_marey111/...

2015-10-08 10:41 回复了该问题

改版

反馈