牟瑞

大数据 Hadoop 讲师 Hadoop入门课程地址:http://www.hellobi.com/course/39 有架构师,技术总监,CTO的职位请联系我!

始于: 2013-06-09

发私信

1967

总声望

308

次被推荐

16

粉丝

他的回答
排序:

0
投票

kafka topic数据如何写入hdfs?

主要还是看你的业务场景,如果需要实时计算,可以通过spark读取kafka-〉计算指标-〉写入HDFS,这个官方是有例子的。 如果不需要实时计算,可以通过定时任...

2015-11-20 09:16 回复了该问题
2
投票

kettle怎么在Linux上面开发?使用 VNC 连接到Linux图形界面开发,还是说在Windows上面开发了,再在Linux上面部署 ?

都可以的。你可以使用windows开发,注意下windows与linux的区别就可以:比如,路径,默认文件编码等等。 如果你的部属服务器是centos,你也可以...

2015-11-18 09:52 回复了该问题
0
投票

Kettle可以直接调用API吗??

是可以的,之前子健老师的课程里面有提到。但是我个人推荐的是使用Python,直接使用Python去请求api.然后解析XML文件,毕竟快速解析还是重要的业务实现...

2015-11-18 09:50 回复了该问题
1
投票

kettle使用mongo同步数据异常问题

这个问题一般产生有两种情况,一种是在分片集群的时候导致某些数据丢失,第二种是mongodb里面存的字段内容的编码格式与kettle的不兼容,由于Kettle是J...

2015-11-18 09:49 回复了该问题
0
投票

python后端 和javascript 前端的数据交互处理是怎样实现的?

推荐Python的web端框架tornado,flask,django等。我个人经常使用tornado,Python开发web程序,与其他的语言没有什么区别。都...

2015-11-14 10:10 回复了该问题
0
投票

在Windows上运行Hadoop,配置好java,cygwin,hadoop之后,要怎么做?急!

请转告你们公司。。hadoop是在linux上玩的,不是在windows上玩的,如果想在windows上玩,请安装SQLServer,几千万的数据量没多大,SQ...

2015-11-13 10:01 回复了该问题
0
投票

各位大神,请教一个问题,我在分布式启动的时候,namenode启动正常了,但是datanode,有一些jps有显示,有一些没有显示。这是咋回事

datanode节点的登录用户不同,权限就不同,使用没有权限的用户输入jps就会显示不出来

2015-11-11 09:51 回复了该问题
0
投票

hiveserver启动报错

这个配置文件是不是你在windows上编辑的,然后上传到linux服务器上的?两者的编码格式不一样,别直接上传。把文本内容复制进去就可以了。

2015-11-10 21:59 回复了该问题
0
投票

问个问题 kettle用命令行传参数 /param: **=** ,在kjb里怎么设置才能接受这个参数

参看下我的博客:kettle的参数配置:http://www.flybi.net/blog/marey_marey111/2062

2015-11-10 10:47 回复了该问题
1
投票

如何给一个博客程序设计mongodb数据库?

这要看你的博客的规模,如果规模很小,那mongodb的一个collection就可以。既然使用了nosql,设计方式肯定与mysql是有区别的。 评论,标签,所...

2015-11-10 10:38 回复了该问题
2
投票

Cloudera manager为什么用python写agent而不用java?

python爱好者的名言:人生苦短,我用Python 我之前写过的一个博客,我转到了天善的博客中:我们为什么用Python [url]http://www.fl...

2015-11-09 10:37 回复了该问题
0
投票

学习Hadoop scala spark等对从事安全工作用处大么?

首先:现在的大数据是一个趋势。现在各样各业都在讨论大数据,即使各个行业的水平,能力等参差不齐。 第二:个人不是很了解安全行业,也不清楚你以后想从事的安全工作是什...

2015-11-09 10:25 回复了该问题
2
投票

Kettle解析XML文件能否输入文件名

可以参考下 Kettle的参数配置:[url]http://www.flybi.net/blog/marey_marey111/2062[/url] 不过如果有...

2015-11-08 11:01 回复了该问题
0
投票

hive中bigint和string比较join,我explain发现他们都转换成double类型。?

为啥不能统一一下类型呢?没有遇到过这种情况。。如果都是bigint不可以么?

2015-11-06 10:02 回复了该问题

改版

反馈