Spark

  Spark是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架，Spark基于map reduce算法实现的分布式计算， 拥有Hadoop MapReduce所具有的优点；但不同于MapReduce的是Job中间输出和结果可以保存在内存中，从而不再需要读写HDFS， 因此Spark能更 好地适用于数据挖掘与机器学习等需要迭代的map reduce的算法

4
投票
13
已解决
21788
浏览

超级菜鸟怎么学习数据分析？数据挖掘、工具、技术、所需知识点等？

2018-01-08 14:44 提问
0
投票
0
回答
1043
浏览

请问下 有人知道怎么在spark里的kmeans中 自己设置初始种子点吗？

2016-05-19 09:59 提问
0
投票
1
回答
1278
浏览

谁给解释下rom pyspark import SparkContext 为什么我在pyspark目录下找不到SparkContext模块呢

2016-05-15 19:41 提问
0
投票
1
回答
5051
浏览

spark怎样读取本地文件?

2016-05-11 17:04 提问
0
投票
1
已解决
1110
浏览

spark streaming如何将结果写到指定目录下的txt文本吗

2016-05-12 09:34 提问
0
投票
0
回答
994
浏览

请问一下 spark处理的数据 前台怎么显示 用jsp吗

2016-05-12 09:26 提问
0
投票
0
回答
1031
浏览

Spark中partition的具体大小可否计算?

2016-05-11 16:56 提问
0
投票
1
已解决
3205
浏览

hive用tez, spark引擎吗?对比过mr的执行结果吗?

2016-05-06 22:33 提问
0
投票
1
已解决
2963
浏览

spark java里 怎么把生成的sparse vector 加到dataframe作为新的一列？ 谁知道的啊。。

2016-04-29 14:11 提问
0
投票
1
已解决
2279
浏览

问一下有什么命令行可以让sparksql运行时如何不显示那些日志信息？

2016-05-01 18:00 提问
0
投票
0
回答
1327
浏览

spark 如何将一个map传入到rdd中,怎么找不到相应的api

2016-04-26 23:08 提问
0
投票
2
已解决
2087
浏览

请问R语言能不能用Python代替呢，还有，为什么要吐嘈spark呢

2016-04-21 18:52 提问
0
投票
0
回答
2352
浏览

spark 对文件每一列求和？如何实现

2016-04-09 15:03 提问
0
投票
1
已解决
2201
浏览

大数据技术中的Hadoop和Spark计算是否适合实现OLTP系统的业务数据分析?

2016-03-21 14:17 提问
0
投票
0
回答
1074
浏览

基于spark环境学习GraphX，有没有好一点的安排计划？

2016-03-22 09:55 提问
0
投票
0
回答
1311
浏览

聚类分析代码在本地调试正常，运行在spark cluster模式，运行结果出错？

2016-03-21 18:10 提问

相关话题

887 人关注

最佳回复者

改版

反馈