Spark

  Spark是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架，Spark基于map reduce算法实现的分布式计算， 拥有Hadoop MapReduce所具有的优点；但不同于MapReduce的是Job中间输出和结果可以保存在内存中，从而不再需要读写HDFS， 因此Spark能更 好地适用于数据挖掘与机器学习等需要迭代的map reduce的算法

4
投票
13
已解决
21788
浏览

超级菜鸟怎么学习数据分析？数据挖掘、工具、技术、所需知识点等？

2018-01-08 14:44 提问
0
投票
1
已解决
3687
浏览

Spark中的narrow/wide dependency如何理解，有什么作用?

2015-11-03 21:37 提问
0
投票
1
回答
3523
浏览

有谁实现过用spark 增量抓取mysql数据的吗 同步到hdfs或者hive

2015-11-01 15:53 提问
0
投票
0
回答
1694
浏览

spark集群中的节点可以只处理自身独立数据库里的数据，然后汇总吗？

2015-10-27 22:15 提问
0
投票
1
回答
11757
浏览

哪位大神做过用Spark合并多个parquet文件，求个思路

2015-10-24 15:43 提问
0
投票
1
已解决
3320
浏览

问个问题， Driver 我应该怎么理解呢？ spark master 和 driver 有着什么关系？

2015-10-21 13:31 提问
0
投票
1
已解决
2122
浏览

各位大神 spark streaming 如何向kafka的zookeeper发送信息？

2015-10-21 13:13 提问

相关话题

887 人关注

最佳回复者

改版

反馈