本帖最后由 小疯纸一枚 于 2014-3-20 00:41 编辑
Spark 学习笔记和总结 , 分享给大家, 不要问我是谁,叫我红领巾!!
(1) spark 论文:
(原文)Spark Cluster Computing withWorking Sets
Spark Cluster Computing withWorking Sets.pdf
(205.21 KB, 下载次数: 5)
(学渣只能译一遍才能看懂)活跃数据集上的集群运算
Spark Cluster Computing withWorking Sets.doc
(44 KB, 下载次数: 8)
(2)Spark 安装(参考振坤师兄文档,因为不是我写的不好拿来给大家下载)
(3)调试Spark 的eclipse环境配置
eclipse 调试spark环境配置.doc
(612 KB, 下载次数: 118)
这样就可以在eclipse 上编写和调试scala/spark 程序了
(4)Spark 案例详解,每个例子都有完整的代码、解析、运行结果
Spark 案例分析.doc
(739.5 KB, 下载次数: 10)
包含五个例子 1、文件的读取和过滤
2、WordCoutn 统计单词
3、TopK计算词频
4、SparkJoin连接数据
5、逻辑回归
下面是SparkJoin连接数据程序所使用到的数据集:
data.rar
(5.6 MB, 下载次数: 2)
ratings.dat , movies.dat, users.dat
(5) 市面上卖的超级贵的几十刀的最新的Spark 教程
Fast Data Processing with Spark
Fast Data Processing with Spark 阅读笔记 (还在酝酿中)
|