我们在《Tachyon 0.7.0伪分布式集群安装与测试》文章中介绍了如何搭建伪分布式Tachyon集群.从官方文档得知,Spark 1.4.x和Tachyon 0.6.4版本兼容,而最新版的Tachyon 0.7.1和Spark 1.5.x兼容,目前最新版的Spark为1.4.1,所以下面的操作步骤全部是基于Tachyon 0.6.4平台的,Tachyon 0.6.4的搭建步骤和Tachyon 0.7.0类似. 废话不多说,开始介绍吧.我们先在HDFS上传一个文件,比如iteblog.txt,存放目录为/data:1[iteblog@www.iteblog.com hadoop]$ bin/hadoop fs -put iteblog.txt /data启动Spark-shell1[iteblog@www.iteblog.com spark]$ bin/spark-shell这时候我们可以通过Tachyon获取iteblog.txt文件,如下:
在Tachyon运行Spark应用程序 – 过往记忆
