博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
玩玩SPARK
阅读量:7007 次
发布时间:2019-06-28

本文共 288 字,大约阅读时间需要 1 分钟。

没有SCALA的东东,玩不起哈。

./spark-shell

从文件生成一个DRIVER?

val logFile = sc.textFile("hdfs://192.168.14.51:9000/usr/root/spark-root-org.apache.spark.deploy.master.Master-1-hs51.out")

看看这个东东里包含条数据?

logFile.count

来来来,作个过滤,再显示有多少条:

var theCount = logFile.filter(line=>line.contains("The"))

theCount.count

转载地址:http://zdjtl.baihongyu.com/

你可能感兴趣的文章