Ryuichi's Arsenal

Coding Spark 2.4 Program Using Scala Eclipse IDE。

CDH 5.16、oozie、spark2 Integration、SparkMain Class not found。

Transfering a file between HDFS and SFTP without copying it to local disk。

org.apache.commons.compress.utils.IOUtils。

Coding KMeans Clustering Using Python with Spark。

RDD Union、SubstractByKey。

Coding KMeans Clustering Using Scala with Spark。

groupByKey、mapValues、flatMap、sortBy。

Coding Spark Program Using Scala Eclipse IDE。