Spark
程序员文章站
2022-11-21 10:24:03
1 部署 需要软件包 Jdk Python2.7 Scala2.10.4 Spark1.0.1 Hadoop stable version 配置依赖 org.apache.spark spark-core_2.10 1.0.1 .org.apache.hadoop hadoop-client 2核心 ......
1 部署
需要软件包 jdk python2.7 scala2.10.4 spark1.0.1 hadoop stable version
配置依赖
org.apache.spark spark-core_2.10 1.0.1
.org.apache.hadoop hadoop-client
2核心概念
rdd 只读可分区的分布式数据集
推荐阅读
-
大数据推荐系统算法代码全接触（企业内训，现场实录，机器学习算法+Spark实现） 推荐系统
-
Spark三种属性配置方式详解
-
Spark-Unit1-spark概述与安装部署
-
spark streaming中维护kafka偏移量到外部介质
-
分享一个.NET平台开源免费跨平台的大数据分析框架.NET for Apache Spark
-
大数据学习系列之八----- Hadoop、Spark、HBase、Hive搭建环境遇到的错误以及解决方法
-
Yarn上运行spark-1.6.0_PHP教程
-
Spark整合Kafka小项目
-
Spark整合Kafka小项目
-
Spark MemoryManager内存模型