开发环境总体版本信息如下： 1、Linux：CentOS 6.8 2、Java 版本：jdk-8u172-li…

Hadoop 在整个大数据技术体系中占有至关重要的地位，是大数据技术的基础和敲门砖，对 Hadoop 基础知识…

对于 Spark 而言，如果大家只是想摸一下、熟悉熟悉而已，可以搭建单机的 Spark，大致步骤如下（我使用 …

1. 场景 在搭建好 Hadoop+Spark 环境后，现准备在此环境上提交简单的任务到 Spark 进行计算…

0. 抱怨与其他（此部分与标题没有太多联系）： 首先一点想说的是版本问题，为什么标题我会写清楚版本号呢！原因就…

0. 序 先吐槽一下网上旧版本的 Zeppelin 和 R 的安装，让我折腾了几个小时。 不过最终还是调通了也…

一、运行环境 CentOS 7.2 Hadoop 2.7 Hive 2.2.0 Spark 2.0.0 JDK…

1. 使用 $SPARK_HOME/sbin/ 下的 pyspark 启动时，报错 Traceback (mo…

spark2.1 出来了，想玩玩就搭了个原生的 apache 集群，但在 standalone 模式下没有任何…

Spark 基本工作流程 相关术语解释 Spark 应用程序相关的几个术语： Worker：集群中任何可以运行…