1. 安装 jdk 安装环境：CentOS-7.0.1708安装方式：源码安装 软件：jdk-6u45-lin…

Hadoop 在整个大数据技术体系中占有至关重要的地位，是大数据技术的基础和敲门砖，对 Hadoop 基础知识…

前言 本篇演示如何使用 AWS EC2 云服务搭建集群。当然在只有一台计算机的情况下搭建完全分布式集群，还有另…

Spark 简介 官网地址：http://spark.apache.org/ Apache Spark™是用于…

前言 1.Linux 操作系统为 CentOS7 2. 所有操作都是使用 root 用户去操作。也可以使用其他…

一、Spark on Standalone 1.spark 集群启动后，Worker 向 Master 注册信…

前言 和小伙伴的一起参加的人工智能比赛进入了决赛之后的一段时间里面，一直在构思将数据预处理过程和深度学习这个阶…

Spark 集群是主从结构。节点分为驱动器（Driver）节点以及执行器（executor）节点。驱动器节点可…

前言 最近一直忙于和小伙伴倒腾着关于人工智能的比赛，一直都没有时间停下来更新更新我的博客。不过在这一个过程中，…

摘要 在上一篇文章《CentOS 7 下 Hadoop 2.6.4 分布式集群环境搭建》http://www….