《Spark大数据处理:技术、应用与性能优化》——2.3 本章小结

2.3 本章小结

本章主要介绍了如何在Linux和Windows环境下安装部署Spark集群。
由于Spark主要使用HDFS充当持久化层,所以完整地使用Spark需要预先安装Hadoop。通过本章介绍,读者就可以开启Spark的实战之旅了。
下一章将介绍Spark的计算模型,Spark将分布式的内存数据抽象为弹性分布式数据集(RDD),并在其上实现了丰富的算子,从而对RDD进行计算,最后将算子序列转化为有向无环图进行执行和调度。

时间: 2024-09-27 03:37:04

《Spark大数据处理:技术、应用与性能优化》——2.3 本章小结的相关文章

《循序渐进学Docker》——第3章 Ubuntu下使用Docker 3.1 Docker的运行平台

第3章 Ubuntu下使用Docker 第2章我们介绍了在Windows下如何搭建一个Docker运行环境.这一章我们要切换环境,在Ubuntu系统下使用Docker.为什么要切换到Ubuntu下呢,还要从Docker的运行平台说起. 3.1 Docker的运行平台 首先,我们需要知道Docker可以在哪些操作系统下运行.截止到2016年3月底,几乎所有的Linux系统(如Red Hat Enterprise Linux(RHEL)/Centos.Debian/Ubuntu.gentoo.arc

《循序渐进学Docker》——第2章 初步体验 Docker 2.1 Windows下安装Docker

第2章 初步体验Docker 上一章概括性地介绍了Docker的发展历史.组织结构.功能特性和使用场景等方面的内容.本章主要从实践的角度,介绍如何在本地搭建一个Docker运行环境. 由于大多数用户的个人电脑用的都是Windows系统,所以我们就先来讲讲在Windows环境下如何安装和运行Docker. 2.1 Windows下安装Docker 为了运行Docker,你的电脑必须安装64位Windows 7及以上版本的系统(包含Windows 8/8.1和Windows 10).另外,你要确保C

《循序渐进学Docker》——3.4 再次体验Docker

本节书摘来自华章出版社<循序渐进学Docker>一书中的第3章,第3.4节,作者李金榜 尹烨 刘天斯 陈纯,更多章节内容可以访问"华章计算机"公众号查看. 3.4 再次体验Docker 我们介绍了如何在Ubuntu系统下安装Docker,并且指出Ubuntu是对Docker支持最好的系统.这一节我们就再次介绍几个例子,让大家更深入地体验Docker. 3.4.1 再看个人博客WordPress的搭建 还记得第2章在Windows环境下通过两条Docker指令搭建WordPr

《循序渐进学Docker》——1.4 本章小结

1.4 本章小结 本章概括性地介绍了Docker是什么,它有哪些独特的物理特性,以及它适用于哪些场合和能带来哪些好处.它灵活便利,但也有一定的学习成本.下面章节中我们将循序渐进,讲解Docker的使用方法.

《循序渐进学Docker》——3.5 本章小结

3.5 本章小结 本章我们先介绍了主流操作系统对Docker的支持情况,以及如何安装Ubuntu系统和在Ubuntu环境下安装Docker.最后我们举了三个应用例子,介绍Docker如何部署服务,后续的章节,我们会继续结合这三个应用例子,深入探讨Docker的使用方法.

《循序渐进学Docker》——2.3 本章小结

2.3 本章小结 这一章,我们介绍了在Windows环境下如何安装Docker,并且通过搭建一个个人博客WordPress,让大家了解Docker指令的运行方式.大家有没有被Docker的神奇特性深深吸引住呢?如果有,那么我们接下来就"折腾"得大一些.

《循序渐进学Docker》——导读

前 言 为什么要写这本书 Docker自2013年诞生以来,在短短几年就迅速引爆IT技术圈,全球各大知名IT企业也纷纷加入.Docker社区的火爆程度也是前所未有,周边的技术案例.平台工具也是层出不穷,其中也不乏一线IT公司的身影,比如Google.微软.Red Hat.VMware等,放眼国内,基于Docker技术的创业公司也如雨后春笋,国内互联网公司的代表BAT也开始尝试在企业内部运用落地.在这样的大背景下,大家对掌握及运用Docker技术的欲望也越来越强烈.因此,四位笔者走到了一起,开始谋

《循序渐进学Docker》——第一部分 Part 1 基础篇 第1章 全面认识Docker 1.1 Docker是什么

第一部分 Part 1 基 础 篇 第1章 全面认识Docker 第2章 初步体验Docker 第3章 Ubuntu下使用Docker 第4章 Docker的基础知识 第1章 全面认识Docker 欢迎来到Docker的世界. Docker,Golang社区杀手级的应用,是Github上最活跃的项目之一,也是开源社区最受欢迎的项目. Docker,号称要成为所有云应用的基石,并把互联网升级到下一代. 开发.测试.运维人员看到Docker,都激动地说:"太好了,这正是我所需要的!" Do

《循序渐进学Docker》——3.2 安装Windows和Ubuntu双系统

3.2 安装Windows和Ubuntu双系统 安装Ubuntu有很多方法,现在我们只介绍如何通过U盘安装,其他安装方式大家可以自己去尝试. 准备工作: 一个存储空间不小于4G的U盘 下载Ubuntu安装ISO镜像 对于初学者,建议使用64位Ubuntu Kylin 14.04.2版本,因为它是Ubuntu最新长期维护的版本,并且对中文的支持很好.下载地址:http://www.ubuntu.org.cn/download/ubuntu-kylin-zh-CN. 3.2.1 制作Ubuntu安装

《循序渐进学Docker》——3.3 在Ubuntu下安装Docker

3.3 在Ubuntu下安装Docker 通过GNU GRUB选择进入Ubuntu系统,配置好网络. 先通过下面命令更新一下apt软件源. sudo apt-get update 安装Docker有两种方式. 方法一:从apt源安装docker.io,但版本比较旧. sudo apt-get install docker.io 方法二:使用官方提供的安装脚本,可以安装最新版本的Docker,推荐使用这种安装方式,安装命令如下: sudo apt-get install curl curl -sS