阅读前请看一下:我是一个热衷于记录的人,每次写博客会反复研读,尽量不断提升博客质量。文章设置为仅粉丝可见,是因为写博客确实花了不少精力。希望互相进步谢谢!!
文章目录
- 阅读前请看一下:我是一个热衷于记录的人,每次写博客会反复研读,尽量不断提升博客质量。文章设置为仅粉丝可见,是因为写博客确实花了不少精力。希望互相进步谢谢!!
- 1、课程简介
- 2、概论
- 2.1、大数据的概念
- 2.2、大数据的特点
- 2.3、大数据的应用场景
- 2.4、大数据的发展场景
- 2.5、大数据的未来工作内容
- 3、知识体系(框架)
- 4、概念
- 4.1、Hadoop是什么
- 4.2、Hadoop发展历史
- 4.3、Hadoop三大发行版本
- 4.4、Hadoop的优势
- 4.5、Hadoop的组成(==面试重点!!!==)
- 4.5.1、HDFS概述
- 4.5.2、YARN概述
- 4.5.3、MapReduce概述
- 4.5.4、HDFS、YARN、MapReduce关系
- 4.6、大数据技术生态体系
- 4.7、推荐系统案例
- 5、Hadoop环境准备
- 5.1 、模板虚拟机准备
- 5.1.1、VMware安装
- 5.1.2、Centos7.5软硬件安装
- 5.1.3、IP和主机名配置
- 5.1.4、Xshell远程访问工具
- 5.1.5、模板虚拟机准备完成
- 5.2 、克隆
- 5.3 、按照JDK、Hadoop
- 6、Hadoop生产集群搭建
- 、总结
提示:以下是本篇文章正文内容
1、课程简介
2、概论
2.1、大数据的概念
2.2、大数据的特点
2.3、大数据的应用场景
2.4、大数据的发展场景
2.5、大数据的未来工作内容
3、知识体系(框架)
4、概念
4.1、Hadoop是什么
4.2、Hadoop发展历史
4.3、Hadoop三大发行版本
4.4、Hadoop的优势
4.5、Hadoop的组成(面试重点!!!)
4.5.1、HDFS概述
Hadoop Distributed File System,简称HDFS,是一个分布式文件系统。
4.5.2、YARN概述
Yet Another Resource Negotiation,另一种资源协调者,是Hadoop的资源管理器。
4.5.3、MapReduce概述
4.5.4、HDFS、YARN、MapReduce关系
4.6、大数据技术生态体系
4.7、推荐系统案例
5、Hadoop环境准备
5.1 、模板虚拟机准备
5.1.1、VMware安装
5.1.2、Centos7.5软硬件安装
1、安装硬件:虚拟机;
2、安装软件:操作系统;
-
1、“/boot”:刚启动电脑时分配多少资源,1g;
-
2、“/swap”:电脑内存不够用时,硬盘虚拟成内存;
-
3、“/”:根目录;
-
kdump:崩溃时自动备份,学习时可禁用。
2、IP
3、名称
5.1.3、IP和主机名配置
要配置三个IP:
-
1、hadoop100
vim /etc/sysconfig/network-scripts/ifcfg-ens33
-
2、Vmware
-
3、Win10
修改主机名称+映射主机名称
vim /etc/hostname
vim /etc/hosts
5.1.4、Xshell远程访问工具
5.1.5、模板虚拟机准备完成
5.2 、克隆
5.3 、按照JDK、Hadoop
6、Hadoop生产集群搭建
- 、本地模式
- 、完全分布式集群(开发和面试的重点)
、总结
码字不易,谢谢点赞!!!
码字不易,谢谢点赞!!!
码字不易,谢谢点赞!!!