为什么80%的码农都做不了架构师?>>>
本书适用于想对大数据平台Hadoop有深入了解的程序员朋友,会帮助你以后在应用开发方面趟平一些坑。
1,Hadoop 是一个系列大数据组件构成的应用平台,可由多个廉价机器搭建集群,提供分布式存储和计算。
2,MapReduce 分为map和reduce。 map是将一系列数据转换N个k-v reduce是将k-v经过分布式并行计算,并将结果合并处理得到目的。
3,Hive 是一个元数据存储于关系型数据库,数据集存于HDFS的数据仓库;可用HiveQL进行MapReduce计算。
4,Impala
5, Spark 是摆脱MapReduce,使用新型内存计算框架的计算引擎。
6,HBase是NoSql(not only sql)的实现,rowkey,列组,region,regionServer,MasterServer是要自行了解的内容。