大数据的特点
特点:1.大量 2.高速 3.多样 4.低价值密度
大数据的技术发展脉络
阶段一:单机时代
阶段2:大数据时代---分布式处理
数据保存方面,Hadoop时代,HDFS去统一管理100台机器上的存储空间,
并提供一个统一的接口,用户在使用的过程中,就好像是一个无限大的硬盘空间。
在数据计算方面,基本的思路是使用MapReduce来处理计算。
阶段3:实时大数据时代
spark是基于内存的计算,mapReduce是基于磁盘的计算。
4.大数据部门内部组织结构
5.Hadoop的优势