hadoop功能介紹?Hadoop是大數(shù)據(jù)處理框架,工具
hdfs和mapReduce是Hadoop的兩個(gè)原始核心功能,前者是負(fù)責(zé)儲存的系統(tǒng),類似把試卷放在幾個(gè)柜子里,后者負(fù)責(zé)并行計(jì)算,類似把100份試卷分給5個(gè)人批改。
Hadoop后來逐漸加了其他工具
hive提供數(shù)據(jù)匯總查詢功能,給了一個(gè)窗口處理數(shù)據(jù),對數(shù)據(jù)進(jìn)行加減乘除。
hbase是一個(gè)可擴(kuò)展的、非關(guān)系型數(shù)據(jù)庫,不是傳統(tǒng)的excel表那種的數(shù)據(jù)格式
spark是比mapReduce更快的計(jì)算框架
Hadoop和mysql的關(guān)系是“Friends with benefits”
Hadoop的并行處理系統(tǒng)加上mysql的快速處理大量數(shù)據(jù)能力,就能得到一個(gè)能夠使用關(guān)系型數(shù)據(jù)并以巨大速度進(jìn)行計(jì)算的數(shù)據(jù)庫。