常用的大數(shù)據(jù)技術(shù)有哪些?
一、大數(shù)據(jù)基礎(chǔ)階段大數(shù)據(jù)基礎(chǔ)階段需掌握的技術(shù)有:Linux、Docker、KVM、MySQL基礎(chǔ)、Oracle基礎(chǔ)、MongoDB、redis以及hadoopmapreduce hdfs yarn等。
二、大數(shù)據(jù)存儲(chǔ)階段大數(shù)據(jù)存儲(chǔ)階段需掌握的技術(shù)有:hbase、hive、sqoop等。
三、大數(shù)據(jù)架構(gòu)設(shè)計(jì)階段大數(shù)據(jù)架構(gòu)設(shè)計(jì)階段需掌握的技術(shù)有:Flume分布式、Zookeeper、Kafka等。
四、大數(shù)據(jù)實(shí)時(shí)計(jì)算階段大數(shù)據(jù)實(shí)時(shí)計(jì)算階段需掌握的技術(shù)有:Mahout、Spark、storm。
五、大數(shù)據(jù)數(shù)據(jù)采集階段大數(shù)據(jù)數(shù)據(jù)采集階段需掌握的技術(shù)有:Python、Scala。
六、大數(shù)據(jù)商業(yè)實(shí)戰(zhàn)階段大數(shù)據(jù)商業(yè)實(shí)戰(zhàn)階段需掌握的技術(shù)有:實(shí)操企業(yè)大數(shù)據(jù)處理業(yè)務(wù)場(chǎng)景,分析需求、解決方案實(shí)施,綜合技術(shù)實(shí)戰(zhàn)應(yīng)用。