sparksql可以處理外部數據庫嗎?
可以處理外部數據Spark SQL開放了一系列接入外部數據源的接口,來讓開發者可以實現Spark SQL可以加載任何地方的數據,例如mysql,hive,hdfs,hbase等,而且支持很多種格式如json, parquet, avro, csv格式…
Spark SQL的DataFrame接口支持多種數據源的操作。一個DataFrame可以進行RDDs方式的操作,也可以被注冊為臨時表。把DataFrame注冊為臨時表之后,就可以對該DataFrame執行SQL查詢。
上一篇mysql主備切換原理
下一篇加工中心發那可系統傳程序