山东翱段实业投资有限公司

QingMR 支持NeonSAN、支持 BigDL深度學(xué)習(xí)框架

青云 QingCloud 大數(shù)據(jù)相關(guān)服務(wù)將會統(tǒng)一在 QingMR 下。 QingMR 目前已經(jīng)集成了:分布式文件系統(tǒng) HDFS、集群資源管理系統(tǒng) YARN、數(shù)據(jù)處理框架 Hadoop MapReduceSpark、數(shù)據(jù)倉庫工具 Hive?、極速海量數(shù)據(jù) OLAP 分析引擎 Kylin,為更好的滿足用戶對大數(shù)據(jù)產(chǎn)品更多的需求,本次對核心組件進(jìn)行了版本升級,新增對基于 Spark 的分布式深度學(xué)習(xí)框架 BigDL 的支持,具體更新如下:: QingMR 2.0 – Core立即使用→
  • Hadoop 版本升級到 2.9.2 ;
  • Spark 版本升級到 2.2.3 ;
  • Hive 版本升級到 2.3.5 ;
  • 新增 Hadoop, Spark 和 Hive 對 lzo 壓縮的支持;
  • 新增對基于 Spark 的分布式深度學(xué)習(xí)框架 BigDL 的支持;
  • 新增 NeonSAN 超高性能大容量存儲的支持,單節(jié)點最高容量可達(dá) 50 TB。
  • 新增 Spark 作為 Hive 的默認(rèn)執(zhí)行引擎即 Hive on Spark,同時支持用戶切換到傳統(tǒng)的 MapReduce 引擎。
  • 新增多個 Hive 調(diào)優(yōu)配置參數(shù)。
  • 新增 Hive 通過 beeline 執(zhí)行 HQL 使用指南。
  • 新增 HiveServer2 WEB UI 使用指南。
熱門標(biāo)簽
Ubuntu
邊緣計算
飛騰
教育
超融合
云易捷
數(shù)據(jù)
存儲
U10000
云服務(wù)器
RadonDB
數(shù)據(jù)庫
復(fù)制成功
雷山县| 伊宁市| 贵定县| 浮梁县| 新安县| 福清市| 大埔区| 大冶市| 敖汉旗| 勐海县| 赣州市| 综艺| 团风县| 三江| 宣威市| 灵川县| 泰和县| 马尔康县| 昌邑市| 会理县| 区。| 德清县| 进贤县| 莱芜市| 谢通门县| 乌兰浩特市| 隆化县| 遂川县| 克东县| 贵溪市| 巴楚县| 嘉黎县| 慈溪市| 梁河县| 鹤壁市| 鲜城| 大方县| 屯留县| 贵定县| 同江市| 奉新县|