hadoop集群運(yùn)維精品文章

• 

  魅族大數(shù)據(jù)運(yùn)維平臺(tái)實(shí)踐

  ...群。當(dāng)時(shí)只有三個(gè)節(jié)點(diǎn)，因?yàn)槲覀兤鸩奖容^晚，沒有趕上Hadoop1.0，直接是用YARN來跑的大數(shù)據(jù)集群，而且默認(rèn)就上了HA功能； 2014年9月節(jié)點(diǎn)增加到20個(gè)，數(shù)據(jù)日增30GB； 2015年6月上線Spark和Hbase，同時(shí)節(jié)點(diǎn)達(dá)到100個(gè)，數(shù)據(jù)日增10T； 2016...

  appetizerio 2019-05-28 17:04 評(píng)論0 收藏0
• 

  譯 | 像使用一臺(tái)主機(jī)一樣管理集群

  ... 當(dāng)單機(jī)的 CPU 性能和硬盤容量逐漸碰到了天花板，通過 Hadoop 這樣的集群化技術(shù)來突破單機(jī)性能瓶頸就越來越流行。當(dāng)然在 Hadoop 出現(xiàn)之前，集群方案早就應(yīng)用于高性能的生產(chǎn)系統(tǒng)，例如 Weblogic 或者集群化的 WEB 服務(wù)器（復(fù)雜均...

  Jingbin_ 2019-06-28 15:03 評(píng)論0 收藏0
• 

  大會(huì)實(shí)錄|清華徐葳：人工智能讓數(shù)據(jù)中心更好運(yùn)維

  ...luxio緩存非常有用，它還為Ceph和NFS適配了一個(gè)接口，還有Hadoop集群，HDFS里面也有幾百塊盤，將這三種東西適配城了兩個(gè)借口，適合放在Docker里面，也適合放在Hadoop里面，且它加了些緩存，這樣用機(jī)器人內(nèi)存吸收了很多流量，上...

  bergwhite 2019-06-26 18:18 評(píng)論0 收藏0
• 

  智能運(yùn)維 | 如何做好持續(xù)集成——Jenkins on Mesos 實(shí)踐

  ...務(wù)器或虛擬服務(wù)器組成，用于運(yùn)行應(yīng)用程序的任務(wù)，比如Hadoop和MPI作業(yè)。第二級(jí)調(diào)度由被稱作Framework的組件組成。Framework包括調(diào)度器（Scheduler）和執(zhí)行器（Executor）進(jìn)程，其中每個(gè)節(jié)點(diǎn)上都會(huì)運(yùn)行執(zhí)行器。Mesos能和不同類型...

  lsxiao 2019-06-28 15:15 評(píng)論0 收藏0