分布式文件系統(tǒng)架構(gòu)SEARCH AGGREGATION
回答:分布式架構(gòu)是軟件系統(tǒng)分布式系統(tǒng)存儲(chǔ)是基于存儲(chǔ)、服務(wù)器、數(shù)據(jù)庫(kù)技術(shù)、容災(zāi)熱備等技術(shù)的系統(tǒng)集成數(shù)字經(jīng)濟(jì)時(shí)代，各個(gè)企業(yè)、個(gè)人都在生產(chǎn)數(shù)據(jù)，利用數(shù)據(jù)，數(shù)據(jù)也在社會(huì)中不斷流動(dòng)、循環(huán)，為這個(gè)時(shí)代創(chuàng)造著價(jià)值與機(jī)遇。盡管數(shù)據(jù)如此珍貴，但我們?nèi)匀粫?huì)聽(tīng)到在集中式存儲(chǔ)場(chǎng)景中，由于網(wǎng)絡(luò)攻擊、火災(zāi)、地震而造成數(shù)據(jù)故障、丟失等問(wèn)題。為了防止數(shù)據(jù)出現(xiàn)故障、數(shù)據(jù)丟失、服務(wù)器出錯(cuò)、數(shù)據(jù)無(wú)法恢復(fù)等情況，越來(lái)越多企業(yè)開(kāi)始把集中存儲(chǔ)轉(zhuǎn)變...
cocopeak
|
583人閱讀
回答:這個(gè)太范化了吧。大數(shù)據(jù)架構(gòu)選擇的方案就有很多，海量數(shù)據(jù)的即席查詢(xún)本省就是業(yè)內(nèi)目前的痛點(diǎn)，暫時(shí)沒(méi)有太好的解決方案，kylin等框架也只是一個(gè)折中方案，如果你不是要求海量數(shù)據(jù)分析的秒級(jí)響應(yīng)的話(huà)sparkSql、presto等都是不錯(cuò)的方案，分鐘級(jí)別可以返回。
Paul_King
|
680人閱讀
回答:從系統(tǒng)架構(gòu)本身來(lái)說(shuō)，一般系統(tǒng)優(yōu)化主要從三個(gè)方面入手，數(shù)據(jù)持久層、業(yè)務(wù)邏輯層和前端展示層。數(shù)據(jù)持久層限制系統(tǒng)性能主要有兩個(gè)方面，一是數(shù)據(jù)庫(kù)自身的性能，二是對(duì)數(shù)據(jù)庫(kù)操作的方式，數(shù)據(jù)庫(kù)自身相對(duì)簡(jiǎn)單，一般通過(guò)優(yōu)化配置、采用高可用方案、搭建集群或者使用性能更好的數(shù)據(jù)庫(kù)來(lái)提升性能；數(shù)據(jù)庫(kù)操作主要是數(shù)據(jù)庫(kù)讀寫(xiě)操作，可以通過(guò)SQL優(yōu)化的方式來(lái)提升讀寫(xiě)速度，或者通過(guò)緩存的方式減低并發(fā)、提升性能。業(yè)務(wù)邏輯層代碼層面常...
senntyou
|
1081人閱讀
回答:以mysql為列：1：支撐高并發(fā)系統(tǒng)，一定會(huì)涉及事務(wù)，所以數(shù)據(jù)庫(kù)引擎必選innodb，innodb支持事務(wù)，事務(wù)級(jí)別根據(jù)業(yè)務(wù)而定，如果業(yè)務(wù)數(shù)據(jù)一致性要求很高，事務(wù)就開(kāi)啟序列化級(jí)別，這樣就完全隔離事務(wù)，但是會(huì)導(dǎo)致鎖資源競(jìng)爭(zhēng)加劇。mysql的性能有一定的降低。2：讀寫(xiě)分離，數(shù)據(jù)庫(kù)分成主庫(kù)和從庫(kù)，主庫(kù)負(fù)責(zé)寫(xiě)數(shù)據(jù)，叢庫(kù)負(fù)責(zé)讀數(shù)據(jù)。注意主從數(shù)據(jù)庫(kù)數(shù)據(jù)一致性問(wèn)題。3：冷熱數(shù)據(jù)分離，美團(tuán)，餓了么部分設(shè)計(jì)采用冷熱...
Vultr
|
1263人閱讀
回答:這種現(xiàn)象也是國(guó)內(nèi)軟件行業(yè)現(xiàn)狀的體現(xiàn)，不是程序員不想談?wù)撀酚珊筒僮飨到y(tǒng)，而是想談卻談不起來(lái)！要不找?guī)讉€(gè)大學(xué)的計(jì)算機(jī)教授來(lái)嘮五塊錢(qián)的操作系統(tǒng)，看看有幾個(gè)能聊明白？或者大家想想咱有能拿的出手的操作系統(tǒng)供大家談?wù)摰膯?？但這個(gè)問(wèn)題仍然值得我們深思，我認(rèn)為有以下幾點(diǎn)原因?qū)е铝舜蠹叶嗾務(wù)搒ql，架構(gòu)，并發(fā)和框架，而很少談?wù)撀酚珊筒僮飨到y(tǒng)的現(xiàn)象。人們談?wù)摱嗟耐撬孀愕?，?duì)于未曾接觸的卻無(wú)從談起都說(shuō)沒(méi)有實(shí)踐就沒(méi)...
TesterHome
|
548人閱讀
回答:沒(méi)什么意義，關(guān)鍵是架構(gòu)，你的架構(gòu)和API用的是linux定義的，你再怎么改，還是linux。人家為什么敢叫l(wèi)inux，而不叫unix，那是人家雖然沒(méi)有全改，但起碼有自己的架構(gòu)設(shè)計(jì)在里面，所以，別人才承認(rèn)你是Linux，而不是unix換個(gè)皮。所以在操作系統(tǒng)里架構(gòu)和API的改寫(xiě)和設(shè)計(jì)才是真正????B的地方。起碼目前的中國(guó)，我還沒(méi)見(jiàn)識(shí)過(guò)這種大神！
wqj97
|
942人閱讀
...ice，通常使用REST服務(wù)實(shí)現(xiàn)。 以下一段內(nèi)容來(lái)源于知乎 1. 分布式架構(gòu)的演進(jìn)系統(tǒng)架構(gòu)演化歷程-初始階段架構(gòu) 初始階段 的小型系統(tǒng) 應(yīng)用程序、數(shù)據(jù)庫(kù)、文件等所有的資源都在一臺(tái)服務(wù)器上通俗稱(chēng)為L(zhǎng)AMP 特征：應(yīng)用程序、數(shù)據(jù)庫(kù)...
...為兩種: 緩存在應(yīng)用服務(wù)器上的本地緩存和緩存在專(zhuān)門(mén)的分布式緩存服務(wù)器上的遠(yuǎn)程緩存。 4使用應(yīng)用服務(wù)器集群改善網(wǎng)站的并發(fā)處理能力 隨著業(yè)務(wù)的發(fā)展，單個(gè)應(yīng)用服務(wù)器一定會(huì)成為瓶頸，應(yīng)用服務(wù)器實(shí)現(xiàn)集群是網(wǎng)站可伸縮集...
...為兩種: 緩存在應(yīng)用服務(wù)器上的本地緩存和緩存在專(zhuān)門(mén)的分布式緩存服務(wù)器上的遠(yuǎn)程緩存。 4．使用應(yīng)用服務(wù)器集群改善網(wǎng)站的并發(fā)處理能力 隨著業(yè)務(wù)的發(fā)展，單個(gè)應(yīng)用服務(wù)器一定會(huì)成為瓶頸，應(yīng)用服務(wù)器實(shí)現(xiàn)集群是網(wǎng)站可伸縮...
...為兩種: 緩存在應(yīng)用服務(wù)器上的本地緩存和緩存在專(zhuān)門(mén)的分布式緩存服務(wù)器上的遠(yuǎn)程緩存。 4使用應(yīng)用服務(wù)器集群改善網(wǎng)站的并發(fā)處理能力 隨著業(yè)務(wù)的發(fā)展，單個(gè)應(yīng)用服務(wù)器一定會(huì)成為瓶頸，應(yīng)用服務(wù)器實(shí)現(xiàn)集群是網(wǎng)站可伸縮集...
...為兩種，緩存在應(yīng)用服務(wù)器上的本地緩存和緩存在專(zhuān)門(mén)的分布式緩存服務(wù)器的遠(yuǎn)程緩存 使用應(yīng)用服務(wù)器集群改善網(wǎng)站并發(fā)處理能力：通過(guò)負(fù)載均衡調(diào)度服務(wù)器來(lái)將訪(fǎng)問(wèn)請(qǐng)求分發(fā)到應(yīng)用服務(wù)器集群中的任何一臺(tái)機(jī)器 數(shù)據(jù)庫(kù)讀寫(xiě)分...
...生。 所謂云存儲(chǔ)，是指通過(guò)集群應(yīng)用、網(wǎng)格技術(shù)或分布式文件系統(tǒng)等功能，將網(wǎng)絡(luò)中大量各種不同類(lèi)型的存儲(chǔ)設(shè)備通過(guò)應(yīng)用軟件集合起來(lái)協(xié)同工作，共同對(duì)外提供數(shù)據(jù)存儲(chǔ)和業(yè)務(wù)訪(fǎng)問(wèn)功能的一個(gè)系統(tǒng)。而實(shí)現(xiàn)適應(yīng)用戶(hù)需求...
哪些應(yīng)用場(chǎng)景適合云存儲(chǔ)?存儲(chǔ)虛擬化、分布式存儲(chǔ)、對(duì)象存儲(chǔ)這幾種技術(shù)主要解決什么問(wèn)題?技術(shù)產(chǎn)品選型如何考慮? 企業(yè)哪些應(yīng)用場(chǎng)景適合借助云存儲(chǔ)來(lái)實(shí)現(xiàn)? 傳統(tǒng) IT 環(huán)境中使用傳統(tǒng)存儲(chǔ)的困境有那些?那些應(yīng)用場(chǎng)景是傳統(tǒng)...
... 哪些應(yīng)用場(chǎng)景適合云存儲(chǔ)?存儲(chǔ)虛擬化、分布式存儲(chǔ)、對(duì)象存儲(chǔ)這幾種技術(shù)主要解決什么問(wèn)題?技術(shù)產(chǎn)品選型如何考慮?企業(yè)哪些應(yīng)用場(chǎng)景適合借助云存儲(chǔ)來(lái)實(shí)現(xiàn)?傳統(tǒng) IT 環(huán)境中使用傳統(tǒng)存儲(chǔ)的困境有那些?那些應(yīng)用...
...一些概念不了解，下面對(duì)幾個(gè)最基礎(chǔ)的概念進(jìn)行介紹： 分布式系統(tǒng)中的多個(gè)模塊在不同服務(wù)器上部署，即可稱(chēng)為分布式系統(tǒng)，如Tomcat和數(shù)據(jù)庫(kù)分別部署在不同的服務(wù)器上，或兩個(gè)相同功能的Tomcat分別部署在不同服務(wù)器上 高可...
...為兩種：緩存在應(yīng)用服務(wù)器上的本地緩存和緩存在專(zhuān)門(mén)的分布式緩存服務(wù)器上的遠(yuǎn)程緩存 本地緩存 的訪(fǎng)問(wèn)速度會(huì)快一些，但是受應(yīng)用服務(wù)器內(nèi)存限制，緩存數(shù)據(jù)量很有限，而且會(huì)出現(xiàn)內(nèi)存爭(zhēng)用的情況 遠(yuǎn)程分布式緩存 可以使用...
...并發(fā)以及擴(kuò)展性問(wèn)題。 PostgreSQL 由于后面討論的所有的分布式數(shù)據(jù)庫(kù)，包括Greenplum Database，Apache HAWQ以及HashData云端數(shù)據(jù)倉(cāng)庫(kù)，都是基于單機(jī)版關(guān)系型數(shù)據(jù)庫(kù)PostgreSQL的，所以我們首先簡(jiǎn)單介紹一下PostgreSQL，作為后續(xù)討論的基礎(chǔ)...
...大多數(shù)廣電在規(guī)劃云數(shù)據(jù)中心架構(gòu)的時(shí)候都在猶豫是采用分布式存儲(chǔ)還是使用傳統(tǒng)集中式的磁盤(pán)陣列？其實(shí)質(zhì)是在考慮云數(shù)據(jù)中心采用公有云架構(gòu)還是私有云架構(gòu)。公有云架構(gòu)是未來(lái)演進(jìn)的方向，更能體現(xiàn)資源服務(wù)化的云計(jì)算本...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說(shuō)合適，...
圖示為GPU性能排行榜，我們可以看到所有GPU的原始相關(guān)性能圖表。同時(shí)根據(jù)訓(xùn)練、推理能力由高到低做了...
