回答:個(gè)人的觀點(diǎn),這種大表的優(yōu)化,不一定上來(lái)就要分庫(kù)分表,因?yàn)楸硪坏┍徊鸱郑_(kāi)發(fā)、運(yùn)維的復(fù)雜度會(huì)直線上升,而大多數(shù)公司是欠缺這種能力的。所以MySQL中幾百萬(wàn)甚至小幾千萬(wàn)的表,先考慮做單表的優(yōu)化。單表優(yōu)化單表優(yōu)化可以從這幾個(gè)角度出發(fā):表分區(qū):MySQL在5.1之后才有的,可以看做是水平拆分,分區(qū)表需要在建表的需要加上分區(qū)參數(shù),用戶需要在建表的時(shí)候加上分區(qū)參數(shù);分區(qū)表底層由多個(gè)物理子表組成,但是對(duì)于代碼來(lái)...
回答:想玩NAS的都是有先見(jiàn)之明的,不過(guò)入坑之后發(fā)現(xiàn)NAS也不盡如人意。多終端極速看片,一鍵備份共享,這是不少網(wǎng)盤用戶和NAS的終極剛需。不過(guò)因?yàn)楸娝苤脑颍W(wǎng)盤不可信任,只能作為輔助;本地化NAS,買品牌整機(jī)費(fèi)錢,自己DIY又需要技術(shù)支持,而且即使是家庭NAS,遇到硬盤報(bào)廢也是個(gè)坎兒,如果這些坑你都踩過(guò),估計(jì)也會(huì)對(duì)新的產(chǎn)品報(bào)以希望。筆點(diǎn)君也是這么想的。數(shù)據(jù)無(wú)價(jià),存儲(chǔ)備份很重要。作為一個(gè)入坑不長(zhǎng)時(shí)間...
回答:在大數(shù)據(jù)領(lǐng)域大概有四個(gè)大的工作方向,除了大數(shù)據(jù)平臺(tái)應(yīng)用及開(kāi)發(fā)、大數(shù)據(jù)分析與應(yīng)用和大數(shù)據(jù)平臺(tái)集成與運(yùn)維之外,還有大數(shù)據(jù)平臺(tái)架構(gòu)與研發(fā),除了以上四個(gè)大的工作方向之外,還有一個(gè)工作方向是大數(shù)據(jù)技術(shù)推廣和培訓(xùn),這部分工作目前也有不少人在從事。大數(shù)據(jù)平臺(tái)架構(gòu)與研發(fā)主要的工作內(nèi)容是研發(fā)底層的大數(shù)據(jù)平臺(tái),這部分工作的難度較高,從事這部分工作的研發(fā)級(jí)崗位也并不多。現(xiàn)在不少技術(shù)研發(fā)團(tuán)隊(duì)都以Hadoop、Spark平...
回答:自從用上ansible之后,一發(fā)不可收拾。ansible+jenkins+gitlab,現(xiàn)在很久沒(méi)有登陸服務(wù)器了,基本需要裝軟件或者發(fā)版本,本地改了提交gitlab,gitlab跟jenkins聯(lián)動(dòng)。jenkins采用流水線的方式,先從gitlab上拉取最新變動(dòng),然后部署通過(guò)ansible playbook批量部署,成功之后發(fā)消息到釘釘群。所以現(xiàn)在要部署或者發(fā)布,特別方便,git提交,等群消息就O...
...之年,也是云智慧由SaaS服務(wù)商脫胎換骨,華麗變身業(yè)務(wù)運(yùn)維解決方案服務(wù)商,實(shí)現(xiàn)資源聚合、產(chǎn)業(yè)裂變之年。過(guò)去一年里,云智慧推出了面向企業(yè)核心業(yè)務(wù)全生命周期的業(yè)務(wù)運(yùn)維解決方案,孵化了專注于大數(shù)據(jù)可視化的全資子...
...個(gè) data pipeline,加上一個(gè)基于 lucene/elasticsearch 的時(shí)間序列數(shù)據(jù)庫(kù)。監(jiān)控是最容易被中型公司外包出去的業(yè)務(wù),所以這方面的創(chuàng)業(yè)公司也最多。但是中國(guó)的國(guó)情是網(wǎng)絡(luò)傳輸成本大于計(jì)算成本,所以如何在客戶計(jì)算中心內(nèi)完成采集,...
...而知。看似簡(jiǎn)單的雙十一背后牽扯到是包括支付、架構(gòu)、數(shù)據(jù)庫(kù)、網(wǎng)絡(luò)、運(yùn)維、電力、客服、物流等整個(gè)商業(yè)配套基礎(chǔ)設(shè)施的協(xié)同和考驗(yàn)。雙十一大促這些年,運(yùn)維領(lǐng)域邁過(guò)了哪些坑?智能化運(yùn)維初露端倪的今天,企業(yè)又該如何...
...制系統(tǒng)、無(wú)線機(jī)房管理平臺(tái)、自動(dòng)化測(cè)試能力、中間件(數(shù)據(jù)庫(kù)、緩存、文件存儲(chǔ))、無(wú)線機(jī)房硬件方案、專家支持服務(wù)。 移動(dòng)測(cè)試的應(yīng)用架構(gòu)作為一整個(gè)龐大的移動(dòng)測(cè)試解決方案,MQC專有云系統(tǒng)內(nèi)部包含了非常多的軟硬件模...
...制系統(tǒng)、無(wú)線機(jī)房管理平臺(tái)、自動(dòng)化測(cè)試能力、中間件(數(shù)據(jù)庫(kù)、緩存、文件存儲(chǔ))、無(wú)線機(jī)房硬件方案、專家支持服務(wù)。 移動(dòng)測(cè)試的應(yīng)用架構(gòu)作為一整個(gè)龐大的移動(dòng)測(cè)試解決方案,MQC專有云系統(tǒng)內(nèi)部包含了非常多的軟硬件模...
...的可用性提供KPI。 運(yùn)維發(fā)布變更工具 版本管理工具(數(shù)據(jù)庫(kù)):所有的發(fā)布應(yīng)該以版本管理為起點(diǎn)。研發(fā)給的版本包先入版本管理工具,再?gòu)陌姹竟芾砉ぞ叻职l(fā)到現(xiàn)網(wǎng)發(fā)布。杜絕 rsync 一臺(tái)服務(wù)器發(fā)布另外一臺(tái)的做法。 配置...
...的業(yè)務(wù)故障投訴后,需要對(duì)各種關(guān)聯(lián)系統(tǒng)的網(wǎng)絡(luò)、應(yīng)用、數(shù)據(jù)庫(kù)、主機(jī)進(jìn)行逐一排查,故障處置周期長(zhǎng)、效率低,對(duì)業(yè)務(wù)造成嚴(yán)重影響。因此,互聯(lián)網(wǎng)+業(yè)務(wù)與IT的融合首先要求企業(yè)轉(zhuǎn)變傳統(tǒng)運(yùn)維模式,在對(duì)基礎(chǔ)架構(gòu)和系統(tǒng)的運(yùn)行...
...產(chǎn)品叫做虛擬DBA,通過(guò)大數(shù)據(jù)智能分析等技術(shù),實(shí)現(xiàn)用戶數(shù)據(jù)庫(kù)性能分析、故障診斷、故障修復(fù)等DBA能力;第三款產(chǎn)品是即將推出的燈塔,用戶級(jí)的運(yùn)維監(jiān)控平臺(tái),為客戶提供差異化、定制化的業(yè)務(wù)監(jiān)控能力,快速定位故障...
...話題,如果說(shuō)在 40 分鐘之內(nèi)要去完整的介紹怎么做一個(gè)數(shù)據(jù)庫(kù)或者說(shuō)怎么去做一個(gè)集成調(diào)度的系統(tǒng),我覺(jué)得是不太可能的。 所以今天這個(gè) Talk 我主要會(huì)分享 TiDB 作為一個(gè)分布式關(guān)系型數(shù)據(jù)庫(kù)與云整合的經(jīng)驗(yàn),以及我們遇到的一...
ChatGPT和Sora等AI大模型應(yīng)用,將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的,但推理(inference/serving)用4090不能說(shuō)合適,...
圖示為GPU性能排行榜,我們可以看到所有GPU的原始相關(guān)性能圖表。同時(shí)根據(jù)訓(xùn)練、推理能力由高到低做了...