高級(jí)大數(shù)據(jù)架構(gòu)SEARCH AGGREGATION
回答:這個(gè)太范化了吧。大數(shù)據(jù)架構(gòu)選擇的方案就有很多，海量數(shù)據(jù)的即席查詢本省就是業(yè)內(nèi)目前的痛點(diǎn)，暫時(shí)沒有太好的解決方案，kylin等框架也只是一個(gè)折中方案，如果你不是要求海量數(shù)據(jù)分析的秒級(jí)響應(yīng)的話sparkSql、presto等都是不錯(cuò)的方案，分鐘級(jí)別可以返回。
Paul_King
|
677人閱讀
回答:首先數(shù)據(jù)庫分兩種:關(guān)系型數(shù)據(jù)庫和非關(guān)系型數(shù)據(jù)庫。 非關(guān)系型數(shù)據(jù)庫又分為面向?qū)ο髷?shù)據(jù)庫、反向索引數(shù)據(jù)庫等。這些數(shù)據(jù)庫之間的檢索方式都是不一樣的。這里我給你重點(diǎn)講一下我熟悉的關(guān)系型數(shù)據(jù)庫和反向索引數(shù)據(jù)庫。1.關(guān)系型數(shù)據(jù)庫的檢索方式。現(xiàn)在所有關(guān)系型數(shù)據(jù)庫基本上都是支持絕大部分常用的sql協(xié)議,所以解鎖的方式主要以sql查詢的方式。而你說的高級(jí)檢索的話，無非就是如何建立索引，加快檢索速度。當(dāng)然，索引不是越...
cyixlq
|
699人閱讀
回答:現(xiàn)在有幸參與傳統(tǒng)銀行數(shù)字化轉(zhuǎn)型，負(fù)責(zé)技術(shù)架構(gòu)部分的轉(zhuǎn)型設(shè)計(jì)。高性能的數(shù)據(jù)架構(gòu)（High Performance Data Architecture），正是我們架構(gòu)轉(zhuǎn)型的重點(diǎn)。隨著科技的蓬勃發(fā)展、社交網(wǎng)絡(luò)的廣泛使用、線上消費(fèi)的普及、數(shù)據(jù)挖掘的技術(shù)提升等大趨勢(shì)，全球銀行業(yè)正迎來一場(chǎng)聲勢(shì)浩大的數(shù)字化創(chuàng)新浪潮。數(shù)字化為消費(fèi)者的生活及行為模式帶來翻天覆地的變化，也孵化出一批新型的金融科技(Fintech)競(jìng)...
Lowky
|
524人閱讀
回答:以mysql為列：1：支撐高并發(fā)系統(tǒng)，一定會(huì)涉及事務(wù)，所以數(shù)據(jù)庫引擎必選innodb，innodb支持事務(wù)，事務(wù)級(jí)別根據(jù)業(yè)務(wù)而定，如果業(yè)務(wù)數(shù)據(jù)一致性要求很高，事務(wù)就開啟序列化級(jí)別，這樣就完全隔離事務(wù)，但是會(huì)導(dǎo)致鎖資源競(jìng)爭(zhēng)加劇。mysql的性能有一定的降低。2：讀寫分離，數(shù)據(jù)庫分成主庫和從庫，主庫負(fù)責(zé)寫數(shù)據(jù)，叢庫負(fù)責(zé)讀數(shù)據(jù)。注意主從數(shù)據(jù)庫數(shù)據(jù)一致性問題。3：冷熱數(shù)據(jù)分離，美團(tuán)，餓了么部分設(shè)計(jì)采用冷熱...
Vultr
|
1248人閱讀
回答:目前階段大數(shù)據(jù)技術(shù)及體系已經(jīng)逐漸趨于成熟，不再是以概念貫穿的模式，大數(shù)據(jù)越來越多的被使用，伴隨互聯(lián)網(wǎng)化的發(fā)展更多的企業(yè)信息化已經(jīng)由IT時(shí)代轉(zhuǎn)變?yōu)镈T時(shí)代，以數(shù)據(jù)為核心，用數(shù)據(jù)進(jìn)行決策，基于數(shù)據(jù)驅(qū)動(dòng)企業(yè)的創(chuàng)新與發(fā)展，相信在將來大數(shù)據(jù)也會(huì)有更廣泛的應(yīng)用空間，對(duì)于大數(shù)據(jù)的理解主要分為以下幾個(gè)層面。1.數(shù)據(jù)來源：對(duì)于大數(shù)據(jù)時(shí)代而言更多強(qiáng)調(diào)基于業(yè)務(wù)數(shù)據(jù)的沉淀，在一定規(guī)模的數(shù)據(jù)上進(jìn)行進(jìn)一步的分析、處理、轉(zhuǎn)換，...
arashicage
|
1228人閱讀
回答:在大數(shù)據(jù)領(lǐng)域大概有四個(gè)大的工作方向，除了大數(shù)據(jù)平臺(tái)應(yīng)用及開發(fā)、大數(shù)據(jù)分析與應(yīng)用和大數(shù)據(jù)平臺(tái)集成與運(yùn)維之外，還有大數(shù)據(jù)平臺(tái)架構(gòu)與研發(fā)，除了以上四個(gè)大的工作方向之外，還有一個(gè)工作方向是大數(shù)據(jù)技術(shù)推廣和培訓(xùn)，這部分工作目前也有不少人在從事。大數(shù)據(jù)平臺(tái)架構(gòu)與研發(fā)主要的工作內(nèi)容是研發(fā)底層的大數(shù)據(jù)平臺(tái)，這部分工作的難度較高，從事這部分工作的研發(fā)級(jí)崗位也并不多。現(xiàn)在不少技術(shù)研發(fā)團(tuán)隊(duì)都以Hadoop、Spark平...
zhangxiangliang
|
3465人閱讀
...索業(yè)務(wù)，服務(wù)于近百億數(shù)據(jù)。 在為傳統(tǒng)的搜索應(yīng)用提供高級(jí)檢索和大數(shù)據(jù)交互能力的同時(shí)，有贊搜索平臺(tái)還需要為其他比如商品管理、訂單檢索、粉絲篩選等海量數(shù)據(jù)過濾提供支持，從工程的角度看，如何擴(kuò)展平臺(tái)以支持多樣...
...一國(guó)慶假期了，給小伙伴們分享下，從小白程序員到大廠高級(jí)技術(shù)專家我看過哪些技術(shù)類書籍。 今天，在收拾房間的時(shí)候，無疑間看到了放在桌子下面的行李箱，這里面放的不是別的東西，正是之前我看過的一些技術(shù)書籍和一...
...網(wǎng)公司的主流技術(shù)選型。 互聯(lián)網(wǎng)公司主流技術(shù)選型 進(jìn)階高級(jí)Java、架構(gòu)師必學(xué)6大主要技能，包括：數(shù)據(jù)結(jié)構(gòu)和算法、Java高級(jí)特性、Java web核心、數(shù)據(jù)庫、Java框架與必備工具、系統(tǒng)架構(gòu)設(shè)計(jì)等，希望能真正幫助到想要從程序員進(jìn)...
什么是架構(gòu)，什么是架構(gòu)師？這似乎是聊架構(gòu)話題時(shí)永恒的問題。代碼寫的好就是架構(gòu)嗎？顯然不是。代碼寫的好只是表象，做所有事情都需要規(guī)劃，尤其是一個(gè)復(fù)雜的軟件系統(tǒng)，這更需要規(guī)劃，否則...
...從傳統(tǒng)項(xiàng)目轉(zhuǎn)型敏捷，你只需要兩天》古月——平安科技高級(jí)敏捷教練 《非典型敏捷：10天一個(gè)版本》左楊眉——中興通訊 敏捷教練 專場(chǎng)三：架構(gòu)演進(jìn)/工程實(shí)踐/大前端 為了適應(yīng)業(yè)務(wù)的發(fā)展，為了應(yīng)對(duì)復(fù)雜性和規(guī)模化，各大公...
...學(xué)家段亦濤先生，快手產(chǎn)品副總裁徐欣先生，騰訊區(qū)塊鏈高級(jí)產(chǎn)品總監(jiān)秦青先生，分別從產(chǎn)品演進(jìn)、團(tuán)隊(duì)管理、大數(shù)據(jù)、AI應(yīng)用 、區(qū)塊鏈技術(shù)等方面，對(duì)2018年軟件研發(fā)現(xiàn)狀及未來發(fā)展趨勢(shì)發(fā)表了各自的觀點(diǎn)，給諸多參會(huì)者帶來...
...據(jù)，才有可能做到比較完整的一個(gè)根因分析。 極光Android高級(jí)工程師 王可為 極光有三大體系，包括開發(fā)者服務(wù)以及數(shù)據(jù)服務(wù)，還有針對(duì)精準(zhǔn)營(yíng)銷的效果通圖。開發(fā)者服務(wù)，主要做的是SDK。極光SDK目前它的業(yè)務(wù)量非常大，包括它...
...據(jù)，才有可能做到比較完整的一個(gè)根因分析。 極光Android高級(jí)工程師 王可為 極光有三大體系，包括開發(fā)者服務(wù)以及數(shù)據(jù)服務(wù)，還有針對(duì)精準(zhǔn)營(yíng)銷的效果通圖。開發(fā)者服務(wù)，主要做的是SDK。極光SDK目前它的業(yè)務(wù)量非常大，包括它...
...程，?zepto，移動(dòng)端，響應(yīng)式，css3d，bootstrap組件，jqueryUI 高級(jí)數(shù)據(jù)：面向?qū)ο筮M(jìn)階，ajax，json，（后端語言：php） 新興的技術(shù)：html5：?socket，?離線存儲(chǔ)，多媒體，canvas，圖像處理，web works，數(shù)據(jù)存儲(chǔ)，跨域。 技術(shù)拓展：地圖...
...程，?zepto，移動(dòng)端，響應(yīng)式，css3d，bootstrap組件，jqueryUI 高級(jí)數(shù)據(jù)：面向?qū)ο筮M(jìn)階，ajax，json，（后端語言：php） 新興的技術(shù)：html5：?socket，?離線存儲(chǔ)，多媒體，canvas，圖像處理，web works，數(shù)據(jù)存儲(chǔ)，跨域。 技術(shù)拓展：地圖...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說合適，...
圖示為GPU性能排行榜，我們可以看到所有GPU的原始相關(guān)性能圖表。同時(shí)根據(jù)訓(xùn)練、推理能力由高到低做了...
