回答:大數(shù)據(jù)是我的主要研究方向之一,同時(shí)也在帶大數(shù)據(jù)方向的研究生,所以我來回答一下這個(gè)問題。首先,SQL語(yǔ)言是數(shù)據(jù)分析師的重要技能之一,大量的數(shù)據(jù)分析任務(wù)都需要使用SQL語(yǔ)言。在大數(shù)據(jù)逐漸落地應(yīng)用的大背景下,廣大的傳統(tǒng)行業(yè)會(huì)陸續(xù)釋放出大量的數(shù)據(jù)分析師崗位,數(shù)據(jù)分析師也將從互聯(lián)網(wǎng)行業(yè)逐漸走向傳統(tǒng)行業(yè)。大數(shù)據(jù)分析通常有兩種方式,其一是采用機(jī)器學(xué)習(xí)的方式,其二是采用統(tǒng)計(jì)學(xué)的方式,不論采用哪種方式,既可以通過編...
回答:隨著大數(shù)據(jù)應(yīng)用的逐漸落地,很多人都想從事大數(shù)據(jù)方面的工作,這其中自然就有很多非大數(shù)據(jù)相關(guān)專業(yè)(數(shù)學(xué)、計(jì)算機(jī)、統(tǒng)計(jì)學(xué))的從業(yè)者,那么大數(shù)據(jù)到底能不能從零基礎(chǔ)開始學(xué)呢?答案是肯定的,但是也要根據(jù)自身的知識(shí)結(jié)構(gòu)來選擇大數(shù)據(jù)的學(xué)習(xí)方向。大數(shù)據(jù)技術(shù)體系在2016年的時(shí)候已經(jīng)趨于成熟,目前正處在落地應(yīng)用的階段,大數(shù)據(jù)的細(xì)分崗位比較多,自然也就需要具備不同的知識(shí)結(jié)構(gòu)。大數(shù)據(jù)的崗位集中在數(shù)據(jù)采集、整理、存儲(chǔ)、分析...
回答:數(shù)據(jù)庫(kù)開發(fā)工程和大數(shù)據(jù)開發(fā)嚴(yán)格意義上來說不算轉(zhuǎn)行,從技術(shù)層面來講大數(shù)據(jù)開發(fā)需要更深層的技術(shù)基礎(chǔ)和更廣的架構(gòu)思路,也其說轉(zhuǎn)行不如說是對(duì)自身職業(yè)的一個(gè)飛躍。數(shù)據(jù)庫(kù)開發(fā)工程對(duì)于基本的數(shù)據(jù)庫(kù)開發(fā)比如說SQL的熟練,表結(jié)構(gòu)的分析,數(shù)據(jù)庫(kù)編程的掌握,數(shù)據(jù)庫(kù)的運(yùn)維,這都是數(shù)據(jù)庫(kù)開發(fā)工程師的天然優(yōu)勢(shì)和技術(shù)積累,如果要上升到大數(shù)據(jù)開發(fā)顯示是比小白更具優(yōu)勢(shì),向大數(shù)據(jù)庫(kù)開發(fā)提升,建議從以下幾方面著手:1.從技術(shù)上要學(xué)習(xí)...
回答:在大數(shù)據(jù)領(lǐng)域大概有四個(gè)大的工作方向,除了大數(shù)據(jù)平臺(tái)應(yīng)用及開發(fā)、大數(shù)據(jù)分析與應(yīng)用和大數(shù)據(jù)平臺(tái)集成與運(yùn)維之外,還有大數(shù)據(jù)平臺(tái)架構(gòu)與研發(fā),除了以上四個(gè)大的工作方向之外,還有一個(gè)工作方向是大數(shù)據(jù)技術(shù)推廣和培訓(xùn),這部分工作目前也有不少人在從事。大數(shù)據(jù)平臺(tái)架構(gòu)與研發(fā)主要的工作內(nèi)容是研發(fā)底層的大數(shù)據(jù)平臺(tái),這部分工作的難度較高,從事這部分工作的研發(fā)級(jí)崗位也并不多。現(xiàn)在不少技術(shù)研發(fā)團(tuán)隊(duì)都以Hadoop、Spark平...
回答:大數(shù)據(jù)是我的研究方向之一,所以我來回答一下這個(gè)問題。大數(shù)據(jù)產(chǎn)業(yè)鏈圍繞數(shù)據(jù)展開,有數(shù)據(jù)采集、整理、傳輸、存儲(chǔ)、安全、分析、呈現(xiàn)和應(yīng)用,涉及到諸多學(xué)科的綜合使用,不同的崗位需要的基礎(chǔ)知識(shí)也不盡相同。下面我以大數(shù)據(jù)工程師崗位,粗粒度的介紹一下大數(shù)據(jù)的基礎(chǔ)知識(shí)。第一,操作系統(tǒng)知識(shí)。大數(shù)據(jù)平臺(tái)往往搭建在Linux操作系統(tǒng)之上,所以大數(shù)據(jù)工程師要有Linux系列操作系統(tǒng)的知識(shí)。第二,數(shù)據(jù)庫(kù)基礎(chǔ)。大數(shù)據(jù)一個(gè)重要...
作者:韋瑋 轉(zhuǎn)載請(qǐng)注明出處 隨著大數(shù)據(jù)時(shí)代的到來,人們對(duì)數(shù)據(jù)資源的需求越來越多,而爬蟲是一種很好的自動(dòng)采集數(shù)據(jù)的手段。 那么,如何才能精通Python網(wǎng)絡(luò)爬蟲呢?學(xué)習(xí)Python網(wǎng)絡(luò)爬蟲的路線應(yīng)該如何進(jìn)行呢?在此為大...
...robotframework、airtest接口自動(dòng)化測(cè)試框架?python+request 5、數(shù)據(jù)庫(kù)相關(guān)知識(shí)學(xué)習(xí) 6、版本管理工具學(xué)習(xí) gitSVN 7、Linux常用命令學(xué)習(xí) 文件夾創(chuàng)建/刪除命令查看目錄日志打印… 不詳細(xì)舉例 8、bug問題分析定位,協(xié)助開發(fā)解決問題 要深層...
...出版的技術(shù)圖書 即將出版的《深入理解XXXXXXXXX》 《海量數(shù)據(jù)處理與大數(shù)據(jù)技術(shù)實(shí)戰(zhàn)》 《MySQL技術(shù)大全:開發(fā)、優(yōu)化與運(yùn)維實(shí)戰(zhàn)》 《深入理解高并發(fā)編程》 《并發(fā)編程核心知識(shí)》 《冰河的滲透實(shí)戰(zhàn)筆記》 《我要進(jìn)大廠系列之面...
...自動(dòng)化框架,還能開發(fā)一些管理平臺(tái)方便測(cè)試,能將測(cè)試數(shù)據(jù)開發(fā)成服務(wù)化; 能根據(jù)已知的框架,修改源碼定制適合自己公司框架;還能做開發(fā)代碼的review等等。 軟件測(cè)試本來就是個(gè)高大上的行業(yè),一個(gè)值得被尊重、拿高薪的...
...被明顯分成了不同的類型:Web服務(wù)器負(fù)責(zé)處理網(wǎng)絡(luò)請(qǐng)求,數(shù)據(jù)庫(kù)服務(wù)器負(fù)責(zé)數(shù)據(jù)庫(kù)的運(yùn)行和數(shù)據(jù)庫(kù)訪問,等等。這些服務(wù)器可能永遠(yuǎn)都用不上顯示器、多用戶、多進(jìn)程。這些場(chǎng)景下的VM和OS的任務(wù)很明確,就是提供較好的存儲(chǔ)、...
...試,到現(xiàn)在自動(dòng)化、性能、安全乃至于以后可能出現(xiàn)的大數(shù)據(jù)測(cè)試、AI測(cè)試崗位需求逐漸增多。我也在軟件測(cè)試這行摸爬滾打了十年了,正好有朋友問我:如何快速成為互聯(lián)網(wǎng)時(shí)代優(yōu)秀的測(cè)試工程師呢?趁著最近終于有了些閑余...
...,構(gòu)建一個(gè)軟件比編程難多了。 最簡(jiǎn)單的編程是,輸入數(shù)據(jù)到電腦,處理后輸出數(shù)據(jù)。 而構(gòu)建一個(gè)軟件是集設(shè)計(jì)、編寫、測(cè)試和維護(hù)于一身的,其目的是要滿足用戶的需求。這要求創(chuàng)建健壯的代碼,經(jīng)得起時(shí)間考驗(yàn)的安全解決...
...沒有第二門編程語(yǔ)言出來瞎逼逼。 像企業(yè)級(jí) Web 開發(fā)、大數(shù)據(jù)分析處理、微服務(wù)、云計(jì)算、移動(dòng)開發(fā)都是我的主戰(zhàn)場(chǎng)。還有圖像處理、桌面應(yīng)用開發(fā)、分布式系統(tǒng)開發(fā)、嵌入式等等,我也都能自由切入。 第三就是我搞出來了一...
...,特別是微服務(wù)特別火的今天,前端只需要關(guān)注所需要的數(shù)據(jù),不用關(guān)注底層提供這些數(shù)據(jù)的服務(wù)。我在滴滴和 Zoom 的時(shí)候都是這么玩的~ 問題 請(qǐng)問一下,你做兼職的話,一般是關(guān)注那些方面呢 ? 還有比較建議在哪些渠道尋找...
ChatGPT和Sora等AI大模型應(yīng)用,將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的,但推理(inference/serving)用4090不能說合適,...
圖示為GPU性能排行榜,我們可以看到所有GPU的原始相關(guān)性能圖表。同時(shí)根據(jù)訓(xùn)練、推理能力由高到低做了...