大數(shù)據(jù)開發(fā)工程師SEARCH AGGREGATION
回答:數(shù)據(jù)庫開發(fā)工程和大數(shù)據(jù)開發(fā)嚴格意義上來說不算轉(zhuǎn)行，從技術(shù)層面來講大數(shù)據(jù)開發(fā)需要更深層的技術(shù)基礎(chǔ)和更廣的架構(gòu)思路，也其說轉(zhuǎn)行不如說是對自身職業(yè)的一個飛躍。數(shù)據(jù)庫開發(fā)工程對于基本的數(shù)據(jù)庫開發(fā)比如說SQL的熟練，表結(jié)構(gòu)的分析，數(shù)據(jù)庫編程的掌握，數(shù)據(jù)庫的運維，這都是數(shù)據(jù)庫開發(fā)工程師的天然優(yōu)勢和技術(shù)積累，如果要上升到大數(shù)據(jù)開發(fā)顯示是比小白更具優(yōu)勢，向大數(shù)據(jù)庫開發(fā)提升，建議從以下幾方面著手：1.從技術(shù)上要學(xué)習(xí)...
sean
|
719人閱讀
回答:隨著大數(shù)據(jù)應(yīng)用的逐漸落地，很多人都想從事大數(shù)據(jù)方面的工作，這其中自然就有很多非大數(shù)據(jù)相關(guān)專業(yè)（數(shù)學(xué)、計算機、統(tǒng)計學(xué)）的從業(yè)者，那么大數(shù)據(jù)到底能不能從零基礎(chǔ)開始學(xué)呢？答案是肯定的，但是也要根據(jù)自身的知識結(jié)構(gòu)來選擇大數(shù)據(jù)的學(xué)習(xí)方向。大數(shù)據(jù)技術(shù)體系在2016年的時候已經(jīng)趨于成熟，目前正處在落地應(yīng)用的階段，大數(shù)據(jù)的細分崗位比較多，自然也就需要具備不同的知識結(jié)構(gòu)。大數(shù)據(jù)的崗位集中在數(shù)據(jù)采集、整理、存儲、分析...
wuyangnju
|
864人閱讀
回答:想要學(xué)習(xí)大數(shù)據(jù)開發(fā)，第一件事并不是要找書籍或者是找視頻教程，而是要了解一下大數(shù)據(jù)行業(yè)前景，了解一下成為大數(shù)據(jù)工程師需要具備什么樣的能力，掌握哪些技能我當初學(xué)習(xí)大數(shù)據(jù)之前也有過這樣的問題，作為一個過來人，今天就跟大家聊下大數(shù)據(jù)人才應(yīng)該具備的技能。首先我們要知道對于大數(shù)據(jù)開發(fā)工程師需要具備的技能，下面我們分別來說明：用人單位對于大數(shù)據(jù)開發(fā)人才的能力要求有技能要求：1.精通JAVA開發(fā)語言，同時熟悉Py...
fish
|
708人閱讀
回答:在大數(shù)據(jù)領(lǐng)域大概有四個大的工作方向，除了大數(shù)據(jù)平臺應(yīng)用及開發(fā)、大數(shù)據(jù)分析與應(yīng)用和大數(shù)據(jù)平臺集成與運維之外，還有大數(shù)據(jù)平臺架構(gòu)與研發(fā)，除了以上四個大的工作方向之外，還有一個工作方向是大數(shù)據(jù)技術(shù)推廣和培訓(xùn)，這部分工作目前也有不少人在從事。大數(shù)據(jù)平臺架構(gòu)與研發(fā)主要的工作內(nèi)容是研發(fā)底層的大數(shù)據(jù)平臺，這部分工作的難度較高，從事這部分工作的研發(fā)級崗位也并不多。現(xiàn)在不少技術(shù)研發(fā)團隊都以Hadoop、Spark平...
zhangxiangliang
|
3462人閱讀
回答:是的。一方面，大數(shù)據(jù)計算通常不能在內(nèi)存中完成，需要多次讀寫硬盤數(shù)據(jù)。另一方面，數(shù)據(jù)分布在不同的機器上，需要對數(shù)據(jù)進行網(wǎng)絡(luò)傳輸。因此，大數(shù)據(jù)運算更多的時間是在讀寫磁盤和網(wǎng)絡(luò)傳輸數(shù)據(jù)。因為數(shù)據(jù)I/O的效率通常低于CPU運算效率。因此，對讀寫同一張表的多個SQL進行合并，可以減少本地磁盤讀寫次數(shù)，以及網(wǎng)絡(luò)傳輸?shù)臄?shù)據(jù)，從而提高程序運行效率。
李增田
|
1109人閱讀
回答:誠邀回答，下面我來說說我的個人觀點：隨著大數(shù)據(jù)的熱度不斷升溫、技術(shù)日趨成熟，應(yīng)用越來越廣泛，很多人都看好大數(shù)據(jù)未來的發(fā)展前景。這其中不乏大量Java開發(fā)崗位轉(zhuǎn)大數(shù)據(jù)方向的程序員。究竟是堅守java崗還是去做大數(shù)據(jù)？我認為最重要的還是要結(jié)合個人的職業(yè)發(fā)展來定位。并不是大數(shù)據(jù)火了，轉(zhuǎn)行做大數(shù)據(jù)就業(yè)前景就更可觀，個人能力、與企業(yè)技能要求的匹配度、市場競爭環(huán)境、行業(yè)人才需求及機遇等都會左右我們最終的職業(yè)走...
Tony_Zby
|
1047人閱讀
...中實現(xiàn)BI應(yīng)用程序是為了更好地共享和使用數(shù)據(jù)。 三、BI工程師和大數(shù)據(jù)工程師現(xiàn)在很多公司的BI工程師的工作職責主要是做報表，主要內(nèi)容是使用一些BI軟件開發(fā)不同類型的報表，例如使用FineBI，tableau等來實現(xiàn)明細報表等等。...
...人工智能與大數(shù)據(jù)高速發(fā)展帶來的大基數(shù)人才缺口，Python工程師短期內(nèi)依然難以補缺。根據(jù)統(tǒng)計數(shù)據(jù)顯示，人才缺口超過100萬，國內(nèi)：豆瓣、搜狐、金山、通訊、盛大、網(wǎng)易、百度、阿里、土豆、新浪等，國外：谷歌、NASA、YouTu...
...業(yè)1．人工智能工程技術(shù)人員2．物聯(lián)網(wǎng)工程技術(shù)人員3．大數(shù)據(jù)工程技術(shù)人員4．云計算工程技術(shù)人員5．建筑信息模型技術(shù)員6．電子競技運營師7．電子競技員8．無人機駕駛員9．數(shù)字化管理師10．農(nóng)業(yè)經(jīng)理人11．工業(yè)機器人系統(tǒng)操...
...關(guān)，如何實施、如何實現(xiàn)、解決什么業(yè)務(wù)問題，這是數(shù)據(jù)工程師的工作。 數(shù)據(jù)源的特點決定數(shù)據(jù)采集與數(shù)據(jù)存儲的技術(shù)選型，我根據(jù)數(shù)據(jù)源的特點將其分為四大類：第一類：從來源來看分為內(nèi)部數(shù)據(jù)和外部數(shù)據(jù)；第二類：從結(jié)...
...據(jù)簡單的參數(shù)，自動選擇最佳的性能通道，這才是對算法工程師和數(shù)據(jù)科學(xué)家意義最大的。 3.強大的容錯能力 談到容錯，不得不再提一下MPI和MR。在Hadoop時代，海量低配機器理論的盛行，使MPI被MR打壓得很厲害。但是到了深度學(xué)...
...據(jù)抽取出來。 3、大多數(shù)情況下，很多業(yè)務(wù)由一兩個算法工程師負責挖掘，因而經(jīng)常會出現(xiàn)不同小組的建模工具不太統(tǒng)一或?qū)崿F(xiàn)流程不規(guī)范的情況。不統(tǒng)一會造成很多代碼重復(fù)率高，建模過程并沒有在團隊里很好地沉淀下來。 4...
...布的《2016年中國互聯(lián)網(wǎng)最熱職位人才報告》顯示，研發(fā)工程師、產(chǎn)品經(jīng)理、人力資源、市場營銷、運營和數(shù)據(jù)分析是當下中國互聯(lián)網(wǎng)行業(yè)需求最旺盛的六類人才職位。 其中數(shù)據(jù)分析人才最為稀缺、供給指數(shù)最低。同時，數(shù)據(jù)分...
...布的《2016年中國互聯(lián)網(wǎng)最熱職位人才報告》顯示，研發(fā)工程師、產(chǎn)品經(jīng)理、人力資源、市場營銷、運營和數(shù)據(jù)分析是當下中國互聯(lián)網(wǎng)行業(yè)需求最旺盛的六類人才職位。 其中數(shù)據(jù)分析人才最為稀缺、供給指數(shù)最低。同時，數(shù)據(jù)分...
本文最早為雙十一而作，原標題雙 11 大前端工程師讀書清單，以付費的形式發(fā)布在 GitChat 上。發(fā)布之后在讀者圈群聊中和讀者進行了深入的交流，現(xiàn)免費分享到這里，不足之處歡迎指教，也可以在我的 GitChat 讀者圈中進...
本文最早為雙十一而作，原標題雙 11 大前端工程師讀書清單，以付費的形式發(fā)布在 GitChat 上。發(fā)布之后在讀者圈群聊中和讀者進行了深入的交流，現(xiàn)免費分享到這里，不足之處歡迎指教，也可以在我的 GitChat 讀者圈中進...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說合適，...
圖示為GPU性能排行榜，我們可以看到所有GPU的原始相關(guān)性能圖表。同時根據(jù)訓(xùn)練、推理能力由高到低做了...
