問答專欄Q & A COLUMN
大數據即海量的數據，一般至少要達到TB級別才能算得上大數據，相比于傳統的企業內數據，大數據的內容和結構要更加多樣化，數值、文本、視頻、語音、圖像、文檔、XML、HTML等都可以作為大數據的內容。
提到大數據，最常見的應用就是大數據分析，大數據分析的數據來源不僅是局限于企業內部的信息化系統，還包括各種外部系統、機器設備、傳感器、數據庫的數據，如：政府、銀行、國計民生、行業產業、社交網站等數據，通過大數據分析技術及工具將海量數據進行統計匯總后，以圖形圖表的方式進行數據展現，實現數據的可視化，在此基礎上結合機器學習算法，對數據進行深度挖掘，發掘數據的潛在價值。
應用部分，大數據不僅包括企業內部應用系統的數據分析，還包括與行業、產業的深度融合，大數據分析的應用場景具有行業性，不同行業所呈現的內容與分析維度各不相同，具體場景包括：互聯網行業、政府行業、金融行業、傳統企業中的地產、醫療、能源、制造、電信行業等等。
1. 互聯網行業大數據的應用代表為電商、社交、網絡檢索領域，可以根據銷售數據、客戶行為（活躍度、商品偏好、購買率等）數據、交易數據、商品收藏數據、售后數據等、搜索數據刻畫用戶畫像，根據客戶的喜好為其推薦對應的產品。
2. 政府行業在大數據分析部分包括質檢部門、公安部門、氣象部門、醫療部門等，質檢部門包括對商品生產、加工、物流、貿易、消費全過程的信息進行采集、驗證、檢查，保證食品物品安全；氣象部門通過構建大氣運動規律評估模型、氣象變化關聯性分析等路徑，精準地預測氣象變化，尋找最佳的解決方案，規劃應急、救災工作。
3. 金融行業的大數據分析多應用于銀行、證券、保險等細分領域，在大數據分析方面結合多種渠道數據進行分析，客戶在社交媒體上的行為數據、在網站上消費的交易數據、客戶辦理業務的預留數據，結合客戶年齡、資產規模、消費偏好等對客戶群進行精準定位，分析其在金融業的需求等。
4. 傳統行業包括：能源、電信、地產、零售、制造等。電信行業借助大數據應用分析傳感器數據異常情況，預測設備故障，提高用戶滿意度；能源行業利用大數據分析挖掘客戶行為特征、消費規律，提高能源需求準確性；地產行業通過內外部數據的挖掘分析，使管理者掌握和了解房地產行業潛在的市場需求，掌握商情和動態，針對細分市場實施動態定價和差別定價等；制造行業通過大數據分析實現設備預測維護、優化生產流程、能源消耗管控、發現潛在問題并及時預警等。
伴隨著信息化的快速發展、數據量加大，已經進入數據時代，相信各行業間日后對于大數據的應用會更多、更深入。
評論0
加載中...
大數據的核心作用是數據價值化，簡單的說就是大數據讓數據產生各種“價值”，這個數據價值化的過程就是大數據要做的主要事情。
數據價值化的過程涉及到一個完整的產業鏈，包括數據的采集、整理、傳輸、存儲、安全、分析、呈現以及應用。其中數據的采集主要來源于物聯網和傳統信息系統，而數據的存儲和安全則依賴于云計算平臺，可以說大數據是物聯網和云計算發展到一定階段的必然結果，物聯網、云計算、大數據也被稱為第三次信息化浪潮的代表技術。
大數據有哪些具體的應用呢？目前大數據的應用體現在諸多領域，比較常見的有決策分析、推薦系統（電商平臺）、自動駕駛、語音識別、計算機視覺等領域，隨著大數據的不斷發展，大數據的應用將普及到越來越多的領域。
按照應用的對象來說，大數據的應用對象可以簡單的分為給人類提供輔助服務，以及為智能體提供決策服務。比如目前比較常見的大數據場景數據分析，場景數據分析的結果大部分情況下是給人類看的，通過這個分析的結果可以進一步輔助人類作出各種決策。
未來，大數據的應用將更多的服務于人工智能產品（智能體），現在人工智能的研究也開始以大數據為基礎展開，很多產品已經開始落地使用了。
從就業的角度來說，由于大數據的產業鏈能夠容納各種人才，所以未來大數據領域將是一個比較大的就業渠道，學習大數據是一個不錯的選擇。
大數據是我的主要研究方向之一，目前我也在帶大數據方向的研究生，我會陸續在我們寫一些關于大數據方面的文章，感興趣的朋友可以關注我的我們，相信一定會有所收獲。
如果有大數據方面的問題，也可以咨詢我。
謝謝！
評論0
加載中...
答，什么是大數據，這句詞意我熱衷想說的，應該算是我們國家的高端技術北斗衛星GPS吧，它的科技的魅力和技術功能，促發了人們第一生產力，科技含量至力于 當今的軍事國防的強盛，高鐵制造技術領先，橋梁工程民用建設，電力網絡，科技l通訊，電信網絡，智能手機，行車導航，人們生活息息相關事情，都離不開我們國家領先世界高尖端技術，北斗衛星GPS導航的功能。中國高端技術北斗衛星GPS作用給人類杰出貢獻，算得上是我們國家富民強國，人們盛夏共享科技的大數據。
評論0
加載中...
“Big Data is like teenage sex:Everyone talks about it，nobody really knows how to do it，everyone thinks everyone else is doing it，so everyone claims they are doing it too.”
2013年被稱為大數據元年，各行各業都逐漸開啟大數據應用時代。直至現在，大數據依然為人所津津樂道。
何為大數據？
1PB夠大嗎？
如果你沒有直觀印象，可以聯想一下你的電腦硬盤容量，標配是500G-1TB，大部分人用了一兩年，可能這部分容量都沒用完。而1PB=1024TB=1048576GB。
在實際中，一個小有名氣的游戲一天的數據量就在數十TB左右，甚至更多。
如果你以為PB單位已經是最大了？那就大錯特錯了！！！！
在PB之上，還有EB（Exabyte 百億億字節 艾字節），ZB（Zettabyte 十萬億億字節 澤字節），YB（Yottabyte 一億億億字節 堯字節），而這些單位也只是為了方便統計海量數據所給出的當前單位，在未來還可能出現更大的單位。
因特爾公司首席執行官Brian Krzanich表示，2020年互聯網用戶每天將產生1.5GB的數據。
HIS數據預測，到2025年，全球互聯網（IoT）連接設備的總安裝量預計將達到754.4億，這部分設備每天產生的數據量可想而知。
按照前面的數據關系，得出1ZB大概是1.1萬億GB，等同于全世界沙子數量總和。
從上圖中不難看出，互聯網數據每年都在爆炸式增長。當然，大數據并不只是數據量大而已，它還有其他更深的含義。
對于大數據，麥肯錫全球研究所給出的定義是：
”一種規模大到在獲取、存儲、管理、分析方面大大超出了傳統數據庫軟件工具能力范圍的數據集合。“
大數據具有五大特點，稱為5V。
1. 多樣（Variety）
大數據的多樣性是指數據的種類和來源是多樣化的，數據可以是結構化的、半結構化的以及非結構化的，數據的呈現形式包括但不僅限于文本，圖像，視頻，HTML頁面等等。
2. 大量（Volume）
大數據的大量性是指數據量的大小，這個就是上面筆者介紹的內容，不再贅述。
3. 高速（Velocity）
大數據的高速性是指數據增長快速，處理快速，每一天，各行各業的數據都在呈現指數性爆炸增長。在許多場景下，數據都具有時效性，如搜索引擎要在幾秒中內呈現出用戶所需數據。企業或系統在面對快速增長的海量數據時，必須要高速處理，快速響應。
4. 低價值密度（Value）
大數據的低價值密度性是指在海量的數據源中，真正有價值的數據少之又少，許多數據可能是錯誤的，是不完整的，是無法利用的。總體而言，有價值的數據占據數據總量的密度極低，提煉數據好比浪里淘沙。
5. 真實性（Veracity）
大數據的真實性是指數據的準確度和可信賴度，代表數據的質量。
數據一直都在，變革的是方式
大數據的意義不僅僅在于生產和掌握龐大的數據信息，更重要的是對有價值的數據進行專業化處理。
人類從來不缺數據，缺的是對數據進行深度價值挖掘與利用。可以說，從人類社會有了文字以來，數據就開始存在了，現在亦是如此。這其中唯一改變的是數據從產生，到記錄，再到使用這整個流程的形式。
1. 數據生產
在人類社會的早期，民以食為天，數據的產生大多與商品，食物，土地等掛鉤。舊石器時代的部落人民在樹枝或骨頭上刻下凹痕來記錄日常的交易活動或物品供應。
為了衡量商品長度，中國人發明了尺、里、寸、丈、步、仞等長度單位；為了衡量重量，發明了升、斗，斛等重量單位。
在互聯網時代，數據的生產變得更為容易。美國互聯網數據中心曾指出，互聯網上的數據每年都將增長50%，每兩年便將翻一倍，而目前世界上90%以上的數據是最近幾年才產生的。
每人每天都會產生海量數據，如視頻數據，電商數據，社交數據等等。
全球每60秒產生的數據
2. 數據記錄
千年之前，人們用龜甲石鼓、簡牘絹帛到造紙術成熟后的刻本等一切觸手可及的器物來作為數據的載體。
千年之后，人們用圖書，報紙，硬盤，光盤，存儲器等各種更為靈活，簡便的方式記錄數據。
3. 數據利用
古人利用利用甲骨文占卜判斷兇吉，利用占星術預測朝代興衰；利用螞蟻搬家，燕子低飛，蚯蚓出洞來預測天氣。
互聯網時代，企業或產品利用電商數據為用戶推薦商品，利用社交數據做廣告營銷等等。
在大數據概念興起之前，大部分企業并沒有注意到數據的寶貴價值，只是在純粹的生產和記錄數據。更有甚者視海量數據為累贅，因為數據的存儲與管理需要耗費企業大量的成本，極少有企業能把數據作為一種資源，嗅到大數據背后的價值，從而加以利用。就算到現在，數據資源的整合利用能力依然是考驗每個企業的一大難點。
大數據應用
大數據作為一個能夠改變產業應用的技術，只有切實落地才能帶來真正的價值。
其實大數據的應用范圍非常廣，不單單限于互聯網行業，在其他諸如金融，制造業，交通物流方面也都有非常大的應用價值。
1. 大數據讓借貸款更加放心
在金融行業中，以借貸款為例。在貸款前，貸款借出方會先利用大數據對借款人進行貸前審核，以此來保障貸后的還款率。
借出方從各個渠道合法收集借款人的標簽信息，如學歷，職業，薪資狀況，歷史借還款情況等（據說一個用戶的標簽維度可以達到7000個）。海量數據被放入反欺詐模型，還款能力模型，身份驗證模型等數個中做訓練，最終得出是否通過本次貸款申請，貸款的額度，貸款人的還款意愿等評估信息。
借款人數據收集的越多，標簽維度越細，數據越真實，則審核效果越全面。
2. 大數據讓廣告營銷更高效
廣告作為互聯網行業最常見的變現手段之一，大數據賦能廣告營銷，讓廣告從惹人惱轉變為廣告即內容，廣告即服務。
曾幾何時，你會發現日常生活中看到的廣告居然那么懂你。點開淘寶，你最愛的商品被推薦在Banner首頁；打開微信朋友圈，映入眼簾的是你正想要做的汽車保養；打開百度搜索，你前兩天看的別墅信息赫然出現。
這一切的實現都得益于大數據賦能廣告。
在廣告投放前期，通過大數據手段大量的整合、分析數據，包括用戶的瀏覽習慣、消費行為、瀏覽記錄、對廣告的點擊數量等，并從中挖掘出有效的信息；構建全面的用戶畫像，結合廣告業務，精準定位目標用戶，保證廣告定向投放。
大數據構建用戶畫像
在廣告投放的中后期，通過實時數據反饋，結合用戶所處地域，時間的變化，動態優化廣告素材，調整廣告的呈現方式與廣告的展覽位置，讓同一個用戶在不同的場景下享受不一樣的廣告服務，實現一人千面，增加廣告營銷效果，提升廣告主KPI。
3. 大數據賦能零售
新零售時代，客戶的需求無時無刻不在變化，大數據賦能零售，讓零售在人，貨，場上進行變革。
零售商可以借助大數據對未來市場需求進行預測，搶先一步對庫存進行管理。在流量高發的前期，及時補足庫存，提升商品供應率；在流量散去的前期，及時去庫存，避免庫存積壓。
借助大數據分析用戶地域分布情況，商店流量，消費者習慣等那個，在合適的地區開設商店，建造倉庫。在物流發貨時，從數據出發，合理規劃運輸路勁，降低運輸成本。
利用數據還可以統一上下游供應鏈交互，解決數據不對成問題，減小牛鞭效應，提升供應鏈中每個環節的利用效率。
總結
數據一直都在，大數據變革的只是方式。大數據并不神秘，神秘的是對未知數據的探索與利用。
評論0
加載中...
大數據就是將宏觀的經濟調控，通過計算機進行云計算后，將微觀的供求信息準確、快速的提供給供需雙方的過程。直觀的說，就是將供需雙方同時置于一個較大的〝商品展銷會〞現場，讓供需雙方能夠以最快的時間實現自已的目的。例如，目前國內的ucloud巴巴、滴滴平臺、美團等等，都是應用的大數據。
評論0
加載中...
首先，結合了大數據分析和天氣建模技術的能源電力系統能夠提高風電的可靠性。以往對風資源的預測不夠精準，在風能無法貢獻預期功力時，火電就要作為后備電力。這樣，電網對風電的依賴程度越高，需要建設后備電站的成本就越高。另外，啟用火電站的就等于向環境中釋放碳排。然而，在大數據分析的幫助下，溫度、氣壓、濕度、降雨量、風向和風力等變量都得到充分考慮，對風電的預測更加精準。電網調度人員可以提前做好調度安排，也有助于電網消納更多風電。
除了做到更精準的預測，檢測和采集風機的運轉數據、風場的運營數據還有利于風機制造商更好地改善風機的性能，風電場業主在追求風場效益最大化時也離不開大數據。
大數據在風電領域的應用前景看起來很美，但當前存在的問題是，將風機、風場的數據匯集起來并非易事。這些數據分散在風機制造商、風場業主、系統運營商和運維服務商等多個環節手中，他們能從這些數據中得到利益卻無法做到合理分配，所以，有些利益相關方寧愿不分享這些數據。
知識產權問題也是大數據影響風電進程的一個攔路虎。試想，如果多家風機制造商都公開風機的設計數據，那將是整個行業的幸事，通過交流和分享，風機的設計會有所改善性，性能會提高。但出于商業競爭考慮，風機制造商往往將這些數據視為商業機密、競爭利器，不愿公開。同理，風場業主收集和保存的風電運行數據不但有助于他們做出更好的業務決策，也有利于第三方運維企業提供更好的服務，但在實際情況下，運維商卻很難得到這些數據。
風電行業的意義在于向終端消費者提供更穩定、更清潔、更廉價的電力，這是行業存在合理性的根據，也是業界努力的方向。共建并分享運營數據，進而激發這些數據的全部潛力才是風電行業迎接大數據時代的應有姿態。
還用于網絡日志，RFID，傳感器網絡，社會網絡，社會數據（由于數據革命的社會），互聯網文本和文件;互聯網搜索索引;呼叫詳細記錄，天文學，大氣科學，基因組學，生物地球化學，生物，和其他復雜和/或跨學科的科研，軍事偵察，醫療記錄;攝影檔案館視頻檔案;和大規模的電子商務 。籃球比賽當中利用大數據對球員的個人在比賽場上的數據分析，可以幫助比賽變得更加精彩。
評論0
加載中...
大數據的意思就是在線數據，這樣你的數據才能有價值，用于分析或者處理，大量的數據在線后的分析才更有意義，得到你想要的數據。大數據的應用如今越來越廣泛，基本上各行各業都可以運用到大數據進行精準化的應用、分析、預測等。對于大數據應用的工具有很多，據我所知，國內的finereport也不錯，類excel界面，特色功能報表制作，報表權限分配，報表管理，還有填報（網數據庫填數），支持各種數據庫，能去各種數據源，專門解決復雜的中國式報表。
評論0
加載中...
大數據指無法在一定時間范圍內用常規軟件工具進行捕捉、管理和處理的數據集合。通過大量的統計了解大家的喜好，想要的東西，從而得到他們想要的，比如精準營銷，征信分析，消費分析等等
評論0
加載中...10
回答10
回答10
回答0
回答0
回答0
回答0
回答0
回答0
回答0
回答
