Java大數(shù)據(jù)內(nèi)存序列化淺談（一）

Lycheeee 發(fā)布于2019-08-14 12:02 / 2276人閱讀

摘要：談任何技術(shù)前，不討論實(shí)際的應(yīng)用場景都是耍流氓。業(yè)務(wù)只讀不寫，且數(shù)據(jù)量不大，這兩個(gè)特性很大程度上決定了我們的系統(tǒng)架構(gòu)。

談任何技術(shù)前，不討論實(shí)際的應(yīng)用場景都是耍流氓。

首先說下自身項(xiàng)目背景。業(yè)務(wù)只讀不寫，且數(shù)據(jù)量不大，這兩個(gè)特性很大程度上決定了我們的系統(tǒng)架構(gòu)。

  Step 0 數(shù)據(jù)平臺(tái)持久化數(shù)據(jù)到數(shù)據(jù)庫（SQLServer）中,然后壓縮數(shù)據(jù)庫文件成壓縮文件
Step 1 上傳壓縮文件到云端，利用云端進(jìn)行自動(dòng)同步
Step 2 通知各個(gè)節(jié)點(diǎn)下載數(shù)據(jù)，下載到指定目錄
Step 3 解壓文件，附加數(shù)據(jù)庫文件為新庫
Step 4 節(jié)點(diǎn)讀取新數(shù)據(jù)庫數(shù)據(jù)到內(nèi)存，新舊數(shù)據(jù)內(nèi)存切換，新數(shù)據(jù)生效，舊數(shù)據(jù)失效

通過描述看到我們的業(yè)務(wù)服務(wù)器其實(shí)把數(shù)據(jù)庫作為一個(gè)臨時(shí)數(shù)據(jù)存儲(chǔ)，一旦讀取過新數(shù)據(jù)，便不再訪問數(shù)據(jù)庫，因?yàn)閿?shù)據(jù)全部讀到內(nèi)存當(dāng)中。我們

USDP大數(shù)據(jù)平臺(tái) 托管Hadoop集群 java內(nèi)存占用大大數(shù)據(jù)內(nèi)存數(shù)據(jù)庫大數(shù)據(jù)一 java查看內(nèi)存數(shù)據(jù)

文章版權(quán)歸作者所有，未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為，您可以聯(lián)系管理員刪除。

轉(zhuǎn)載請注明本文地址：http://specialneedsforspecialkids.com/yun/64248.html

相關(guān)文章

Java學(xué)習(xí)路線總結(jié)，搬磚工逆襲Java架構(gòu)師（全網(wǎng)最強(qiáng)）

摘要：哪吒社區(qū)技能樹打卡打卡貼函數(shù)式接口簡介領(lǐng)域優(yōu)質(zhì)創(chuàng)作者哪吒公眾號(hào)作者架構(gòu)師奮斗者掃描主頁左側(cè)二維碼，加入群聊，一起學(xué)習(xí)一起進(jìn)步歡迎點(diǎn)贊收藏留言前情提要無意間聽到領(lǐng)導(dǎo)們的談話，現(xiàn)在公司的現(xiàn)狀是碼農(nóng)太多，但能獨(dú)立帶隊(duì)的人太少，簡而言之，不缺干 ? 哪吒社區(qū)Java技能樹打卡?【打卡貼 day2...

Scorpion 2021-11-18 10:02 評(píng)論0 收藏0
淺談java中的并發(fā)控制

摘要：并發(fā)需要解決的問題功能性問題線程同步面臨兩個(gè)問題，想象下有兩個(gè)線程在協(xié)作工作完成某項(xiàng)任務(wù)。鎖可用于規(guī)定一個(gè)臨界區(qū)，同一時(shí)間臨界區(qū)內(nèi)僅能由一個(gè)線程訪問。并發(fā)的數(shù)據(jù)結(jié)構(gòu)線程安全的容器，如等。并發(fā)指在宏觀上的同一時(shí)間內(nèi)同時(shí)執(zhí)行多個(gè)任務(wù)。為了滿足這一需求，現(xiàn)代的操作系統(tǒng)都抽象出線程的概念，供上層應(yīng)用使用。這篇博文不打算詳細(xì)展開分析，而是對java并發(fā)中的概念和工具做一個(gè)梳理。沿著并發(fā)模...

Gilbertat 2019-08-16 12:39 評(píng)論0 收藏0
淺談 Java 字符串（String, StringBuffer, StringBuilder）

摘要：與類基本相同，都是可變字符換字符串序列，不同點(diǎn)是是線程安全的，是線程不安全的。和區(qū)別在大部分情況下是線程安全的可變字符序列。在程序中可將字符串緩沖區(qū)安全地用于多線程。轉(zhuǎn)載自飄過的小牛我們先要記住三者的特征： String 字符串常量 StringBuffer 字符串變量（線程安全） StringBuilder 字符串變量（非線程安全）一、定義 showImg(/...

ShowerSun 2019-08-14 12:10 評(píng)論0 收藏0
淺談Java并發(fā)編程系列（四）—— 原子性、可見性與有序性

摘要：內(nèi)存模型是圍繞著在并發(fā)過程中如何處理原子性可見性和有序性這個(gè)特征來建立的，我們來看下哪些操作實(shí)現(xiàn)了這個(gè)特性。可見性可見性是指當(dāng)一個(gè)線程修改了共享變量的值，其他線程能夠立即得知這個(gè)修改。 Java內(nèi)存模型是圍繞著在并發(fā)過程中如何處理原子性、可見性和有序性這3個(gè)特征來建立的，我們來看下哪些操作實(shí)現(xiàn)了這3個(gè)特性。原子性（atomicity）：由Java內(nèi)存模型來直接保證原子性變量操作包括...

tianren124 2019-08-14 15:50 評(píng)論0 收藏0
Java開發(fā) 大廠面試整理

摘要：用戶態(tài)不能干擾內(nèi)核態(tài)所以指令就有兩種特權(quán)指令和非特權(quán)指令不同的狀態(tài)對應(yīng)不同的指令。非特權(quán)指令所有程序均可直接使用。用戶態(tài)常態(tài)目態(tài)執(zhí)行非特權(quán)指令。這是我今年從三月份開始，主要的大廠面試經(jīng)過，有些企業(yè)面試的還沒來得及整理，可能有些沒有帶答案就發(fā)出來了，還請各位先思考如果是你怎么回答面試官？這篇文章會(huì)持續(xù)更新，請各位持續(xù)關(guān)注，希望對你有所幫助！面試清單平安產(chǎn)險(xiǎn) 飛豬上汽大通浩鯨科...

Scorpion 2019-08-16 17:18 評(píng)論0 收藏0