資訊專欄INFORMATION COLUMN
摘要：編譯系統為了是更兼容當前使用的操作系統所以介紹下如何編譯當前使用平臺的準備軟件其他版本測試會有問題建議用的一種數據交換的格式，它獨立于語言，獨立于平臺平臺環境安裝略安裝解壓修改環境變量添加以下變量添加阿里源查找標簽安
hadoop+2.X編譯(centos系統)
為了是hadoop更兼容當前使用的操作系統 所以介紹下如何編譯當前使用平臺的hadoop
1.準備軟件jdk 1.8+
Maven 3.5.4
protobuf 2.5.0 (其他版本測試會有問題 建議用2.5.0)
google的一種數據交換的格式，它獨立于語言，獨立于平臺
hadoop-2.x.x-src
ant-1.9.7
平臺環境 centos 6.7
1.1 jdk安裝(略) 1.2 maven安裝解壓
cd /export/software/ tar -zxvf apache-maven-3.5.4-bin.tar.gz -C ../servers/ cd /export/servers/ mv apache-maven-3.5.4 maven-3.5.4/
修改環境變量
vim /etc/profile 添加以下變量 #maven export M2_HOME=/export/servers/maven-3.5.4 export PATH=$PATH:$M2_HOME/bin
添加阿里源()
查找mirrors 標簽1.3protobuf安裝alimaven aliyun maven http://maven.aliyun.com/nexus/content/groups/public/ central
官方github的安裝教程
yum install glibc-headers yum install gcc-c++ yum install gcc yum install make yum -y install autoconf automake yum -y install zlib zlib-devel openssl openssl-devel pcre-devel
解壓
tar -zxvf protobuf-2.5.0.tar.gz
編譯
cd /protobuf-2.5.0 ./ configure make make install
測試
protoc --version1.4CMake安裝
yum install cmake yum install openssl-devel yum install rses-devel1.5 ant安裝
解壓
tar -zxvf apache-ant-1.9.4-bin.tar.gz
配置變量
vim /etc/profile export ANT_HOME=/export/servers/apache-ant-1.9.7 export PATH=$PATH:$ANT_HOME/bin source /etc/profile
測試
ant -version2 編譯hadoop
解壓hadoop
tar -zxvf hadoop-2.7.5-src.tar.gz
查看環境要求
cd hadoop-2.7.5-src vim BUILDING.txt 東西太多自己看吧
編譯
cd hadoop-2.7.5-src mvn package -Pdist,native -DskipTests -Dtar 或者 mvn package -DeskipTests -Pdist,native
等待結果
cd
同樣在剛剛進行編譯的那個目錄下，有一個
hadoop-dist文件夾，進入里面的target文件夾，然后就可以看到編譯成功64位的hadoop文件，解壓后的在
hadoop-2.5.2 這個文件夾中，同時還生成了一個壓縮包：hadoop-2.5.2-tar.gz 這個壓縮包可以拷貝到別的centos-6.7機器上進行安裝
文章版權歸作者所有，未經允許請勿轉載,若此文章存在違規行為，您可以聯系管理員刪除。
轉載請注明本文地址：http://specialneedsforspecialkids.com/yun/77188.html
摘要：運行數據準備隨便準備一個文檔格式不限，上傳到上。解決因為原來是用的版本為相應的依賴包官網已經不再支持，所以更新的平臺的環境為，相應的文檔很少，更改版本為。星期六星期一由為知筆記遷移到。 0x01 環境說明 博客地址：http://www.cnblogs.com/ning-wang/p/7359977.html 1.1 本地 OS: windows 10jdk: jdk1.8.0_121...
摘要：博客原文這篇文章主要介紹如何在已有的框架上，自定義新的方法實現和的交互。在此之前，我們需要準備的源碼版本版本中采用了簡稱作為序列化和反序列化的工具，所以我們在修改源碼時需要按照相應規則編寫來實現數據的傳輸。 博客原文：hackershell 這篇文章主要介紹如何在已有的Hadoop RPC框架上，自定義新的方法實現和NameNode的交互。 在此之前，我們需要準備： h...
閱讀 1443·2021-11-22 13:54
閱讀 4323·2021-09-22 15:56
閱讀 1815·2021-09-03 10:30
閱讀 1318·2021-09-03 10:30
閱讀 2086·2019-08-30 15:55
閱讀 1851·2019-08-30 14:13
閱讀 2059·2019-08-29 15:19
閱讀 2341·2019-08-28 18:13
