1.應(yīng)用服務(wù)模擬器程序開(kāi)發(fā) 2.模擬程序Jar包上傳與分發(fā) 分發(fā)到第二臺(tái)和第三臺(tái)虛擬機(jī)--flume-1和flume-2 1.先在三臺(tái)機(jī)器的opt中創(chuàng)建jar并改為普通用戶權(quán)...
官方網(wǎng)址:http://flume.apache.org/ 1. Flume-3數(shù)據(jù)合并節(jié)點(diǎn)服務(wù)思路梳理 2.下載flume源碼并導(dǎo)入Idea開(kāi)發(fā)工具 下載并導(dǎo)入IDEA成功...
1.flume節(jié)點(diǎn)服務(wù)設(shè)計(jì) 前兩個(gè)負(fù)責(zé)收集和整理數(shù)據(jù),后面那個(gè)負(fù)責(zé)合并收集 2.flume版本下載安裝 官方版本:https://archive.apache.org/dis...
1.Kafka服務(wù)簡(jiǎn)介及版本下載安裝 1.官方版本:https://archive.apache.org/dist 2.搜索kafka_2.11-0.8.2.1.tgz版本 ...
1.下載hbase版本并安裝 官方版本:https://archive.apache.org/dist CDH版本:http://archive.cloudera.com/c...
1.HBase能做什么? 1.海量數(shù)據(jù)存儲(chǔ) 2.準(zhǔn)實(shí)時(shí)查詢 2.HBase在實(shí)際業(yè)務(wù)場(chǎng)景中的應(yīng)用 3.HBase的特點(diǎn) 4.HBase數(shù)據(jù)模型并舉例說(shuō)明 舉例說(shuō)明 5.HBa...
1.HDFS-HA架構(gòu)原理介紹 2.HDFS-HA 詳細(xì)配置 namenode namenode datanode datanode da...
本文介紹幾種目前常見(jiàn)的推薦系統(tǒng)的主要思路,后續(xù)會(huì)針對(duì)每個(gè)算法結(jié)合具體應(yīng)用場(chǎng)景再具體闡述下。1.協(xié)同過(guò)濾推薦算法 user-CF算法 item-CF算法 2.基于內(nèi)容的推薦算法...
1. zookeeper版本下載及安裝 1.下載網(wǎng)址 1.https://archive.apache.org/dist 2.http://archive.cloudera....
三、Hadoop2.x分布式集群配置-取消授權(quán) 1.繼續(xù)配置 Hdfs-site.xml 與core-site.xml 1.Hdfs-site.xml http://hado...
二、Hadoop2.x分布式集群部署-YARN 一、配置 一臺(tái)ResourceManage和三臺(tái)NodeManager 1.yarn分布式部署 1.Yarn-env.sh 配...
一、Hadoop2.x分布式集群部署-HDFS 1. hadoop2.x版本下載及安裝 https://archive.apache.org/dist http://arch...
這幾天跟著1點(diǎn)數(shù)據(jù)的金博老師 卡夫卡學(xué)習(xí)平臺(tái)的大數(shù)據(jù)項(xiàng)目實(shí)戰(zhàn)課程學(xué)習(xí)了 Linux環(huán)境的準(zhǔn)備和配置,企業(yè)項(xiàng)目的案例需求與設(shè)計(jì)和一些基礎(chǔ)概念,基本流程 收獲很大,老師人還特別好...
二、克隆虛擬機(jī)并進(jìn)行相關(guān)配置 1、創(chuàng)建我們將要使用的各個(gè)目錄 sudo mkdir /opt/softwares sudo mkdir /opt/modules sudo m...