電商數(shù)據(jù)分析平臺(tái)

前言

現(xiàn)在發(fā)文章拖得很慢,加上簡(jiǎn)書這個(gè)月禁止發(fā)文,過了半個(gè)月才寫了第二篇《打造數(shù)據(jù)蛙電商數(shù)據(jù)分析平臺(tái)》小結(jié)。無奈自己是一個(gè)業(yè)務(wù)猿,每天被公司的產(chǎn)品大人虐的死去活來,上周又病了一下休息了一周,請(qǐng)大家見諒。

最近看到數(shù)據(jù)蛙公眾號(hào)后臺(tái)留言,有朋友留言說道近兩年,傳統(tǒng)電商流量紅利已經(jīng)越來越少,短視頻和直播成為新的帶貨模式。在今年618期間,李佳琦在淘寶直播再度刷新戰(zhàn)績(jī):一場(chǎng)直播賣出15萬支唇釉;3分鐘內(nèi)賣出了5000單資生堂紅腰子;1分鐘售罄柳宗理鑄鐵鍋4萬口。只要在社交媒體上隨便一搜,就能搜到李佳琦帶貨能力有多強(qiáng),只要李佳琦他說出‘買它’兩個(gè)字,有的網(wǎng)友就像被附體一樣,看啥想買啥。



還看到有的朋友留言說剛?cè)胄须娚虜?shù)據(jù)分析不會(huì)處理數(shù)據(jù),首先,我們要知道什么叫數(shù)據(jù)分析。其實(shí)從數(shù)據(jù)到信息的這個(gè)過程,就是數(shù)據(jù)分析。因?yàn)閿?shù)據(jù)本身并沒有什么價(jià)值,有價(jià)值的是從數(shù)據(jù)中提取出來的信息。

為了讓數(shù)據(jù)蛙社區(qū)同學(xué)更好的學(xué)習(xí)數(shù)據(jù)分析,目前正在做一個(gè)電商數(shù)據(jù)分析平臺(tái),只作學(xué)習(xí)用。

一 規(guī)劃 平臺(tái)介紹

在電商平臺(tái)購(gòu)物時(shí)

會(huì)不會(huì)有以下的情況:

現(xiàn)在通常消費(fèi)者會(huì)花大量的時(shí)間在商品之間、電商平臺(tái)之間的來回比價(jià),消費(fèi)者都希望能買到價(jià)格劃算的筍貨,和自己的親朋好友攀比誰買的東西更優(yōu)惠劃算。因?yàn)樵谶@個(gè)時(shí)代沒有人會(huì)拒絕最劃算的價(jià)格

比如雙11這類的電商重大節(jié)日時(shí),即便價(jià)格跟對(duì)手僅僅相差幾元錢,也有可能損失一筆訂單。

電商平臺(tái)各種各樣的折扣信息,經(jīng)常性不能選擇關(guān)注指定商品。

想知道整個(gè)某寶上食品/衣服類目實(shí)時(shí)折扣力度最大的商品。

這是一個(gè)基于python爬蟲的實(shí)時(shí)價(jià)格監(jiān)控網(wǎng)站

我們打造一個(gè)類似這樣的價(jià)格監(jiān)控網(wǎng)站


實(shí)時(shí)價(jià)格監(jiān)控網(wǎng)站-圖片來自zhihu

添加商品-圖片來自zhihu

發(fā)送郵件功能-圖片來自zhihu

二 規(guī)劃 網(wǎng)站功能介紹(后續(xù)還會(huì)添加)

  • 實(shí)時(shí)采集電商商品價(jià)格
  • 建立和管理比價(jià)關(guān)系
  • 進(jìn)行比價(jià)運(yùn)算
  • 用戶通過瀏覽器登錄該網(wǎng)站
  • 用戶可設(shè)定email郵件通知
  • EXCEL報(bào)表輸出

三 規(guī)劃 網(wǎng)站架構(gòu)

爬蟲作為監(jiān)控手段,監(jiān)控商品的實(shí)時(shí)價(jià)格

Flask+ Scrapy爬蟲框架+代理池 + 數(shù)據(jù)庫(kù)

架構(gòu)圖
  • 采用Scrapy分布式爬蟲框架爬取整個(gè)品類的商品
  • 采用代理池提高整體采集效率
  • Web端:后臺(tái)會(huì)選擇網(wǎng)上推薦的Flask。
  • Flask中,涉及到使用Flask-Admin,F(xiàn)lask-Login等組件,搭建用戶注冊(cè)登錄系統(tǒng)。

四 規(guī)劃 電商公開數(shù)據(jù)

持續(xù)地自動(dòng)化地從(看圖片)某寶、某貓、某京東、某品會(huì)、某易購(gòu)、某當(dāng)?shù)染W(wǎng)站上采集商品信息,將下述信息從網(wǎng)頁上提取出來:


五 規(guī)劃 數(shù)據(jù)呈現(xiàn)

六 規(guī)劃 未來

這個(gè)項(xiàng)目正在和團(tuán)隊(duì)的小伙伴努力開發(fā)中,我也會(huì)一邊開發(fā)一邊總結(jié)。

環(huán)境搭建篇 2019-08-29 在此省略
(有興趣的童鞋可以點(diǎn)擊鏈接http://m.itdecent.cn/p/6ab0c0196a55
看看上一期的文章,有環(huán)境搭建篇看)

雛形篇

大家好,今天對(duì)于這個(gè)項(xiàng)目搭建進(jìn)行一個(gè)小結(jié),最近在刷vue的官方文檔了。在刷過文檔之后,我就想著,真實(shí)的項(xiàng)目是怎么樣子的呢,那么現(xiàn)在電商數(shù)據(jù)分析平臺(tái)已經(jīng)做出了簡(jiǎn)單的一個(gè)雛形

什么是Vue?

漸進(jìn)式JavaScript框架優(yōu)點(diǎn):
1 體積小 壓縮后 33K
2 更高的運(yùn)行效率
3 雙向數(shù)據(jù)綁定
4 生態(tài)豐富、學(xué)習(xí)成本低
5 對(duì)初學(xué)者友好,入門容易,資料多?

大家可以看下方圖片:

登陸

這個(gè)空白頁面畫上兩個(gè)input的框,一個(gè)是登錄賬號(hào),一個(gè)是登錄密碼。一個(gè)記住密碼的框框,再放置一個(gè)登錄按鈕。我們將登錄按鈕上綁上click事件,點(diǎn)擊登錄之后向服務(wù)端提交賬號(hào)和密碼進(jìn)行驗(yàn)證。 這就是一個(gè)簡(jiǎn)單的登錄頁面。


這兩個(gè)頁面是用于展示每個(gè)電商平臺(tái)的數(shù)據(jù)和可視化,因?yàn)閿?shù)據(jù)那邊還在準(zhǔn)備,現(xiàn)在暫時(shí)還沒數(shù)據(jù)看到,我們爭(zhēng)取本月讓這個(gè)項(xiàng)目上線

雛形篇的東西也差不多講完了,這里小編只是做一個(gè)簡(jiǎn)單的小結(jié),朋友們?nèi)绻惺裁聪敕ɑ蛘呓ㄗh歡迎去微信社群找群主凱旋聊聊說說,或者在公眾號(hào)留言
謝謝大家觀看!

添加公眾號(hào)【數(shù)據(jù)蛙DataFrog】,加入學(xué)習(xí)交流群,我們一起學(xué)習(xí)共進(jìn)步,2019齊加油
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容