最近整理了數(shù)據(jù)倉庫推薦經(jīng)典書籍資料包，學(xué)習(xí)數(shù)據(jù)倉庫必備，包含下面的內(nèi)容，包含《阿里巴巴大數(shù)據(jù)之路》和《數(shù)據(jù)倉庫工具箱》等經(jīng)典書籍PDF，帶書簽，...
投稿
收錄了357篇文章 · 482人關(guān)注
-
11本數(shù)據(jù)倉庫大數(shù)據(jù)開發(fā)推薦經(jīng)典書籍資料包分享 -
用幾行腳本解決了困擾了客戶一周的需求
背景 近日云上Elasticsearch的客戶，提過來了一個需求，期望把上游業(yè)務(wù)的日志中的一些無用字段從ES中刪除掉，這些字段的名稱是固定位數(shù)的...
-
Elasticsearch ILM Shrink Action源碼優(yōu)化與探討1. 背景 在之前的一篇文章"PB級大規(guī)模Elasticsearch集群的運維與調(diào)優(yōu)實踐"中，指出了在集群每天產(chǎn)生大量分片，并且索引不能刪除的情...
-
誤刪除Elasticsearch ILM Rollover Action滾動生成的索引后怎么解決
背景 有一天收到告警，顯示用于存儲日志的es集群磁盤使用率超過了85%，因此登陸kibana進(jìn)行一番查看，發(fā)現(xiàn)該集群有很多幾個月之前的索引，直接...
-
Elasticsearch寫入時既要upsert又要實現(xiàn)部分更新
背景 客戶為了實現(xiàn)search after功能，必須有一個modify_at字段在更新doc的時候不能修改，也就是更新的時候如果請求body里包...
-
騰訊云Logstash實戰(zhàn)5-讀取COS中的日志文件并寫入到Elasticsearch在某些業(yè)務(wù)場景中，業(yè)務(wù)服務(wù)端的日志或者是云上組件的日志會歸檔存儲到對象存儲COS中，在需要進(jìn)行查詢的時候需要從COS中獲取并查詢?nèi)罩?，此時可以借...
-
騰訊云Logstash實戰(zhàn)4-使用Logstash消費kafka數(shù)據(jù)并寫入到Elasticsearch
Logstash的一個典型應(yīng)用場景，就是消費kafka中的數(shù)據(jù)并且寫入到Elasticsearch, 使用騰訊云Logstash[https:/...
-
騰訊云Logstash實戰(zhàn)1-同步兩個Elasticsearch集群中的數(shù)據(jù)使用Logstash也可以完成同步兩個Elasticsearch集群中的數(shù)據(jù)，比如把數(shù)據(jù)從自建的Elasticsearch集群同步到騰訊云上的E...
-
搞定Python時區(qū)的N種姿勢
全球化應(yīng)用里經(jīng)常要對時間點進(jìn)行時區(qū)轉(zhuǎn)換，這里通過將本地時間轉(zhuǎn)換為指定時區(qū)時間為例，介紹幾種Python處理時區(qū)轉(zhuǎn)換的方法。 本地時間（UTC8）...
-
分布式理論(一)——一致性理論基礎(chǔ)
CAP 理論 2000 年 7 月，加州大學(xué)伯克利分校的 Eric Brewer 教授在 ACM PODC 會議上提出 CAP 猜想。2 年后，...
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1881139527',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','https://upload.jianshu.io/collections/images/242178/1457518805.jpg', '推薦專題《大數(shù)據(jù)&云計算》（ 分享自 @簡書 ）','http://m.itdecent.cn/c/2e50f8b029a4?utm_campaign=maleskine&utm_content=collection&utm_medium=reader_share&utm_source=weibo','頁面編碼gb2312|utf-8默認(rèn)gb2312'));){kind=link}