發(fā)簡(jiǎn)信
IP屬地：廣東
-
where 1=1 是什么意思？？？
where 1=1 先來看一段代碼 上面的代碼很熟悉，就是查詢符合條件的總條數(shù)。在mybatis中常用到if標(biāo)簽判斷where子句后的條件，為防...
-
Hive參數(shù)與性能企業(yè)級(jí)調(diào)優(yōu)（建議收藏）
Hive作為大數(shù)據(jù)平臺(tái)舉足輕重的框架，以其穩(wěn)定性和簡(jiǎn)單易用性也成為當(dāng)前構(gòu)建企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)時(shí)使用最多的框架之一。 但是如果我們只局限于會(huì)使用Hiv...
-
千萬(wàn)級(jí)數(shù)據(jù)查詢：CK、ES、RediSearch怎么選?目錄 前言 初版設(shè)計(jì)方案 CK 分頁(yè)查詢 使用ES Scroll Scan 優(yōu)化深翻頁(yè) ES+Hbase 組合查詢方案 RediSearch+R...
-
如何解決Elasticsearch的深度翻頁(yè)問題
使用ES做搜索引擎拉取數(shù)據(jù)的時(shí)候，如果數(shù)據(jù)量太大，通過傳統(tǒng)的from + size的方式并不能獲取所有的數(shù)據(jù)（默認(rèn)最大記錄數(shù)10000），因?yàn)殡S...
-
一次SQL查詢優(yōu)化原理分析：900W+數(shù)據(jù)，從17s到300ms（減少回表查詢）有一張財(cái)務(wù)流水表，未分庫(kù)分表，目前的數(shù)據(jù)量為9555695，分頁(yè)查詢使用到了limit，優(yōu)化之前的查詢耗時(shí)16 s 938 ms (execut...
-
7000字，詳解倉(cāng)湖一體架構(gòu)！一、 什么是數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)集市和數(shù)據(jù)湖？ 1、數(shù)據(jù)倉(cāng)庫(kù) 早期系統(tǒng)采用數(shù)據(jù)庫(kù)來存放管理數(shù)據(jù)，但是隨著大數(shù)據(jù)技術(shù)的興起，大家想要通過大數(shù)據(jù)技術(shù)來找...
-
Kafka 萬(wàn)億級(jí)消息實(shí)踐之資源組流量掉零故障排查分析一、Kafka 集群部署架構(gòu) 為了讓讀者能與小編在后續(xù)的問題分析中有更好的共鳴，小編先與各位讀者朋友對(duì)齊一下我們 Kafka 集群的部署架構(gòu)及服...
-
數(shù)據(jù)狂歡-解析數(shù)據(jù)集市|學(xué)習(xí)筆記一、怎么正確理解數(shù)據(jù)集市 舉個(gè)例子： 數(shù)據(jù)集市就像宜家樓上的展廳，這是一個(gè)面向最終用戶的數(shù)據(jù)市場(chǎng)，在這里，數(shù)據(jù)（家具）以一種更加容易被業(yè)務(wù)人員接...
-
Flink重點(diǎn)難點(diǎn)：維表關(guān)聯(lián)理論和Join實(shí)戰(zhàn)Flink 案例實(shí)戰(zhàn)演練 Flink維表Join實(shí)踐 常見的維表Join方式有四種： 預(yù)加載維表 熱存儲(chǔ)維表 廣播維表 Temporal tab...