發(fā)簡信
IP屬地：天津
-
ChatGPT
Google 研究者發(fā)表了題為“大型語言模型的涌現(xiàn)能力”（Emergent Abilities of Large Language Models...
-
深度學(xué)習(xí)-知識蒸餾
出于計(jì)算資源的限制或效率的要求，深度學(xué)習(xí)模型在部署推斷時(shí)往往需要進(jìn)行壓縮，模型蒸餾是其中一種常見方法。將原始數(shù)據(jù)集上訓(xùn)練的重量級（cumbers...
-
深度學(xué)習(xí): BatchNorm 和 LayerNorm 的區(qū)別與聯(lián)系
在深度學(xué)習(xí)中，Normalization 是十分常規(guī)的操作。在神經(jīng)網(wǎng)絡(luò)訓(xùn)練開始前，都要對輸入數(shù)據(jù)進(jìn)行歸一化處理，那為什么需要?dú)w一化呢？歸一化后有...
-
神經(jīng)網(wǎng)絡(luò)與深度學(xué)習(xí)1 前饋神經(jīng)網(wǎng)絡(luò) 在神經(jīng)網(wǎng)絡(luò)中，輸入層與輸出層之間的層稱為隱含層或隱層（hidden layer），隱層和輸出層的神經(jīng)元都是具有激活函數(shù)的功能神...
-
文本表示: 從 One-Hot 到 Word2Vec在自然語言處理（NLP）領(lǐng)域，如何對文本這種非結(jié)構(gòu)化的數(shù)據(jù)進(jìn)行表示是 NLP 的一個(gè)重要研究方向。 One-Hot One-Hot Encodi...
-
決策樹的剪枝與分類回歸樹
1.決策樹的過擬合問題 決策樹生成算法遞歸地產(chǎn)生決策樹，直到不能繼續(xù)下去為止。通過這樣的方式產(chǎn)生的決策樹容易產(chǎn)生過擬合問題。過擬合的原因在于學(xué)習(xí)...
-
LeetCode 雙指針類題解881. Boats to Save People Note:1 <= people.length <= 500001 <= people[i]...
-
Decision Tree 決策樹
閱讀《李航統(tǒng)計(jì)學(xué)習(xí)方法》中p55-p58頁總結(jié)決策樹模型結(jié)構(gòu)理解決策樹遞歸思想 閱讀《李航統(tǒng)計(jì)學(xué)習(xí)》中p58-p63頁學(xué)習(xí)信息增益學(xué)習(xí)信息增益率...
-
Machine Learning：信息論基礎(chǔ)信息論是應(yīng)用數(shù)學(xué)的一個(gè)分支，主要研究的是對一個(gè)信號包含信息的多少進(jìn)行量化。它最初被發(fā)明是用來研究在一個(gè)含有噪聲的信道上用離散的字母表來發(fā)送消息，...