Google 研究者發(fā)表了題為“大型語言模型的涌現(xiàn)能力”（Emergent Abilities of Large Language Models）的論文，考察了以 GPT-3...
發(fā)簡信
IP屬地：重慶
-
ChatGPT
-
深度學(xué)習(xí)-知識蒸餾
出于計算資源的限制或效率的要求，深度學(xué)習(xí)模型在部署推斷時往往需要進(jìn)行壓縮，模型蒸餾是其中一種常見方法。將原始數(shù)據(jù)集上訓(xùn)練的重量級（cumbersome）模型作為教師，讓一個相...
-
深度學(xué)習(xí): BatchNorm 和 LayerNorm 的區(qū)別與聯(lián)系
在深度學(xué)習(xí)中，Normalization 是十分常規(guī)的操作。在神經(jīng)網(wǎng)絡(luò)訓(xùn)練開始前，都要對輸入數(shù)據(jù)進(jìn)行歸一化處理，那為什么需要歸一化呢？歸一化后有什么好處呢？ 機器學(xué)習(xí)領(lǐng)域有個...
-
-
態(tài)度決定命運，Vision決定前途
-
神經(jīng)網(wǎng)絡(luò)與深度學(xué)習(xí)1 前饋神經(jīng)網(wǎng)絡(luò) 在神經(jīng)網(wǎng)絡(luò)中，輸入層與輸出層之間的層稱為隱含層或隱層（hidden layer），隱層和輸出層的神經(jīng)元都是具有激活函數(shù)的功能神經(jīng)元。只需包含一個隱層便可以稱...
-
文本表示: 從 One-Hot 到 Word2Vec在自然語言處理（NLP）領(lǐng)域，如何對文本這種非結(jié)構(gòu)化的數(shù)據(jù)進(jìn)行表示是 NLP 的一個重要研究方向。 One-Hot One-Hot Encoding 在說文本 One-Hot...
-
@Nise9s 謝謝提醒，已經(jīng)修正
詳解編輯距離(Edit Distance)及其代碼實現(xiàn)
概述 編輯距離（Minimum Edit Distance，MED），由俄羅斯科學(xué)家 Vladimir Levenshtein 在1965年提出，也因此而得名 Levensh...
-
感謝提醒，當(dāng)初寫的時候確實沒有太注意，現(xiàn)在已經(jīng)修正。多謝！
詳解編輯距離(Edit Distance)及其代碼實現(xiàn)
概述 編輯距離（Minimum Edit Distance，MED），由俄羅斯科學(xué)家 Vladimir Levenshtein 在1965年提出，也因此而得名 Levensh...
-
決策樹的剪枝與分類回歸樹
1.決策樹的過擬合問題 決策樹生成算法遞歸地產(chǎn)生決策樹，直到不能繼續(xù)下去為止。通過這樣的方式產(chǎn)生的決策樹容易產(chǎn)生過擬合問題。過擬合的原因在于學(xué)習(xí)時過多地考慮如何提高對訓(xùn)練數(shù)據(jù)...
-
LeetCode 雙指針類題解881. Boats to Save People Note:1 <= people.length <= 500001 <= people[i] <= limit <= 30000
-
Decision Tree 決策樹
閱讀《李航統(tǒng)計學(xué)習(xí)方法》中p55-p58頁總結(jié)決策樹模型結(jié)構(gòu)理解決策樹遞歸思想 閱讀《李航統(tǒng)計學(xué)習(xí)》中p58-p63頁學(xué)習(xí)信息增益學(xué)習(xí)信息增益率 閱讀《李航統(tǒng)計學(xué)習(xí)》中p63...
-
Machine Learning：信息論基礎(chǔ)信息論是應(yīng)用數(shù)學(xué)的一個分支，主要研究的是對一個信號包含信息的多少進(jìn)行量化。它最初被發(fā)明是用來研究在一個含有噪聲的信道上用離散的字母表來發(fā)送消息，例如通過無線電傳輸來通信。信息...
-
Logistic Regression推導(dǎo) sigmoid 推導(dǎo)LR損失函數(shù) 推導(dǎo)LR梯度下降 Softmax原理 softmax 損失函數(shù) softmax 梯度下降 Python 實現(xiàn) LR sigmoid 函...
-
鏈表類算法題匯總
算法題目中?？疾斓逆湵聿僮鳠o非以下幾種： 鏈表反轉(zhuǎn) 鏈表合并 尋找鏈表中點 尋找鏈表倒數(shù)第 K 個節(jié)點 刪除鏈表節(jié)點 判斷鏈表是否有環(huán) 兩個鏈表的第一個公共節(jié)點 復(fù)雜鏈表的復(fù)...
-
2019-05-27
Symmetric TreeGiven a binary tree, check whether it is a mirror of itself (ie, symmetri...
-
Machine Learning (4)
貝葉斯公式推導(dǎo)，樸素貝葉斯公式 學(xué)習(xí)先驗概率 學(xué)習(xí)后驗概率 LR 和 Linear Regression 之間的區(qū)別與聯(lián)系 推導(dǎo) sigmoid function 公式 一、...
-
幾道有關(guān)二叉樹 DFS 和 BFS 的算法題
102. Binary Tree Level Order Traversal Given a binary tree, return the level order trav...
