發(fā)簡信
IP屬地：臺灣
-
一文串起從NLP到CV 預(yù)訓(xùn)練技術(shù)和范式演進
本文首發(fā)于｜微｜信｜公｜眾｜號｜：包包算法筆記。包大人班車原創(chuàng)內(nèi)容分享。 主題是深度學(xué)習(xí)中的預(yù)訓(xùn)練技術(shù)發(fā)展，基本思路是順著CV和NLP雙線的預(yù)訓(xùn)...
-
深度學(xué)習(xí)調(diào)參技巧 調(diào)參trick
｜公｜眾｜號｜包包算法筆記｜ 背景 事情的起因其實這樣，實驗室老同學(xué)的論文要沖分，問我有沒有啥在NN上，基本都有用的刷點方法，最好是就是短小精悍...
-
Bert原理： Rethinking Positional Encoding in Language Pre-training
背景 之前在知乎上回答了一個問題，為什么Bert的三個Embedding可以相加。這是個老問題了。這次重答一下順便打自己臉，然后推一下國霖（Li...
-
對比學(xué)習(xí) RDrop: Regularized Dropout for Neural Networks
關(guān)注微|信|公|眾|號 包包算法筆記 背景 今天給大家講一點輕松又有用的：5行代碼實現(xiàn)的對比學(xué)習(xí)，效果超好！ 其實我特別喜歡這類方法，足夠簡單明...
-
算法工業(yè)界文本分類避坑指南完整的思維導(dǎo)圖關(guān)注包包算法筆記回復(fù)【避坑指南】獲取下載查看鏈接。 公眾號包包算法筆記，包包（包大人）的機器學(xué)習(xí)筆記，分享算法，機器學(xué)習(xí)，程序員，...
-
關(guān)于web.py頁面靜態(tài)資源加載慢的問題記一個程序員改bug的心路歷程，以及具體的方法。方法論上可以模仿，具體的過程謹(jǐn)慎嘗試，生命寶貴。 起因 2017年夏天的風(fēng)靜靜地吹過，敲著鍵盤，...
-
一種使用快速、簡單有效的文本分類方法
問題及需求 使用CNN，LSTM，Attention based model建立一個文本分類深度模型固然很好很強大，但是實際情況是，數(shù)據(jù)集和模型...
-
pymysql訪問數(shù)據(jù)庫線程安全問題
訪問數(shù)據(jù)庫的線程安全等級在下表中定義：Integer constant stating the level of thread safety t...