發(fā)簡信
IP屬地：天津
-
命令行：Window cmd 遠程關(guān)閉服務(wù)器
wmic /node:10.8.154.63 /user:administrator /password:password process ca...
-
(l = buffer.readLine()) != null堵塞不釋放問題網(wǎng)絡(luò)請求數(shù)據(jù)過程中偶發(fā)遇到readline（）一直不結(jié)束問題： jps & jstack -l pid： 定位之后發(fā)現(xiàn)只這行：while ((l...
-
代理iP賬密請求https時報錯Proxy returns "HTTP/1.0 407 Proxy Authentication Required"
從公司的私有云機房遷到公有云機房后，對外是五個公網(wǎng)IP隨機呈現(xiàn)，購買的代理IP供應(yīng)商只能綁定一個授權(quán)公網(wǎng)IP，因此只能采取帳密方式。針對http...
-
抓取大眾點評商戶數(shù)據(jù)大眾點評商戶數(shù)據(jù)還是有難度的，特別是美食類的，字體做了加密，網(wǎng)上很多資料自己看下即可。 之前是實時搜索抓取，需要登錄賬號，而后干脆抓全量好了，全...
-
抓取微信公眾號思路就是：首先破解獲取公眾號的鏈接地址，注意鏈接地址是隨時變的， 然后自動翻頁，翻頁數(shù)自定義，最后解析即可~
-
多任務(wù)分布式調(diào)度算法——合理分配任務(wù)資源問題：A網(wǎng)站抓取需要8個小時，B網(wǎng)站需要半個小時，如果A網(wǎng)站先開始那么B網(wǎng)站需要8個小時候才能執(zhí)行到。如果A網(wǎng)站的緊迫性沒那么高，只期望能慢慢的...
-
Java將方法作為參數(shù)傳遞最近在用Java寫一套自研爬蟲框架，該框架可以通過簡單的配置就可以實現(xiàn)目標(biāo)網(wǎng)站的抓取，不再需要研發(fā)人員做開發(fā)，業(yè)務(wù)人員也能抓目標(biāo)網(wǎng)站哦，有興趣可...
-
屏蔽K8S中的POD訪問特定網(wǎng)址最近在看點評網(wǎng)站： 感覺里面防爬做的蠻好：驗證方面采用隨機驗證類型（滑塊、極驗、連連看等等還有其他）；而且網(wǎng)頁間的上下層級關(guān)聯(lián)性做的特別好，如果...
-
Sikulix運行win2012報錯：[error] RunTime:loadLib: opencv_java342.dll (failed) probably dependent libs m...
Sikulix運行在win7上面是好好的，想要移植到win server 2012報錯： 進入彈出的：https://github.com/Ra...