發(fā)簡(jiǎn)信
IP屬地：廣東
-
-
老年偵探團(tuán)
居于深夜的靈魂 總有那么一些貪婪 老年偵探團(tuán)是一班30歲左右的老年人所組成 以吸取這些靈魂為生的惡魔 他們以偵探為名 但卻是一群不擇不扣的邪惡之生靈 燈光在閃爍 老E蹭著墻在...
-
如何實(shí)現(xiàn)元宇宙產(chǎn)品-元管理
一、元宇宙產(chǎn)品 元宇宙產(chǎn)品的本質(zhì)是基于現(xiàn)有產(chǎn)品再進(jìn)行資源整合、矩陣內(nèi)資源互換等操作后產(chǎn)生的。 當(dāng)人們?cè)谟懻撛钪鏁r(shí)，其本質(zhì)就是探討在擁有廣大用戶的現(xiàn)有產(chǎn)品該如何整合，通過(guò)規(guī)模...
-
咖啡店新開(kāi)店擴(kuò)展模式1。前提 以下一切數(shù)據(jù)均來(lái)自于虛構(gòu)的平行世界。切勿當(dāng)真。 2。為什么要新開(kāi)店 1）假設(shè)紅色星星是店的所在地，紅色圓圈是該店顧客所在地（假設(shè)顧客只選取附近的咖啡店光顧）：首家店...
-
廿玖-Python 多線程之與 NodeJS 不同之處
1. 多線程與停等 一直寫著 JS，所以覺(jué)得，如果你在 Python 用一個(gè) threading.Timer 的話，就像 JS的 setTimeout 其余東西都是會(huì)繼續(xù)運(yùn)行...
-
廿捌-原爬蟲(chóng)項(xiàng)目加入客制化內(nèi)容，Python 讀取 URL 域名
1. 把客制化內(nèi)容加到原爬蟲(chóng)中 沖涼前剛完成客制化爬蟲(chóng)：廿柒- 客制化爬蟲(chóng)以及爬蟲(chóng)調(diào)參沖完涼轉(zhuǎn)瞬一想就覺(jué)得還是把他加到原爬蟲(chóng)不用維護(hù)兩個(gè)相似的項(xiàng)目了，不是更好？ 2. 在原項(xiàng)...
-
廿柒- 客制化爬蟲(chóng)以及爬蟲(chóng)調(diào)參1. 前文提要 前期用 Python 做了某些爬蟲(chóng)，但是發(fā)現(xiàn)有幾個(gè)問(wèn)題： 爬的內(nèi)容有很多未完全讀取網(wǎng)頁(yè)內(nèi)容的信息 前期只爬取 tag 為 的信息，但其實(shí)很多內(nèi)容在 ...
-
廿陸- Python 爬蟲(chóng) 異步改為同步加多進(jìn)程 以及 某著名社交網(wǎng)站爬蟲(chóng)設(shè)想
1. 前言 前幾天折騰了很久之后，發(fā)現(xiàn)有很多結(jié)果出來(lái)不滿意，反正是我自己個(gè)人的項(xiàng)目，所以其實(shí)沒(méi)什么所謂。但精益求精總是要的吧，反正在家閑著也是閑著。 2. 異步爬蟲(chóng)改回同步爬...
-
廿伍-爬蟲(chóng)接受JS渲染
1. 開(kāi)始 研究了好久，終于發(fā)現(xiàn)了如何做，不過(guò)無(wú)法異步完成，只能用 Supervisor 開(kāi)多進(jìn)程去做了。 2.使用 selenium 渲染JS 首先我必須放出參考文章 ht...
-
廿肆-Django 建設(shè) WebApp 管理 MongoDB 數(shù)據(jù)庫(kù)內(nèi)容
1. 緣起 前期爬了很多數(shù)據(jù)，我們需要有一個(gè)交互界面去判斷爬取的數(shù)據(jù)歸屬情緒是哪種。因?yàn)槌绦蚴遣渴鹪谠品?wù)器上的，所以當(dāng)然就是建立一個(gè) WebApp 去交互，而我前期又幫公司...
-
廿叁-Supervisor 配置 Django 被 Sqlite3 在 LD_LIBRARY_PATH 上坑了
1. Django簡(jiǎn)單運(yùn)行可以 前期說(shuō)想寫個(gè) Web App 做管理以及發(fā)布 API。廿貳-NodeJS簡(jiǎn)單代理池（承） 以及 Python 捉取網(wǎng)頁(yè)內(nèi)容寫好后在 Githu...
-
廿貳-NodeJS簡(jiǎn)單代理池（承） 以及 Python 捉取網(wǎng)頁(yè)內(nèi)容
1.關(guān)于 NodeJS 簡(jiǎn)單代理池 前面基本建設(shè)可以參考以前的文章：拾肆-NodeJS簡(jiǎn)單代理池（起）拾捌-NodeJS簡(jiǎn)單代理池（轉(zhuǎn)） 1.1 本次更新綜述 本次只是在看到...
-
廿壹-爬 URL 、Python 異步 、Supervisor 安裝配置等事宜
1.綜述 偽代碼 可以參考《廿-爬URL以及分詞情緒分析初步設(shè)想》，才發(fā)現(xiàn)這個(gè)要做一整天才做得出來(lái)，不過(guò)大部分時(shí)間都是用來(lái) 部署 服務(wù)器。 代碼放在大型同性交友網(wǎng)站其實(shí)根據(jù) ...
-
廿-爬URL以及分詞情緒分析初步設(shè)想
1.爬網(wǎng)絡(luò)頁(yè)面鏈接 其實(shí)是想捉取大量 網(wǎng)絡(luò)內(nèi)容 以對(duì)以后建立 情緒 爬蟲(chóng)作為 樣本 ，設(shè)想就是不斷把所有網(wǎng)絡(luò) 可讀取 的 頁(yè)面 都抓下來(lái)。 1.1 數(shù)據(jù)庫(kù)設(shè)計(jì) 以一個(gè) 數(shù)據(jù)庫(kù)...
-
拾玖-Python 異步 爬蟲(chóng) MongoDB 等事宜實(shí)施
1. 綜述 根據(jù)前期的 NodeJS 代理池開(kāi)展的爬蟲(chóng)終于有所進(jìn)展，技術(shù)實(shí)現(xiàn)已初步實(shí)現(xiàn)，相關(guān)引用資料如下所示： 爬蟲(chóng)http://c.biancheng.net/view/2...
-
拾捌-NodeJS簡(jiǎn)單代理池（轉(zhuǎn)）1.緣起 原本的架構(gòu)介紹如下：拾肆-NodeJS簡(jiǎn)單代理池（起） 然后今天為了做其他需要把這個(gè)完善一下。 2.配置文件 原本就沒(méi)用 ini 的配置文件存儲(chǔ)方式，所以就用一個(gè) ...
-
崔秉龍于2020年大年初五學(xué)習(xí)計(jì)劃
1.把前期做的代理池修改一下 (預(yù)計(jì)完成時(shí)間為0.75天) 修改主要有以下幾點(diǎn)： 爬出來(lái)的數(shù)據(jù)在保存的時(shí)候?qū)懭胧裁磿r(shí)候保存（存入日期） 不要一連不上就拋棄，需要在在保存數(shù)據(jù)內(nèi)...
-
亞馬遜開(kāi)店資料搜集
1. 開(kāi)店類型 區(qū)分為 個(gè)人銷售計(jì)劃 以及 專業(yè)銷售計(jì)劃 ，區(qū)別只在于是按售賣的 件數(shù) 收費(fèi)還是按 月費(fèi) 收費(fèi)，以及關(guān)于銷售數(shù)據(jù)報(bào)告（ 個(gè)人銷售計(jì)劃 無(wú)銷售報(bào)告）。其中可簡(jiǎn)單...
