一、保持專注,自己動腦,形成自己的想法 專注,對于我們大多數(shù)人而言幾乎有些奢侈。 當(dāng)我們想做一件事情時,我們的注意力總是自覺不自覺被其他的事情所吸引。 手機(jī)屏幕亮了響了,忍不...
1. 引言 2. 分析 數(shù)據(jù)從mongodb中獲取 每頁顯示多少條數(shù)據(jù) 翻頁功能有前一頁,顯示當(dāng)前頁和總頁數(shù),后一頁 3. 實(shí)現(xiàn) 3.1 在settings.py中增加mon...
1. 引言 2. 分析 利用pycharm搭建互不影響的虛擬工作空間 創(chuàng)建Django項(xiàng)目 創(chuàng)建相關(guān)目錄, 復(fù)制所需數(shù)據(jù)至指定目錄 新建修改django相關(guān)的屬性 修改htm...
1. 引言 2. 分析 定義生成日期的函數(shù) 篩選哪些帖子在指定日期內(nèi), 統(tǒng)計該日期內(nèi)指定區(qū)域的所有帖子 篩選哪些帖子在指定日期內(nèi), 統(tǒng)計該日期內(nèi)指定成色的所有帖子數(shù)量和總價格...
1. 引言 統(tǒng)計一天內(nèi)交易成功的商品中, 它們的城區(qū)分布是怎樣的, 然后繪制一天內(nèi)交易成功的商品中, 各城區(qū)交易量的餅圖. 2. 分析 查找某天發(fā)布的物品當(dāng)天就完成交易的 按...
1. 引言 統(tǒng)計某日發(fā)布的二手物品在隨后七天內(nèi), 交易完成時間是一天的類目分布占比.也就是有哪些類目當(dāng)天發(fā)布當(dāng)天就有人買了. 2. 分析 利用管道模型聚合數(shù)據(jù)collecti...
1. 引言 統(tǒng)計上圖這3個類目在最近7日內(nèi), 發(fā)帖量隨時間的變化情況, 并用折線圖繪制出來. 2. 分析 生成日期 統(tǒng)計各分類發(fā)帖次數(shù) 生成圖表數(shù)據(jù) 3. 實(shí)現(xiàn) In [1]...
1. 引言 查找某個時間的數(shù)據(jù), 只顯示特定字段繪制七日內(nèi)上海城區(qū)二手物品走勢圖 2. 分析 mongodb查找數(shù)據(jù)的方法 mongodb顯示特定字段的方法 charts顯示...
1. 引言 統(tǒng)計趕集網(wǎng)-上海-二手市場16個大類目的發(fā)帖量, 并在jupyter-notebook中繪制出各區(qū)域發(fā)帖量對比的柱狀圖 2. 分析 篩選重復(fù)的分類使之唯一 分別統(tǒng)...
1. 引言 統(tǒng)計趕集網(wǎng)-上海-二手市場19個大類目的發(fā)帖量, 并在jupyter-notebook中繪制出各區(qū)域發(fā)帖量對比的柱狀圖 2. 分析 先整理源數(shù)據(jù), 商品區(qū)域信息為...
1. 引言 2. 分析 分類查找: 檢查元素, 輸入.fenlei > dt > a可以等到全部分類鏈接Paste_Image.png 分類列表:類目中的個人列表頁: htt...
1. 引言 程序會因?yàn)楦鞣N各樣的原因而中斷執(zhí)行, 所以要想辦法主程序在上次中斷的地方繼續(xù)執(zhí)行 2. 分析 隨時存儲程序執(zhí)行的狀態(tài)值, 例如程序執(zhí)行到的位置 程序再次執(zhí)行時先獲...
1. 引言 抓取58同城中的手機(jī)號類目下所有帖子的標(biāo)題和鏈接, 并將結(jié)果存儲在mongodb中 取出存儲在mongodb中的鏈接, 獲取詳情頁中的信息 網(wǎng)址: http://...
1. 2. 分析 需要導(dǎo)入連接mongodb的庫 頁面隨著p后面的數(shù)字變化而變化 每個列表頁中有24條房源鏈接 詳情頁中的房東性別根據(jù)member_girl_ico, mem...
1. 引言 進(jìn)入58房屋出租頁面, 爬取列表頁中除了推廣房屋外的正常房屋信息 網(wǎng)址: http://sh.58.com/zufang/0/j2/pn1/ 2. 分析 推廣房屋...
1. 引言 爬取20頁美眉圖片 網(wǎng)址: http://weheartit.com/inspirations/taylorswift 2. 分析 頁面網(wǎng)址格式: http://...
1. 引言 爬取租房信息,具體要求如下 2. 分析 網(wǎng)頁地址: http://bj.xiaozhu.com/search-duanzufang-p2-0/, 頁數(shù)增加時p后的...