發(fā)簡信
IP屬地：浙江
-
Python學習 <一> Python基礎
變量賦值 <1>賦值操作符 =Python語言中，等號（=）是主要的賦值操作符。<2>增量賦值x += 1 (不支持x++)<3>多重賦值x =...
-
除了39歲的清華教授顏寧，候選院士大多都是多少歲的呢？這兩天中國科學院公布了 2017年中國科學院院士增選初步候選人名單，在157名候選人名單中最吸引人注意的是39歲清華大學教授、生物學家顏寧。 這...
-
scrapy閱讀筆記(一):創(chuàng)建spider，繼承scrapy.Spider
最近打算深入學習 scrapy 然后整理了一些官方文檔以及爬蟲源碼的相關筆記寫在這供自己和大家一起參考 我們創(chuàng)建一個爬蟲后首先是要繼承scrap...
-
CentOS7.0 （Linux）快速配置Scrapy爬蟲開發(fā)環(huán)境
由于專門為黑蘋果買的SSD容量很低，用來跑數(shù)據(jù)明顯不現(xiàn)實。所以把機房的主機裝上CentOS 用來跑數(shù)據(jù)，執(zhí)行的最小化安裝，沒有圖形化界面，從U盤...
-
CentOS 7.0 （Linux）下配置frp進行內網(wǎng)穿透機房有很多閑置的主機，再想到網(wǎng)上的云主機那么貴，配置容量還那么低，還不如自己配置下，看能不能通過公網(wǎng)連接到學校內網(wǎng)的主機，試了后感覺不錯可以，只...
-
CentOS 7.0 出現(xiàn)network is unreachable 或者 Cannot find a valid baseurl for repo的問題配置好的CentOS稱為Client的 連接的設備稱為 PCPC和服務器是在同一個機房，不過為了不頻繁的走動還是用SSH吧。 用SSH登錄Cli...
-
（Mac下）安裝CentOS7.0針對于Mac用戶的提示 Mac下的Unix環(huán)境已經(jīng)很好了 如果不是特殊原因 不推薦在Mac上面再裝CentOS裝了CentOS 后如果不能正常開...
-
python爬蟲回顧<五>：利用XPath爬取指定網(wǎng)頁的標題以及文本在爬取了政府工作報告以后，一項新的任務又出現(xiàn)了，我們需要人民日報社論的標題以及社論文章進行分析。與上幾次不同的是這次我們運用的方法是XPath加...
-
python爬蟲回顧<四>處理分頁，不同時期網(wǎng)站排版不同的兼容問題，以及文件歸類（分文件夾保存）上篇的爬蟲回顧其實已經(jīng)把爬蟲基本上都做好了，但是我覺得一個個復制年度匯編地址也很麻煩，要從03年粘貼到16年，如果我能夠再來一次循環(huán)就好了。并且...