一、吞吐率 我們一般使用單位時(shí)間內(nèi)服務(wù)器處理的請(qǐng)求數(shù)來描述其并發(fā)處理能力。稱之為吞吐率（Throughput），單位是 “req/s”。吞吐率特指Web服務(wù)器單位時(shí)間內(nèi)處理的...
發(fā)簡(jiǎn)信
IP屬地：山西
-
吞吐率、吞吐量、TPS、性能測(cè)試，紙上不談兵-構(gòu)建高性能Web站點(diǎn)
-
軟件測(cè)試面試
1、開發(fā)犯低級(jí)錯(cuò)誤怎么辦？開發(fā)首先要規(guī)范好編碼，出低級(jí)錯(cuò)時(shí)不要指責(zé)，內(nèi)心指出錯(cuò)誤。讓他們自己進(jìn)行測(cè)試，反思找出錯(cuò)誤。 2、你進(jìn)行過那些測(cè)試，擅長(zhǎng)什么?我主要從事web測(cè)試，搭...
-
web測(cè)試流程
項(xiàng)目的測(cè)試流程大只包含的幾個(gè)階段：立項(xiàng)、需求評(píng)審、用例評(píng)審、測(cè)試執(zhí)行、測(cè)試報(bào)告文檔 一、立項(xiàng)后測(cè)試需要拿到的文檔1、需求說明書2、原型圖（及UI圖）3、接口文檔4、數(shù)據(jù)庫字典...
-
scrapy簡(jiǎn)單操作流程、目錄介紹
新建爬蟲項(xiàng)目 scrapy startproject 項(xiàng)目名稱 創(chuàng)建爬蟲文件 scrapy genspider 爬蟲文件名稱 要爬取的目標(biāo)url的域（baidu.com） 運(yùn)...
-
Scrapy 下載項(xiàng)目圖片
Scrapy提供了一個(gè) item pipeline ，來下載屬于某個(gè)特定項(xiàng)目的圖片，比如，當(dāng)你抓取產(chǎn)品時(shí)，也想把它們的圖片下載到本地。 這條管道，被稱作圖片管道，在 Imag...
-
Python爬蟲模擬登錄遇到的問題——CSRF防御
背景 去年在公司寫過一個(gè)爬蟲工具，用于抓取自動(dòng)化報(bào)告通過率、自動(dòng)發(fā)送報(bào)告。由于當(dāng)時(shí)是第一次接觸爬蟲，難免會(huì)遇到各種問題，解決方案全都是按照網(wǎng)上的一些爬蟲文章示例，照貓畫虎寫的...
-
通用爬蟲--CrawlSpider
本次以下廚房為例 創(chuàng)建（繼承自CrawlSpider類） scrapy genspider -t crawl xcfCrawlSpider xiachufang.com 打開...
-
Scrapy通用爬蟲--CrawlSpider
CrawlSpider它是Spider的派生類，Spider類的設(shè)計(jì)原則是只爬取start_url列表中的網(wǎng)頁，而CrawlSpider類定義了一些規(guī)則Rule來提供跟進(jìn)鏈接...
