
今天總結(jié)一下最近工作中遇到的小知識(shí)點(diǎn)和一些小坑: 關(guān)于文件操作方面: json文件的操作最近工作也經(jīng)常用,關(guān)于文件讀寫操作py2中出問題最多的地...
1.scrapy架構(gòu)如下: 爬蟲其實(shí)就是模擬http發(fā)送請(qǐng)求獲得響應(yīng),如圖所示,一個(gè)請(qǐng)求由spiders發(fā)出,到達(dá)Engine后,將任務(wù)發(fā)給調(diào)度...
1.如何在以py文件的方式運(yùn)行scrapy? from scrapy import cmdline cmdline.execute(['scra...
同步異步與阻塞非阻塞的理解: 概念比較抽象,結(jié)合具體的例子比較容易理解,比如小明燒了一壺水準(zhǔn)備泡咖啡來喝: 1.同步阻塞:小明在燒水的時(shí)候,什么...
一、總結(jié)一下四種常用的web框架:Django,F(xiàn)lask,Tornado,Bottle 1.MVC: 總結(jié)框架之前首先總結(jié)一下什么是MVC: ...
1.json是什么 -javascript Object Notation js對(duì)象表示法 -json和js對(duì)象格式一樣,只不過json字符串中...
今天寫了個(gè)腳本,功能是:遍歷一個(gè)目錄,并讀取所有文件內(nèi)容,查看已有的json文件中哪些鍵沒有用到,目錄下的文件都用了json文件中的哪些鍵。 一...
Redis的使用(結(jié)合自己的項(xiàng)目) Redis是非關(guān)系型數(shù)據(jù)庫(kù),和Memcached類似,其存儲(chǔ)格式為Key-Value格式,因?yàn)槠浯鎯?chǔ)于內(nèi)存中...