【前端】懶加載,看看Twitter是怎么做的

老金痛恨Twitter。

老金是我在德國(guó)讀書時(shí)的好基友,在國(guó)內(nèi)時(shí)就酷愛文學(xué)創(chuàng)作。但他卻從未開通個(gè)博客什么的,堅(jiān)持使用新浪“長(zhǎng)微博”功能寫文章。用他的話說,這代表新銳文學(xué)的姿態(tài)。到了德國(guó)之后,老金發(fā)現(xiàn)人家老外不用微博,人家用Twitter。新銳的他自然要入鄉(xiāng)隨俗,可正準(zhǔn)備舞文弄墨,卻發(fā)現(xiàn)Twitter里并沒有個(gè)東西叫“Long Twitter”,140個(gè)字符啥也干不了。于是老金憤而卸載Twitter,逢人便感慨西方文學(xué)這下是要徹底完了。

看著老金整天悶悶不樂,我便安慰他說什么長(zhǎng)微博,不就是文字變圖片嘛。Twitter沒這東西,看小爺我的本事啊。我給你寫個(gè)App,名字就叫“大Twitter”,圖標(biāo)我都給你設(shè)計(jì)好了。


Twitter和大Twitter

然后我用了兩個(gè)晚上搞了個(gè)小工具,把大段文字轉(zhuǎn)成圖片,然后直接發(fā)到Twitter上。


大Twitter

可沒曾想,老金剛用了半天就找到我,說自己寫的東西不知道為什么全被打上了馬賽克,并信誓旦旦對(duì)“秦老師”發(fā)誓說自己沒寫什么大尺度的東西。我問他秦老師是誰?他說是印度著名詩(shī)人秦戈?duì)柪蠋煱。∩屏嫉奈也]有當(dāng)面給他指出那位老師不姓秦這件事,只想著好好的圖片怎么會(huì)被打碼了呢?

我拿來一看,原來是老金實(shí)在憋了太久,這一次足足寫了8400多個(gè)字,生成的圖片尺寸過大,被雞賊的Twitter給壓縮了,于是便模糊得像打了碼一樣。心灰意冷的老金決定與Twitter恩斷義絕,連賬戶都注銷了。

雖然我也不怎么用Twitter,但作為一個(gè)程序員我對(duì)它還是很有興趣的。作為同類產(chǎn)品中的佼佼者,Twitter自然是有它的優(yōu)勢(shì)。其中比較有特色的一點(diǎn)就是其懶加載的機(jī)制。今天我們就通過Debug的方式來對(duì)其探究一番。

一些你需要知道的概念

時(shí)間軸(Time Line),Twitter中最最重要的部分。一條條的推文組合在一起,就成了頁(yè)面上中間那條長(zhǎng)長(zhǎng)的時(shí)間軸。

時(shí)間軸

位(Position),一條推文的標(biāo)識(shí)符,說白了就是推文的ID。新推文的Position比老推文的要大,所以我覺得Position很有可能代表著“這是Twitter有史以來的第xxx條推文”。可我隨便找到的一個(gè)Position卻著實(shí)大得讓我懷疑自己的猜測(cè)。

大得嚇人的Position

千里之行,始于Network

首先我們?cè)陂_發(fā)者工具的Network工具中截取一條當(dāng)用戶滾動(dòng)加載時(shí)發(fā)出的請(qǐng)求。結(jié)果發(fā)現(xiàn)它長(zhǎng)下面這個(gè)樣子。


發(fā)出的請(qǐng)求

收到的響應(yīng)

在這里我們可以發(fā)現(xiàn)幾個(gè)有意義的信息:

  • max_position:翻遍Header信息以及請(qǐng)求參數(shù),這是唯一一個(gè)跟所要請(qǐng)求的內(nèi)容相關(guān)的東西。具體含義后面再講。
  • has_more_items:顧名思義,服務(wù)器通過這個(gè)字段告訴前端是否還有更早的內(nèi)容。
  • items_html:格式化之后發(fā)現(xiàn),這個(gè)部分就是我們所請(qǐng)求到的推文內(nèi)容。顯然Twitter使用到的是后端渲染的技術(shù),將推文內(nèi)容渲染好直接發(fā)給前端進(jìn)行展示。
  • min_position:恰好對(duì)應(yīng)了請(qǐng)求當(dāng)中的max_position。
  • new_latent_count:這一次所請(qǐng)求到的推文的條數(shù)。

深入探究

為了搞清楚這些信息到底是怎么回事,我們通過尋找請(qǐng)求的發(fā)起者來深入到代碼當(dāng)中。原來Twitter在這里發(fā)送了一個(gè)XMLHttpRequest。無論是什么請(qǐng)求,總歸要有一個(gè)處理的方法,我們?cè)贑all Stack中層層向上追溯,然后找到了請(qǐng)求的定義位置。


請(qǐng)求的定義位置

這里我們進(jìn)入到請(qǐng)求成功的方法中繼續(xù)探索。最終到達(dá)終點(diǎn),items_html被添加到了時(shí)間軸當(dāng)中。



那min_position和max_position呢?我們回到剛才定義請(qǐng)求的位置繼續(xù)向上追溯,找到了getOldItems的方法。當(dāng)用戶在時(shí)間軸上向下滾動(dòng)鼠標(biāo)到最后時(shí),就會(huì)調(diào)用到這個(gè)方法,而在其中會(huì)把上一次響應(yīng)當(dāng)中的min_position賦值給這一次請(qǐng)求當(dāng)中的max_postion。



至此我們可以將整個(gè)Twitter的懶加載流程串接起來:

  1. 用戶向下滾動(dòng)時(shí)間軸,發(fā)出請(qǐng)求,通知服務(wù)器“我已經(jīng)把第A條看完啦,快讓我看更之前的內(nèi)容”。
  2. 服務(wù)器返回從A再往前的20條內(nèi)容,并告訴用戶“喏,現(xiàn)在發(fā)給你直到第B條的所有內(nèi)容了,慢慢看吧”。
  3. 用戶再次看完這些內(nèi)容,向下滾動(dòng)時(shí)間軸,告訴服務(wù)器“到第B條的我也看完啦,B之前的你再發(fā)給我吧”。

每次不一定20條?

在研究的過程中,我發(fā)現(xiàn)了一個(gè)有趣的現(xiàn)象,就是new_latent_count絕大多數(shù)都是20,而偶爾會(huì)略小于20。由于前端請(qǐng)求中并不存在所要請(qǐng)求的條數(shù),所以這個(gè)決策是在后端完成的。

起初我以為后端會(huì)根據(jù)需要即將響應(yīng)的內(nèi)容大小決定發(fā)多少條,可分析了一些例子之后發(fā)現(xiàn)有的時(shí)候響應(yīng)明明很小,卻還是發(fā)了不到20條。所以我的猜測(cè)是后端這個(gè)神奇的算法可能會(huì)判斷返回的內(nèi)容用戶大概會(huì)瀏覽多久,如果比較耗時(shí),則少返回一些。例如如果推文中有長(zhǎng)視頻,則判斷為閱讀耗時(shí)較長(zhǎng),可以少返回幾條。但這只是我瞎猜的,有知道其中原理的朋友可以留言告訴我,非常感謝。

Debug之痛

坦率講整個(gè)Debug過程花費(fèi)了我很多時(shí)間,一方面是對(duì)于其代碼結(jié)構(gòu)的不熟悉,另一方面是minify過的js代碼實(shí)在是讓人頭疼啊。所有的變量都長(zhǎng)成abcd不說,到處都是用邏輯運(yùn)算符寫的條件判斷語句,看得人口吐白沫。不過從學(xué)習(xí)的角度講,整個(gè)過程跑下來無論是debug能力還是代碼閱讀能力都會(huì)有所提升,推薦大家也試一試。


讓人頭痛的代碼
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 229,836評(píng)論 6 540
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 99,275評(píng)論 3 428
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 177,904評(píng)論 0 383
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)。 經(jīng)常有香客問我,道長(zhǎng),這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 63,633評(píng)論 1 317
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 72,368評(píng)論 6 410
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 55,736評(píng)論 1 328
  • 那天,我揣著相機(jī)與錄音,去河邊找鬼。 笑死,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,740評(píng)論 3 446
  • 文/蒼蘭香墨 我猛地睜開眼,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 42,919評(píng)論 0 289
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 49,481評(píng)論 1 335
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 41,235評(píng)論 3 358
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 43,427評(píng)論 1 374
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,968評(píng)論 5 363
  • 正文 年R本政府宣布,位于F島的核電站,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 44,656評(píng)論 3 348
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 35,055評(píng)論 0 28
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 36,348評(píng)論 1 294
  • 我被黑心中介騙來泰國(guó)打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 52,160評(píng)論 3 398
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 48,380評(píng)論 2 379

推薦閱讀更多精彩內(nèi)容