趣談網絡協議筆記(1)

寫在前面

2018年6月20日拿到畢業證,正式結束了自己的學生生涯。
2018年7月2日,自己正式開始了人生中的第一份正式工作,人人車的Android開發工程師。
2018年7月13日,決定要好好督促自己學一學習,所以就打算再一次剛起公眾號之路。逼迫自己有計劃的去學習,有計劃的去輸出。因為最近碰巧趕上了需求大爆發時期,所以這段時間的學習計劃,以不需要大量時間投入的計算機基礎知識為主,重在修煉自己的內功。前段時間買了一個計算機網絡的課程,所以近期打算記錄一下這方面的知識。


筆記正文

這里是一個關于計算機網絡的系列文章,主要是自己對一個收費課程的學習記錄。這里就不放課程鏈接了,如果對課程感興趣的話,可以后臺私聊我。
以下內容和圖片由我整理自《極客時間》付費內容,如有侵權,告知即刪。

HTTP協議相關

當我們在瀏覽器里面輸入https://www.kaola.com時,毫無疑問這是一個URL。不過瀏覽器只知道這個鏈接的名字是https://www.kaola.com ,但此外不知道任何其他有用的信息,所以接下來的第一步,瀏覽器打開地址簿去查找這個鏈接背后的IP地址。一般可以使用的地址薄協議是DNS,還可以使用另一種更加精準的地址簿查找協議HTTPDNS 。
無論用哪一種方法查找,最終都會得到這個地址:106.114.138.24 。這個是網易考拉的服務器IP地址,是互聯網世界的“門牌號”。知道了目標地址,瀏覽器就開始打包它的請求。現在我們普遍會使用HTTPS協議。當然無論是什么協議,里面都會寫明這次請求所需要攜帶的信息,比如作為一名剁手黨,你所要攜帶的信息是“要買什么和買多少”。

image.png

TCP協議相關

DNS、HTTP、HTTPS所在的層我們稱為應用層。經過應用層封裝后,瀏覽器會將應用層的包交給下一層去完成,通過socket編程來實現。下一層是傳輸層。傳輸層有兩種協議,一種是無連接的協議UDP, 一種是面向連接的協議TCP。對于支付來講,往往使用TCP協議。所謂的面向連接就是,TCP會保證這個包能夠到達目的地。如果不能到達,就會重新發送,直至到達。
TCP協議里面會有兩個端口,一個是瀏覽器監聽的端口,一個是電商的服務器所監聽的端口。操作系統往往通過端口來判斷,它得到的包應該給哪個進程。

image.png

獲取IP地址

傳輸層封裝完畢后,瀏覽器會將包交給操作系統的網絡層。網絡層的協議是IP協議。在IP協議里面會有源IP地址,即瀏覽器所在機器的IP地址和目標IP地址,也即電商網站所在服務器的IP地址。(也就是我們上文通過DNS協議獲取到的IP地址)

image.png

獲取MAC地址

操作系統既然知道了目標IP地址,就開始想如何根據這個門牌號找到目標機器。操作系統往往會判斷,這個目標IP地址是本地人,還是外地人。如果是本地人,從門牌號就能看出來,但是顯然電商網站不在本地,而在遙遠的地方。
操作系統顯然知道這個請求要離開本地去遠方,即使不知道遠方在何處。既然不知道遠方在何處,那么操作系統是怎么處理的呢?

這里我們可以這樣類比一下:如果去國外要去海關,那么請求包去外地就要去網關。

而操作系統啟動的時候,會被DHCP協議配置IP地址,以及默認的網關的IP地址192.168.1.1。
操作系統如何將IP地址發給網關呢?在本地通信基本靠吼,于是操作系統大吼一聲,誰是192.168.1.1啊?此時,網關會回答它,我就是,我的本地地址在村東頭。這個本地地址就是MAC地址,而大吼的那一聲是ARP協議。


image.png

路由

于是操作系統將IP包交給了下一層,也就是MAC層。網卡再將包發出去。由于這個包里面是有MAC地址的,因而它能夠到達網關。
網關收到包之后,會根據自己的知識,判斷下一步應該怎么走。網關往往是一個路由器,到某個IP地址應該怎么走,這個叫作路由表。
路由器有點像玄奘西行路過的一個國家的一個城關。每個城關都連著兩個國家,每個國家相當于一個局域網,在每個國家內部,都可以使用本地的地址MAC進行通信。
一旦跨越城關,就需要拿出IP頭來,里面寫著貧僧來自東土大唐(就是源IP地址) ,欲往西天拜佛求經(指的是目標IP地址)。路過寶地,借宿一晚,明日啟行,請問接下來該怎么走啊?

image.png

城關往往是知道這些“知識”的,因為城關和臨近的城關也會經常溝通。到哪里應該怎么走,這種溝通的協議稱為路由協議,常用的有OSPF和BGP。

image.png

請求響應

城關與城關之間是一個國家,當網絡包知道了下一步去哪個城關,還是要使用國家內部的MAC地址,通過下一個城關的MAC地址,找到下一個城關,然后再問下一步的路怎么走,一直到走出最后一個城關。
最后-一個城關知道這個網絡包要去的地方。于是,對著這個國家吼一聲,誰是目標IP啊?目標服務器就會回復一個MAC地址。網絡包過關后,通過這個MAC地址就能找到目標服務器。
目標服務器發現MAC地址對上了,取下MAC頭來,發送給操作系統的網絡層。發現IP也對上了,就取下IP頭。IP頭里會寫上一層封裝的是TCP協議,然后將其交給傳輸層,即TCP層。
在這一層里,對于收到的每個包,都會有一個回復的包說明收到了。這個回復的包絕非這次下單請求的結果,例如購物是否成功,扣了多少錢等,而僅僅是TCP層的一個說明,即收到之后的回復。當然這個回復,會沿著剛才來的方向走回去,報個平安。
因為一旦出了國門,西行路上千難萬險,如果在這個過程中,網絡包走丟了,例如進了大沙漠,或者被強盜搶劫殺害怎么辦呢?因而到了要報個平安。
如果過一段時間還是沒到,發送端的TCP層會重新發送這個包,還是上面的過程,直到有一天收到平安到達的回復。這個重試絕非你的瀏覽器重新將下單這個動作重新請求一次。 對于瀏覽器來講,就發送了一次下單請求,TCP層不斷自己悶頭重試。除非TCP這一層出了問題,例如連接斷了,才輪到瀏覽器的應用層重新發送下單請求。
當網絡包平安到達TCP層之后,TCP頭中有目標端口號,通過這個端口號,可以找到電商網站的進程正在監聽這個端口號,假設一個 Tomcat,將這個包發給電商網站。

image.png

最終歸宿

電商網站的進程得到HTTP請求的內容,知道要買東西,買多少。往往一個電商網站最初接待請求的這個Tomcat 只個接待員,負責統籌處理這個請求,而不是所有的事情都自己做。例如,這個接待員要告訴專門管理訂單的進程,登記要買某個商品,買多少,要告訴管理庫存的進程,基要減少多少,要告訴支付的進程,應該付多少錢,等等。
如何告訴相關的進程呢?往往通過RPC調用,即遠程過程調用的方式來實現。遠程過程調用就是當告訴管理訂單進程的時候,接待員不用關心中間的網絡互連問題,會由RPC框架統一處理。RPC框架有很多種,有基于HTTP協議放在HTTP的報文里面的,有直接封裝在TCP報文里面的。
當接待員發現相應的部門都處理完畢,就回復一個于HTTPS的包,告知下單成功。這個HTTPS 的包,,會像來的時候一樣,經過千難萬險到達你的個人電腦,最終進入瀏覽器,顯示支付成功。


筆記小結

為什么有了IP,還要有mac地址

  • 1.局域網內IP地址是動態分配的,假如我是192.168.2.100,如果我下線了,可能IP就分配給了另一臺電腦。IP和設備并不總是對應的,這對通信就產生了問題,但是MAC地址不同,MAC地址和設備是一一對應且全球唯一的。所以局域網使用MAC地址通信沒有問題。

  • 2.歷史遺留問題:早期的以太網只有交換機,沒有路由器,以太網內通過MAC地址通信。后來才有了互聯網,為了兼容原本的模式,采用了IP+MAC地址通信的方式。為啥不推到了重來呢?看看IPv6的處境你就知道了。所以是先有MAC地址后有的IP,IP的提出主要還是因為MAC地址本身的缺陷,這個問題換成有了MAC為何還要IP地址也很有意思。

  • 3.MAC地址本身的缺陷:因為MAC地址是硬件提供商寫在網卡中的,MAC地址雖然唯一但是不能表明用戶在整個互聯網中的位置,除非維護一個超級大MAC地址對應表,那尋址效率肯定爆炸。但是IP地址解決了這個問題,因為IP地址是網絡提供商給你的,所以你在哪里整個網絡都是知道的。

網卡MAC碼是由全球惟一的一個固定組織來分配的,未經認證和授權的廠家無權生產網卡。每塊網卡都有一個固定的卡號,并且任何正規廠家生產的網卡上都直接標明了卡號,一般為一組12位的16進制數。其中前6位代表網卡的生產廠商。后面的位數是設備號。


尾聲

這是這些天我對《計算機網絡》學習的一次筆記。大部分內容是基于前輩們總結,我又記錄了一遍。算是對自己學習結果的一次確認吧,希望可以對各位看官有些幫助。

本菜開源的一個自己寫的Demo,這個項目拆解并組合了很多業務。目的在于遇到類似業務,可以快速的ctrl+c/v。希望能給Androider們有所幫助,水平有限,見諒見諒…
https://github.com/zhiaixinyang/PersonalCollect


這是一個主推面試踩坑的公眾號!

因為身邊的同學從事互聯網相關職業的比較多,并且大家閑時聊天時總會吐槽找工作有很多坑,所以打算把身邊同學找工作的經驗,統統收集起來。提供給想從事這方面同學,希望圈內好友可以共同進步,共同少踩坑。

個人公眾號
最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,363評論 6 532
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,497評論 3 416
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 176,305評論 0 374
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,962評論 1 311
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,727評論 6 410
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 55,193評論 1 324
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,257評論 3 441
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,411評論 0 288
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,945評論 1 335
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,777評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,978評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,519評論 5 359
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,216評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,642評論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,878評論 1 286
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,657評論 3 391
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,960評論 2 373

推薦閱讀更多精彩內容

  • 1、TCP為什么需要3次握手,4次斷開? “三次握手”的目的是“為了防止已失效的連接請求報文段突然又傳送到了服務端...
    杰倫哎呦哎呦閱讀 3,505評論 0 6
  • 文章首發于個人blog歡迎指正補充,可聯系lionsom_lin@qq.com原文地址:《網絡是怎樣連接的》閱讀整...
    lionsom_lin閱讀 14,186評論 6 31
  • 個人認為,Goodboy1881先生的TCP /IP 協議詳解學習博客系列博客是一部非常精彩的學習筆記,這雖然只是...
    貳零壹柒_fc10閱讀 5,081評論 0 8
  • 1.這篇文章不是本人原創的,只是個人為了對這部分知識做一個整理和系統的輸出而編輯成的,在此鄭重地向本文所引用文章的...
    SOMCENT閱讀 13,109評論 6 174
  • 坤國的南境毗鄰著離國朱雀山脈的北麓,這里四季炎熱,植被稀少,唯一的水源來自于一條發源于離國境內的大河,名叫奈河。無...
    王子水閱讀 1,076評論 10 9