網(wǎng)絡(luò)編程的最佳學(xué)習(xí)路線！
[導(dǎo)讀]什么是網(wǎng)絡(luò)編程？用一句話概括，就是對(duì)網(wǎng)絡(luò)協(xié)議的落地。?落地，意味著對(duì)實(shí)戰(zhàn)的要求更高。所以，一些朋友更喜歡用類似Netty這種封裝好的框架——快速，高效。確實(shí)，跟開發(fā)細(xì)節(jié)相比，我們常常更看重開發(fā)效率。?可日常的項(xiàng)目里，我們也不得不面對(duì)極端的網(wǎng)絡(luò)性能考驗(yàn)。沒(méi)人喜歡堵車，但應(yīng)對(duì)大量請(qǐng)求...
什么是網(wǎng)絡(luò)編程？用一句話概括，就是對(duì)網(wǎng)絡(luò)協(xié)議的落地。
?落地，意味著對(duì)實(shí)戰(zhàn)的要求更高。所以，一些朋友更喜歡用類似 Netty 這種封裝好的框架——快速，高效。確實(shí)，跟開發(fā)細(xì)節(jié)相比，我們常常更看重開發(fā)效率。?可日常的項(xiàng)目里，我們也不得不面對(duì)極端的網(wǎng)絡(luò)性能考驗(yàn)。沒(méi)人喜歡堵車，但應(yīng)對(duì)大量請(qǐng)求時(shí)，如果網(wǎng)絡(luò)性能處理不佳，數(shù)據(jù)、業(yè)務(wù)就會(huì)面臨大塞車。?舉個(gè)正向的例子，之前在綠盟有個(gè)信息安全產(chǎn)品，叫黑洞，是當(dāng)時(shí)市場(chǎng)上最成功的 DDOS 過(guò)濾設(shè)備。這玩意最大的技術(shù)難點(diǎn)就在于：當(dāng)攻擊報(bào)文洪水到達(dá)時(shí)，每秒要過(guò)濾掉幾十萬(wàn)攻擊請(qǐng)求。在那之前，我從沒(méi)想過(guò)通過(guò)程序代碼，對(duì)網(wǎng)絡(luò)報(bào)文的處理效率，竟然能達(dá)到如此強(qiáng)悍的地步。?早些年尚且如此，更別提如今的 5G 時(shí)代了。用戶大幅度提升的平均網(wǎng)絡(luò)傳輸速度，正對(duì)我們提出高性能網(wǎng)絡(luò)編程的要求：不僅要解決諸如提高吞吐量和并發(fā)性等問(wèn)題，還得處理各種棘手異常，比如保證千萬(wàn)個(gè)連接的正常運(yùn)行等等。?這些，顯然不是一兩個(gè)框架就能搞定的。?可惜的是，我面試過(guò)的不少候選人都沒(méi)有意識(shí)到這點(diǎn)，哪怕他們已經(jīng)工作多年，在網(wǎng)絡(luò)協(xié)議和網(wǎng)絡(luò)編程這塊依舊不是很上心，對(duì)其的理解也還停留在一個(gè)比較淺的層次上，比如：?? 大家經(jīng)常說(shuō)的四層、七層，分別指的是什么？? TCP 三次握手是什么，TIME_WAIT 是怎么發(fā)生的？CLOSE_WAIT 又是什么狀態(tài)？? Linux 下的 epoll 解決的是什么問(wèn)題？如何使用 epoll 寫出高性能的網(wǎng)絡(luò)程序？? 什么是網(wǎng)絡(luò)事件驅(qū)動(dòng)模型？Reactor 模式又是什么？?其實(shí)，無(wú)論在面試還是工作中，網(wǎng)絡(luò)性能及優(yōu)化這方面的知識(shí)都是非常重要的基本功。在我看來(lái)，想做到高性能網(wǎng)絡(luò)編程，下面兩個(gè)核心要點(diǎn)永遠(yuǎn)都繞不開：?第一，在理解網(wǎng)絡(luò)協(xié)議的基礎(chǔ)上，充分利用操作系統(tǒng)內(nèi)核提供的能力，感知各種網(wǎng)絡(luò) I/O 事件；第二，學(xué)會(huì)使用線程處理并發(fā)。抓住這兩點(diǎn)，就抓住了高性能網(wǎng)絡(luò)編程的“七寸”。?分享給你一張網(wǎng)絡(luò)編程的核心知識(shí)圖譜，將上述兩個(gè)核心會(huì)涉及到的知識(shí)點(diǎn)都囊括在內(nèi)，只要我們仔細(xì)梳理、透徹理解這些核心知識(shí)點(diǎn)，就能學(xué)以致用地解決工作中的實(shí)際問(wèn)題。?這張圖譜出自盛延敏的《網(wǎng)絡(luò)編程實(shí)戰(zhàn)》專欄。其實(shí)我覺得他這名字起得太樸素了。要我的話，就叫：高性能網(wǎng)絡(luò)編程，因?yàn)檎麄€(gè)專欄都是圍繞「高性能」展開的。?但話又說(shuō)回來(lái)，高性能就建立在那些實(shí)打?qū)嵉慕?jīng)驗(yàn)基礎(chǔ)上，所以現(xiàn)在這個(gè)也算簡(jiǎn)潔有力。內(nèi)容同樣是單刀直入展開，比如在講解某個(gè)理論或算法時(shí)，與代碼、實(shí)驗(yàn)相關(guān)聯(lián)，分析它提出的目的、解決了哪些問(wèn)題。?說(shuō)白了，就是從解決實(shí)際問(wèn)題的角度切入，講解知識(shí)點(diǎn)，讓你透徹理解協(xié)議、API 和代碼。學(xué)完就能用得上，這點(diǎn)挺不錯(cuò)的，值得推薦給你。?秒殺 專屬口令「happy2021」立省 ￥40到手僅 ￥89，僅限?50?個(gè)名額?盛延敏，前大眾點(diǎn)評(píng)云平臺(tái)首席架構(gòu)師，現(xiàn)就職于某大型金融服務(wù)公司（很好猜但人家不讓說(shuō)），專注云計(jì)算的架構(gòu)和開發(fā)工作。?他博士畢業(yè)于中科大，畢業(yè)后加入 IBM，從事 WebSphere 應(yīng)用服務(wù)器、PaaS 平臺(tái) Bluemix 等系統(tǒng)的開發(fā)工作。后任職大眾點(diǎn)評(píng)，推動(dòng)了以Docker為核心的私有云建設(shè)和落地。?2000 年起，他開始用網(wǎng)絡(luò)編程框架 ACE、CORBA 等進(jìn)行電信網(wǎng)管系統(tǒng)的開發(fā)，后來(lái)接觸了 ICE，寫分布式控制系統(tǒng)。再之后轉(zhuǎn)向 Java，使用 JDK 進(jìn)行 Web Service 和應(yīng)用服務(wù)器的網(wǎng)絡(luò)開發(fā)和研究，使用 Netty 進(jìn)行 Java 高性能網(wǎng)絡(luò)編程的開發(fā)。這些工作經(jīng)歷，讓他對(duì)網(wǎng)絡(luò)編程有了極為深入的理解。?網(wǎng)絡(luò)編程是個(gè)重實(shí)戰(zhàn)的模塊。我在學(xué)網(wǎng)絡(luò)編程的那會(huì)，就掉進(jìn)了坑里，老是想面面俱到，但奈何頭緒太多，一直鉆牛角尖，過(guò)分關(guān)注知識(shí)點(diǎn)本身，片面地?cái)財(cái)嗔怂鼈兣c實(shí)際工作的聯(lián)系。?而在這個(gè)專欄里，盛哥真正做到了講練結(jié)合，從底層原理講起，逐步聚焦到高性能編程上，講解了常見異常和性能問(wèn)題，并手把手帶你編寫一個(gè)高性能 HTTP 服務(wù)器。?專欄主要分三大層級(jí)，逐步遞進(jìn)：??第一，充分理解 TCP/IP 網(wǎng)絡(luò)模型和協(xié)議。前部分會(huì)帶你梳理 TCP/IP 模型和網(wǎng)絡(luò)函數(shù)接口之間的聯(lián)系，通過(guò)實(shí)例展開對(duì)套接字、套接字緩沖區(qū)、擁塞控制、數(shù)據(jù)包和數(shù)據(jù)流、本地套接字（UNIX 域套接字）等的討論，交付給你一個(gè)全面細(xì)致的知識(shí)體系。??第二，結(jié)合對(duì)協(xié)議的理解，增強(qiáng)對(duì)各種異常情況的處理能力。比如，對(duì) TCP 數(shù)據(jù)流的處理、半關(guān)閉的連接、TCP 連接有效性的偵測(cè)、處理各種異常情況等，這些問(wèn)題決定了程序的健壯性。這一部分的內(nèi)容，將在提升篇中詳細(xì)展開。??第三，寫出可支持大規(guī)模高并發(fā)的網(wǎng)絡(luò)處理程序。性能篇和實(shí)戰(zhàn)篇，將會(huì)帶你深入研究 C10K 問(wèn)題，引入進(jìn)程、線程、多路復(fù)用、非阻塞、異步、事件驅(qū)動(dòng)等現(xiàn)代高性能網(wǎng)絡(luò)編程所需要的技術(shù)，結(jié)合實(shí)例上手操作，教你寫出高性能的網(wǎng)絡(luò)程序。?具體每部分內(nèi)容，來(lái)看目錄。???別光我說(shuō)，還收集了一些其他人的評(píng)價(jià)，供你參考。??盛哥用荀子那句“不聞不若聞之，聞之不若見之，見之不若知之，知之不若行之?！眮?lái)詮釋學(xué)習(xí)網(wǎng)絡(luò)編程的最佳方法，太文藝了，要我說(shuō)的話：學(xué)就完了。?學(xué)透了，就要去用，對(duì)專欄里的代碼進(jìn)行修改和調(diào)試，進(jìn)一步加深理解。把這些內(nèi)容吃下去，消化掉，從底層到實(shí)戰(zhàn)，用科學(xué)的方法才能快速且透徹地理解高性能網(wǎng)絡(luò)編程。?喵哥申請(qǐng)了粉絲的專屬優(yōu)惠：?秒殺 專屬口令「happy2021」立省 ￥40，到手僅￥89，僅限?50?個(gè)名額??很多人說(shuō) 5G 時(shí)代是一場(chǎng)革命，是不是業(yè)務(wù)創(chuàng)新的革命，我說(shuō)不好。但如果一個(gè)業(yè)務(wù)平臺(tái)的網(wǎng)絡(luò)優(yōu)化技術(shù)沒(méi)跟上，面對(duì)每個(gè)客戶端平均數(shù)倍的網(wǎng)速激增，你猜先會(huì)革掉誰(shuí)的命。?? 點(diǎn)擊「閱讀原文」輸入粉絲專享口令「happy2021」以 立省 ￥40 入手
?落地，意味著對(duì)實(shí)戰(zhàn)的要求更高。所以，一些朋友更喜歡用類似 Netty 這種封裝好的框架——快速，高效。確實(shí)，跟開發(fā)細(xì)節(jié)相比，我們常常更看重開發(fā)效率。?可日常的項(xiàng)目里，我們也不得不面對(duì)極端的網(wǎng)絡(luò)性能考驗(yàn)。沒(méi)人喜歡堵車，但應(yīng)對(duì)大量請(qǐng)求時(shí)，如果網(wǎng)絡(luò)性能處理不佳，數(shù)據(jù)、業(yè)務(wù)就會(huì)面臨大塞車。?舉個(gè)正向的例子，之前在綠盟有個(gè)信息安全產(chǎn)品，叫黑洞，是當(dāng)時(shí)市場(chǎng)上最成功的 DDOS 過(guò)濾設(shè)備。這玩意最大的技術(shù)難點(diǎn)就在于：當(dāng)攻擊報(bào)文洪水到達(dá)時(shí)，每秒要過(guò)濾掉幾十萬(wàn)攻擊請(qǐng)求。在那之前，我從沒(méi)想過(guò)通過(guò)程序代碼，對(duì)網(wǎng)絡(luò)報(bào)文的處理效率，竟然能達(dá)到如此強(qiáng)悍的地步。?早些年尚且如此，更別提如今的 5G 時(shí)代了。用戶大幅度提升的平均網(wǎng)絡(luò)傳輸速度，正對(duì)我們提出高性能網(wǎng)絡(luò)編程的要求：不僅要解決諸如提高吞吐量和并發(fā)性等問(wèn)題，還得處理各種棘手異常，比如保證千萬(wàn)個(gè)連接的正常運(yùn)行等等。?這些，顯然不是一兩個(gè)框架就能搞定的。?可惜的是，我面試過(guò)的不少候選人都沒(méi)有意識(shí)到這點(diǎn)，哪怕他們已經(jīng)工作多年，在網(wǎng)絡(luò)協(xié)議和網(wǎng)絡(luò)編程這塊依舊不是很上心，對(duì)其的理解也還停留在一個(gè)比較淺的層次上，比如：?? 大家經(jīng)常說(shuō)的四層、七層，分別指的是什么？? TCP 三次握手是什么，TIME_WAIT 是怎么發(fā)生的？CLOSE_WAIT 又是什么狀態(tài)？? Linux 下的 epoll 解決的是什么問(wèn)題？如何使用 epoll 寫出高性能的網(wǎng)絡(luò)程序？? 什么是網(wǎng)絡(luò)事件驅(qū)動(dòng)模型？Reactor 模式又是什么？?其實(shí)，無(wú)論在面試還是工作中，網(wǎng)絡(luò)性能及優(yōu)化這方面的知識(shí)都是非常重要的基本功。在我看來(lái)，想做到高性能網(wǎng)絡(luò)編程，下面兩個(gè)核心要點(diǎn)永遠(yuǎn)都繞不開：?第一，在理解網(wǎng)絡(luò)協(xié)議的基礎(chǔ)上，充分利用操作系統(tǒng)內(nèi)核提供的能力，感知各種網(wǎng)絡(luò) I/O 事件；第二，學(xué)會(huì)使用線程處理并發(fā)。抓住這兩點(diǎn)，就抓住了高性能網(wǎng)絡(luò)編程的“七寸”。?分享給你一張網(wǎng)絡(luò)編程的核心知識(shí)圖譜，將上述兩個(gè)核心會(huì)涉及到的知識(shí)點(diǎn)都囊括在內(nèi)，只要我們仔細(xì)梳理、透徹理解這些核心知識(shí)點(diǎn)，就能學(xué)以致用地解決工作中的實(shí)際問(wèn)題。?這張圖譜出自盛延敏的《網(wǎng)絡(luò)編程實(shí)戰(zhàn)》專欄。其實(shí)我覺得他這名字起得太樸素了。要我的話，就叫：高性能網(wǎng)絡(luò)編程，因?yàn)檎麄€(gè)專欄都是圍繞「高性能」展開的。?但話又說(shuō)回來(lái)，高性能就建立在那些實(shí)打?qū)嵉慕?jīng)驗(yàn)基礎(chǔ)上，所以現(xiàn)在這個(gè)也算簡(jiǎn)潔有力。內(nèi)容同樣是單刀直入展開，比如在講解某個(gè)理論或算法時(shí)，與代碼、實(shí)驗(yàn)相關(guān)聯(lián)，分析它提出的目的、解決了哪些問(wèn)題。?說(shuō)白了，就是從解決實(shí)際問(wèn)題的角度切入，講解知識(shí)點(diǎn)，讓你透徹理解協(xié)議、API 和代碼。學(xué)完就能用得上，這點(diǎn)挺不錯(cuò)的，值得推薦給你。?秒殺 專屬口令「happy2021」立省 ￥40到手僅 ￥89，僅限?50?個(gè)名額?盛延敏，前大眾點(diǎn)評(píng)云平臺(tái)首席架構(gòu)師，現(xiàn)就職于某大型金融服務(wù)公司（很好猜但人家不讓說(shuō)），專注云計(jì)算的架構(gòu)和開發(fā)工作。?他博士畢業(yè)于中科大，畢業(yè)后加入 IBM，從事 WebSphere 應(yīng)用服務(wù)器、PaaS 平臺(tái) Bluemix 等系統(tǒng)的開發(fā)工作。后任職大眾點(diǎn)評(píng)，推動(dòng)了以Docker為核心的私有云建設(shè)和落地。?2000 年起，他開始用網(wǎng)絡(luò)編程框架 ACE、CORBA 等進(jìn)行電信網(wǎng)管系統(tǒng)的開發(fā)，后來(lái)接觸了 ICE，寫分布式控制系統(tǒng)。再之后轉(zhuǎn)向 Java，使用 JDK 進(jìn)行 Web Service 和應(yīng)用服務(wù)器的網(wǎng)絡(luò)開發(fā)和研究，使用 Netty 進(jìn)行 Java 高性能網(wǎng)絡(luò)編程的開發(fā)。這些工作經(jīng)歷，讓他對(duì)網(wǎng)絡(luò)編程有了極為深入的理解。?網(wǎng)絡(luò)編程是個(gè)重實(shí)戰(zhàn)的模塊。我在學(xué)網(wǎng)絡(luò)編程的那會(huì)，就掉進(jìn)了坑里，老是想面面俱到，但奈何頭緒太多，一直鉆牛角尖，過(guò)分關(guān)注知識(shí)點(diǎn)本身，片面地?cái)財(cái)嗔怂鼈兣c實(shí)際工作的聯(lián)系。?而在這個(gè)專欄里，盛哥真正做到了講練結(jié)合，從底層原理講起，逐步聚焦到高性能編程上，講解了常見異常和性能問(wèn)題，并手把手帶你編寫一個(gè)高性能 HTTP 服務(wù)器。?專欄主要分三大層級(jí)，逐步遞進(jìn)：??第一，充分理解 TCP/IP 網(wǎng)絡(luò)模型和協(xié)議。前部分會(huì)帶你梳理 TCP/IP 模型和網(wǎng)絡(luò)函數(shù)接口之間的聯(lián)系，通過(guò)實(shí)例展開對(duì)套接字、套接字緩沖區(qū)、擁塞控制、數(shù)據(jù)包和數(shù)據(jù)流、本地套接字（UNIX 域套接字）等的討論，交付給你一個(gè)全面細(xì)致的知識(shí)體系。??第二，結(jié)合對(duì)協(xié)議的理解，增強(qiáng)對(duì)各種異常情況的處理能力。比如，對(duì) TCP 數(shù)據(jù)流的處理、半關(guān)閉的連接、TCP 連接有效性的偵測(cè)、處理各種異常情況等，這些問(wèn)題決定了程序的健壯性。這一部分的內(nèi)容，將在提升篇中詳細(xì)展開。??第三，寫出可支持大規(guī)模高并發(fā)的網(wǎng)絡(luò)處理程序。性能篇和實(shí)戰(zhàn)篇，將會(huì)帶你深入研究 C10K 問(wèn)題，引入進(jìn)程、線程、多路復(fù)用、非阻塞、異步、事件驅(qū)動(dòng)等現(xiàn)代高性能網(wǎng)絡(luò)編程所需要的技術(shù)，結(jié)合實(shí)例上手操作，教你寫出高性能的網(wǎng)絡(luò)程序。?具體每部分內(nèi)容，來(lái)看目錄。???別光我說(shuō)，還收集了一些其他人的評(píng)價(jià)，供你參考。??盛哥用荀子那句“不聞不若聞之，聞之不若見之，見之不若知之，知之不若行之?！眮?lái)詮釋學(xué)習(xí)網(wǎng)絡(luò)編程的最佳方法，太文藝了，要我說(shuō)的話：學(xué)就完了。?學(xué)透了，就要去用，對(duì)專欄里的代碼進(jìn)行修改和調(diào)試，進(jìn)一步加深理解。把這些內(nèi)容吃下去，消化掉，從底層到實(shí)戰(zhàn)，用科學(xué)的方法才能快速且透徹地理解高性能網(wǎng)絡(luò)編程。?喵哥申請(qǐng)了粉絲的專屬優(yōu)惠：?秒殺 專屬口令「happy2021」立省 ￥40，到手僅￥89，僅限?50?個(gè)名額??很多人說(shuō) 5G 時(shí)代是一場(chǎng)革命，是不是業(yè)務(wù)創(chuàng)新的革命，我說(shuō)不好。但如果一個(gè)業(yè)務(wù)平臺(tái)的網(wǎng)絡(luò)優(yōu)化技術(shù)沒(méi)跟上，面對(duì)每個(gè)客戶端平均數(shù)倍的網(wǎng)速激增，你猜先會(huì)革掉誰(shuí)的命。?? 點(diǎn)擊「閱讀原文」輸入粉絲專享口令「happy2021」以 立省 ￥40 入手
下載文檔
