當前位置:首頁 > 公眾號精選 > 編程技術宇宙
[導讀]從9月1號開始,成都市政府宣布了為期四天的全員核酸檢測。昨天下午,我們小區(qū)物業(yè)通知了預計14:00-17:00會進行檢測,告訴我們會挨個樓棟通知下去檢測。結果一直拖到晚上也沒收到通知,我一直忙別的也沒留意,結果上網(wǎng)一看,關于成都核酸系統(tǒng)崩潰的各種段子已經(jīng)滿天飛了。

事情的起因是這樣的:

從9月1號開始,成都市政府宣布了為期四天的全員核酸檢測。昨天下午,我們小區(qū)物業(yè)通知了預計14:00-17:00會進行檢測,告訴我們會挨個樓棟通知下去檢測。

結果一直拖到晚上也沒收到通知,我一直忙別的也沒留意,結果上網(wǎng)一看,關于成都核酸系統(tǒng)崩潰的各種段子已經(jīng)滿天飛了。

是的,成都核酸檢測系統(tǒng),又崩潰了!

辛苦的大白們沒有辦法,都用上了這種古老的方式來尋找“信號”。

因為這個系統(tǒng)出了問題,導致核酸檢測工作非常緩慢,大量的市民排隊等待,平常排隊半小時能完成的,昨晚都要排隊好幾個小時。

到晚上23點半,物業(yè)直接通知只給部分人做,其他人可以洗洗睡了。好家伙,不知道有多少人白排了幾個小時隊。

這好好的系統(tǒng)它咋就崩潰了呢?

有網(wǎng)友挖出了一個中標公告,說這套系統(tǒng)背后使用的是浪潮的服務器:

一千多萬的項目,結果就這?

但隨后,有疑似浪潮的人出來回復:

人家說的很清楚,上面中標的只是基礎運維,這套軟件系統(tǒng)的設計另有其人。

隨后有人又開噴健康碼,噴鵝廠。

但實際上,崩的不是健康碼,而是大白使用的核酸采集錄入系統(tǒng),這是兩套獨立的系統(tǒng)。

再接著,有人爆出這套軟件是東軟公司做的。

于是一時間,所有人把怒火對準了東軟,很快就把東軟這個詞條送上了微博熱搜榜第一的位置。

關于崩潰的原因,也有各種說法在朋友圈、微信群里流傳,一時難辨真假。

有說是這套系統(tǒng)背后使用的MySQL使用了超寬的大表:

有說是MySQL單表容量太大,造成性能下降:

還有的說是因為負載均衡不行,沒法支撐高并發(fā)。

總結起來基本上就兩個原因:

1、數(shù)據(jù)庫的問題,數(shù)據(jù)量大后,查詢檢索效率低下。

成都全市人口超過2000萬,每天一次核酸,那就是單日新增兩千萬條記錄,最近幾天一直在做,數(shù)據(jù)容量很快就是幾億的規(guī)模,如果后端用MySQL還不分表,那確實夠嗆。

2、高并發(fā)的問題,同一時間大量請求,服務器扛不住。

一般情況下,使用nginx負載均衡,單機能做到幾萬的并發(fā)量。但成都2000W+的人口規(guī)模,全面做核酸的情況下,幾萬的并發(fā)肯定是不夠用的。

倘若這套系統(tǒng)背后真的就是一個nginx+mysql(不分表),那昨晚的情況也就不足為奇了。

好了,吃瓜歸吃瓜,我們還是要來點干貨,作為一個程序員,要在吃瓜中學會成長。

高并發(fā)之路

這篇文章,我們來回答一個問題:到底該怎么做高并發(fā)?

讓我們從零開始。

1、單機時代

一開始的時候,用戶量很少,一天就幾百上千個請求,一臺服務器就完全足夠。

我們用Java、Python、PHP或者其他后端語言開發(fā)一個Web后端服務,再用一個MySQL來存儲業(yè)務數(shù)據(jù),它倆攜手工作,運行在同一臺服務器上,對外提供服務。

2、應用與數(shù)據(jù)庫分離

慢慢的,用戶量開始多了起來,一臺服務器有點夠嗆,把它們拆開成兩臺服務器,一臺專門運行Web服務,一臺專門用來運行數(shù)據(jù)庫,這樣它們就能獨享服務器上的CPU和內(nèi)存資源,不用互搶了。

3、緩存系統(tǒng)

后來,用戶量進一步增加,每一次都要去數(shù)據(jù)庫里查,有點費時間,引入一個緩存系統(tǒng),可以有效縮短服務的響應時間。

4、軟件負載均衡

用戶量還在增加,一個Web服務的吞吐量開始達到了上限,系統(tǒng)開始出現(xiàn)卡頓。這時候,可以復制多個Web服務出來,再用一個nginx來進行負載均衡,將請求分攤到所有Web服務器上,提高并發(fā)量。

5、數(shù)據(jù)讀寫分離

隨著系統(tǒng)的運行和用戶的增長,數(shù)據(jù)量越來越多,數(shù)據(jù)庫的瓶頸開始顯現(xiàn),讀寫明顯變慢。這時候,可以增加新的數(shù)據(jù)庫服務器,將讀寫進行分離,二者做好數(shù)據(jù)同步,提高數(shù)據(jù)庫服務的整體I/O性能。

6、數(shù)據(jù)庫分庫分表

系統(tǒng)中的數(shù)據(jù)越來越多,即便是讀寫分離了,但一張表中的記錄越來越多,從幾百萬到幾千萬,甚至要過億了。把它們?nèi)咳谕粡埍砝?,檢索查詢耗時費力,是時候進行分庫分表,把數(shù)據(jù)拆分一下,提高數(shù)據(jù)查詢效率。

7、硬件負載均衡

再后來,業(yè)務發(fā)展很不錯,用戶量激增,以至于強勁的Nginx也扛不住了。

一臺不夠,那就多整幾臺,再引入一個硬件負載均衡的服務器,比如F5,將網(wǎng)絡流量分發(fā)到不同的Nginx服務器上,再一次提高性能。

8、DNS負載均衡

再再后來,用戶量還在蹭蹭蹭的增長,強悍如F5這樣的硬件負載均衡服務器也扛不住這樣的高并發(fā)。

老辦法,一個不夠那就多整幾個。這一次,咱們在域名解析上下功夫,不同地區(qū)的用戶,在訪問同一個域名時,解析到不同的IP地址,以此來將流量進一步拆分。

上面就是從最簡單的單機到復雜集群的高并發(fā)演進之路。

高并發(fā)是一個很大的話題,它所涵蓋的東西其實遠遠不止上面這些內(nèi)容。除了這些之外,像是消息隊列、數(shù)據(jù)庫選型、CDN、編程語言中的協(xié)程等等技術都能為提高并發(fā)助力。

回到這次崩潰事件上,我想著經(jīng)過一夜的折騰,今天總該好點了吧,結果下午一開始,又繼續(xù)擺爛了:

在我寫這篇文章的時候,當事公司已經(jīng)發(fā)布了說明:

本站聲明: 本文章由作者或相關機構授權發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點,本站亦不保證或承諾內(nèi)容真實性等。需要轉(zhuǎn)載請聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權益,請及時聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或?qū)⒋呱龈蟮莫毥谦F公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關鍵字: 阿維塔 塞力斯 華為

加利福尼亞州圣克拉拉縣2024年8月30日 /美通社/ -- 數(shù)字化轉(zhuǎn)型技術解決方案公司Trianz今天宣布,該公司與Amazon Web Services (AWS)簽訂了...

關鍵字: AWS AN BSP 數(shù)字化

倫敦2024年8月29日 /美通社/ -- 英國汽車技術公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時1.5...

關鍵字: 汽車 人工智能 智能驅(qū)動 BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務能7×24不間斷運行,同時企業(yè)卻面臨越來越多業(yè)務中斷的風險,如企業(yè)系統(tǒng)復雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務連續(xù)性,提升韌性,成...

關鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報道,騰訊和網(wǎng)易近期正在縮減他們對日本游戲市場的投資。

關鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會開幕式在貴陽舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。

關鍵字: 華為 12nm EDA 半導體

8月28日消息,在2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會上,華為常務董事、華為云CEO張平安發(fā)表演講稱,數(shù)字世界的話語權最終是由生態(tài)的繁榮決定的。

關鍵字: 華為 12nm 手機 衛(wèi)星通信

要點: 有效應對環(huán)境變化,經(jīng)營業(yè)績穩(wěn)中有升 落實提質(zhì)增效舉措,毛利潤率延續(xù)升勢 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務引領增長 以科技創(chuàng)新為引領,提升企業(yè)核心競爭力 堅持高質(zhì)量發(fā)展策略,塑強核心競爭優(yōu)勢...

關鍵字: 通信 BSP 電信運營商 數(shù)字經(jīng)濟

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺與中國電影電視技術學會聯(lián)合牽頭組建的NVI技術創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會上宣布正式成立。 活動現(xiàn)場 NVI技術創(chuàng)新聯(lián)...

關鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會上,軟通動力信息技術(集團)股份有限公司(以下簡稱"軟通動力")與長三角投資(上海)有限...

關鍵字: BSP 信息技術
關閉