當(dāng)前位置:首頁(yè) > 公眾號(hào)精選 > 架構(gòu)師社區(qū)
[導(dǎo)讀]無論是開發(fā)、測(cè)試,還是DBA,都難免會(huì)涉及到數(shù)據(jù)庫(kù)的操作,比如:創(chuàng)建某張表,添加某個(gè)字段、添加數(shù)據(jù)、更新數(shù)據(jù)、刪除數(shù)據(jù)、查詢數(shù)據(jù)等等。

前言

無論是開發(fā)、測(cè)試,還是DBA,都難免會(huì)涉及到數(shù)據(jù)庫(kù)的操作,比如:創(chuàng)建某張表,添加某個(gè)字段、添加數(shù)據(jù)、更新數(shù)據(jù)、刪除數(shù)據(jù)、查詢數(shù)據(jù)等等。

正常情況下還好,但如果操作數(shù)據(jù)庫(kù)時(shí)出現(xiàn)失誤,比如:

  1. 刪除訂單數(shù)據(jù)時(shí)where條件寫錯(cuò)了,導(dǎo)致多刪了很多用戶訂單。
  2. 更新會(huì)員有效時(shí)間時(shí),一次性把所有會(huì)員的有效時(shí)間都更新了。
  3. 修復(fù)線上數(shù)據(jù)時(shí),改錯(cuò)了,想還原。

還有很多很多場(chǎng)景,我就不一一列舉了。

如果出現(xiàn)線上環(huán)境數(shù)據(jù)庫(kù)誤操作怎么辦?有沒有后悔藥?

答案是有的,請(qǐng)各位看官仔細(xì)往下看。

1.不要用聊天工具發(fā)sql語句

通常開發(fā)人員寫好sql語句之后,習(xí)慣通過聊天工具,比如:qq、釘釘、或者騰訊通等,發(fā)給團(tuán)隊(duì)老大或者DBA在線上環(huán)境執(zhí)行。但由于有些聊天工具,對(duì)部分特殊字符會(huì)自動(dòng)轉(zhuǎn)義,而且有些消息由于內(nèi)容太長(zhǎng),會(huì)被自動(dòng)分成多條消息。

這樣會(huì)導(dǎo)致團(tuán)隊(duì)老大或者DBA復(fù)制出來的sql不一定是正確的。

他們需要手動(dòng)拼接成一條完整的sql,有時(shí)甚至需要把轉(zhuǎn)義后的字符替換回以前的特殊字符,無形之中會(huì)浪費(fèi)很多額外的時(shí)間。即使最終sql拼接好了,真正執(zhí)行sql的人,心里一定很虛。

所以,強(qiáng)烈建議你把要在線上執(zhí)行的sql語句用郵件發(fā)過去,可以避免使用聊天工具的一些弊端,減少一些誤操作的機(jī)會(huì)。而且有個(gè)存檔,方便今后有問題的時(shí)候回溯原因。很多聊天工具只保留最近7天的歷史記錄,郵件會(huì)保留更久一些。

別用聊天工具發(fā)sql語句!

別用聊天工具發(fā)sql語句!

別用聊天工具發(fā)sql語句!

重要的事情說三遍,它真的能減少一些誤操作。

2.把sql語句壓縮成一行

有些時(shí)候,開發(fā)人員寫的sql語句很長(zhǎng),使用了各種join和union,而且使用美化工具,將一條sql變成了多行。在復(fù)制sql的時(shí)候,自己都無法確定sql是否完整。(為了裝逼,把自己也坑了,哈哈哈)

線上環(huán)境有時(shí)候需要通過命令行連接數(shù)據(jù)庫(kù),比如:mysql,你把sql語句復(fù)制過來后,在命令行界面執(zhí)行,由于屏幕滾動(dòng)太快,這時(shí)根本無法確定sql是否都執(zhí)行成功。

針對(duì)這類問題,強(qiáng)烈建議把sql語句壓縮成一行,去掉多余的換行符和空格,可以有效的減少一些誤操作。

sql壓縮工具推薦使用:https://tool.lu/sql/

3.操作數(shù)據(jù)之前先select一下

需要特別說明的是:本文的操作數(shù)據(jù)主要指修改和刪除數(shù)據(jù)。

很多時(shí)候,由于我們?nèi)藶槭д`,把where條件寫錯(cuò)了。但沒有怎么仔細(xì)檢查,就把sql語句直接執(zhí)行了。影響范圍小還好,如果影響幾萬、幾十萬,甚至幾百萬行數(shù)據(jù),我們可能要哭了。

針對(duì)這種情況,在操作數(shù)據(jù)之前,把sql先改成select count(*)語句,比如:

update order set status=1 where status=0;

	

改成:

select count(*) from order where status=0;

	

查一下該sql執(zhí)行后影響的記錄行數(shù),做到自己心中有數(shù)。也給自己一次測(cè)試sql是否正確,確認(rèn)是否執(zhí)行的機(jī)會(huì)。

4.操作數(shù)據(jù)sql加limit

即使通過上面的select語句確認(rèn)了sql語句沒有問題,執(zhí)行后影響的記錄行數(shù)是對(duì)的。

也建議你不要立刻執(zhí)行,建議在正在執(zhí)行的時(shí)候,加上limit+select出的記錄行數(shù)。例如:

update order set status=1 where status=0 limit 1000;

假設(shè)有一次性更新的數(shù)據(jù)太多,所有相關(guān)記錄行都會(huì)被鎖住,造成長(zhǎng)時(shí)間的鎖等待,而造成用戶請(qǐng)求超時(shí)。

此外,加limit可以避免一次性操作太多數(shù)據(jù),對(duì)服務(wù)器的cpu造成影響。

還有一個(gè)最重要的原因:加limit后,操作數(shù)據(jù)的影響范圍是完全可控的。

5.update時(shí)更新修改人和修改時(shí)間

很多人寫update語句時(shí),如果要修改狀態(tài),就只更新狀態(tài),不管其他的字段。比如:

update order set status=1 where status=0;

	

這條sql會(huì)把status等于0的數(shù)據(jù),全部更新成1。

后來發(fā)現(xiàn)業(yè)務(wù)邏輯有問題,不應(yīng)該這么更新,需要把status狀態(tài)回滾。

這時(shí)你可能會(huì)很自然想到這條sql:

update order set status=0 where status=1;

	

但仔細(xì)想想又有些不對(duì)。

這樣不是會(huì)把有部分以前status就是1的數(shù)據(jù)更新成0?

這回真的要哭了,嗚嗚嗚。

這時(shí),送你一個(gè)好習(xí)慣:在更新數(shù)據(jù)的時(shí)候,同時(shí)更新修改人和修改時(shí)間字段。

update order set status=1,edit_date=now(),edit_user='admin' where status=0;
這樣在恢復(fù)數(shù)據(jù)時(shí)就能通過修改人修改時(shí)間字段過濾數(shù)據(jù)了。 

后面需要用到的修改時(shí)間通過這條sql語句可以輕松找到:

select edit_user ,edit_date from `order` order by edit_date desc limit 50;

當(dāng)然,如果是高并發(fā)系統(tǒng)不建議這種批量更新方式,可能會(huì)鎖表一定時(shí)間,造成請(qǐng)求超時(shí)。

有些同學(xué)可能會(huì)問:為什么要同時(shí)更新修改人,只更新修改時(shí)間不行嗎?

主要有如下的原因:

  1. 為了標(biāo)識(shí)非正常用戶操作,方便后面統(tǒng)計(jì)和定位問題。
  2. 有些情況下,在執(zhí)行sql語句的過程中,正常用戶產(chǎn)生數(shù)據(jù)的修改時(shí)間跟你的可能一模一樣,導(dǎo)致回滾時(shí)數(shù)據(jù)查多了。

6.多用邏輯刪除,少用物理刪除

在業(yè)務(wù)開發(fā)中,刪除數(shù)據(jù)是必不可少的一種業(yè)務(wù)場(chǎng)景。

有些人開發(fā)人員習(xí)慣將表設(shè)計(jì)成物理刪除,根據(jù)主鍵只用一條delete語句就能輕松搞定。

他們給出的理由是:節(jié)省數(shù)據(jù)庫(kù)的存儲(chǔ)空間。

想法是好的,但是現(xiàn)實(shí)很殘酷。

如果有條極重要的數(shù)據(jù)刪錯(cuò)了,想恢復(fù)怎么辦?

此時(shí)只剩八個(gè)字:沒有數(shù)據(jù),恢復(fù)不了。(PS:或許通過binlog二進(jìn)制文件可以恢復(fù))

如果之前設(shè)計(jì)表的時(shí)候用的邏輯刪除,上面的問題就變得好辦了。刪除數(shù)據(jù)時(shí),只需update刪除狀態(tài)即可,例如:

update order set del_status=1,edit_date=now(),edit_user='admin' where id=123;

假如出現(xiàn)異常,要恢復(fù)數(shù)據(jù),把該id的刪除狀態(tài)還原即可,例如:

update order set del_status=0,edit_date=now(),edit_user='admin' where id=123;

7.操作數(shù)據(jù)之前先做備份

如果只是修改了少量的數(shù)據(jù),或者只執(zhí)行了一兩條sql語句,通過上面的修改人和修改時(shí)間字段,在需要回滾時(shí),能快速的定位到正確的數(shù)據(jù)。

但是如果修改的記錄行數(shù)很多,并且執(zhí)行了多條sql,產(chǎn)生了很多修改時(shí)間。這時(shí),你可能就要犯難了,沒法一次性找出哪些數(shù)據(jù)需要回滾。

為了解決這類問題,可以將表做備份。

可以使用如下sql備份:

create table order_bak_2021031721 like`order`;insert into order_bak_2021031721 select * from`order`;

	

先創(chuàng)建一張一模一樣的表,然后把數(shù)據(jù)復(fù)制到新表中。

也可以簡(jiǎn)化成一條sql:

create table order_bak_2021031722 select * from`order`;
創(chuàng)建表的同時(shí)復(fù)制數(shù)據(jù)到新表中。 

此外,建議在表名中加上bak和時(shí)間,一方面是為了通過表名快速識(shí)別出哪些表是備份表,另一方面是為了備份多次時(shí)好做區(qū)分。因?yàn)橛袝r(shí)需要執(zhí)行多次sql才能把數(shù)據(jù)修復(fù)好,這種情況建議把表備份多次,如果出現(xiàn)異常,把數(shù)據(jù)回滾到最近的一次備份,可以節(jié)省很多重復(fù)操作的時(shí)間。

恢復(fù)數(shù)據(jù)時(shí),把sql語句改成select語句,先在備份庫(kù)找出相關(guān)數(shù)據(jù),每條數(shù)據(jù)對(duì)應(yīng)一條update語句,還原到老表中。

8.中間結(jié)果寫入臨時(shí)表

有時(shí)候,我們要先用一條sql查詢出要更新的記錄的id,然后通過這些id更新數(shù)據(jù)。

批量更新之后,發(fā)現(xiàn)不對(duì),要回滾數(shù)據(jù)。但由于有些數(shù)據(jù)已更新,此時(shí)使用相同的sql相同的條件,卻查不出上次相同的id了。

這時(shí),我們開始慌了。

針對(duì)這種情況,我們可以先將第一次查詢的id存入一張臨時(shí)表,然后通過臨時(shí)表中的id作為查詢條件更新數(shù)據(jù)。

如果要恢復(fù)數(shù)據(jù),只用通過臨時(shí)表中的id作為查詢條件更新數(shù)據(jù)即可。

修改完,3天之后,如果沒有出現(xiàn)問題,就可以把臨時(shí)表刪掉了。

9.表名前面一定要帶庫(kù)名

我們?cè)趯憇ql時(shí)為了方便,習(xí)慣性不帶數(shù)據(jù)庫(kù)名稱。比如:

update order set status=1,edit_date=now(),edit_user='admin' where status=0;
假如有多個(gè)數(shù)據(jù)庫(kù)中有相同的表order,表結(jié)構(gòu)一模一樣,只是數(shù)據(jù)不一樣。 

由于執(zhí)行sql語句的人一個(gè)小失誤,進(jìn)錯(cuò)數(shù)據(jù)庫(kù)了。

use trade1;

然后執(zhí)行了這條sql語句,結(jié)果悲劇了。

有個(gè)非常有效的預(yù)防這類問題的方法是加數(shù)據(jù)庫(kù)名:

update `trade2`.`order` set status=1,edit_date=now(),edit_user='admin' where status=0;
這樣即使執(zhí)行sql語句前進(jìn)錯(cuò)數(shù)據(jù)庫(kù)了,也沒什么影響。 

10.字段增刪改的限制

很多時(shí)候,我們少不了對(duì)表字段的操作,比如:新加、修改、刪除字段,但每種情況都不一樣。

新加的字段一定要允許為空

新加的字段一定要允許為空。為什么要這樣設(shè)計(jì)呢?

正常情況下,如果程序新加了字段,一般是先在數(shù)據(jù)庫(kù)中加字段,然后再發(fā)程序的最新代碼。

為什么是這種順序?

因?yàn)槿绻劝l(fā)程序,然后在數(shù)據(jù)庫(kù)中加字段。在該程序剛部署成功,但數(shù)據(jù)庫(kù)新字段還沒來得及加的這段時(shí)間內(nèi),最新程序中,所有使用了新加字段的增刪改查sql都會(huì)報(bào)字段不存在的異常。

好了,就按先在數(shù)據(jù)庫(kù)中加字段,再發(fā)程序的順序。

如果數(shù)據(jù)庫(kù)中新加的字段非空,最新的程序還沒發(fā),線上跑的還是老代碼,這時(shí)如果有insert操作,就會(huì)報(bào)字段不能為空的異常。因?yàn)樾录拥姆强兆侄?,老代碼是沒法賦值的。

所以說新加的字段一定要允許為空。

除此之外,這種設(shè)計(jì)更多的考慮是為了程序發(fā)布失敗時(shí)的回滾操作。如果新加的字段允許為空,則可以不用回滾數(shù)據(jù)庫(kù),只需回滾代碼即可,是不是很方便?

不允許刪除字段

刪除字段是不允許的,特別是必填字段一定不能刪除。

為什么這么說?

假設(shè)開發(fā)人員已經(jīng)把程序改成不使用刪除字段了,接下來如何部署呢?

  1. 如果先把程序部署好了,還沒來得及刪除數(shù)據(jù)庫(kù)相關(guān)表字段。當(dāng)有insert請(qǐng)求時(shí),由于數(shù)據(jù)庫(kù)中該字段是必填的,會(huì)報(bào)必填字段不能為空的異常。
  2. 如果先把數(shù)據(jù)庫(kù)中相關(guān)表字段刪了,程序還沒來得及發(fā)。這時(shí)所有涉及該刪除字段的增刪改查,都會(huì)報(bào)字段不存在的異常。

所以,線上環(huán)境必填字段一定不能刪除的。

根據(jù)實(shí)際情況修改字段

修改字段要分為這三種情況:

1.修改字段名稱

修改字段名稱也不允許,跟刪除必填字段的問題差不多。

  1. 如果把程序部署好了,還沒來得及修改數(shù)據(jù)庫(kù)中表字段名稱。這時(shí)所有涉及該字段的增刪改查,都會(huì)報(bào)字段不存在的異常。
  2. 如果先把數(shù)據(jù)庫(kù)中字段名稱改了,程序還沒來得及發(fā)。這時(shí)所有涉及該字段的增刪改查,同樣也會(huì)報(bào)字段不存在的異常。

所以,線上環(huán)境字段名稱一定不要修改。

2.修改字段類型

修改字段類型時(shí)一定要兼容之前的數(shù)據(jù)。例如:

  1. tinyint改成int可以,但int改成tinyint要仔細(xì)衡量一下。
  2. varchar改成text可以,但text改成varchar要仔細(xì)衡量一下。

3.修改字段長(zhǎng)度

字段長(zhǎng)度建議改大,通常情況下,不建議改小。如果一定要改小,要先確認(rèn)該字段可能會(huì)出現(xiàn)的最大長(zhǎng)度,避免insert操作時(shí)出現(xiàn)字段太長(zhǎng)的異常。

此外,建議改大也需要設(shè)置一個(gè)合理的長(zhǎng)度,避免數(shù)據(jù)庫(kù)資源浪費(fèi)。

總結(jié)

本文分享了10種減少數(shù)據(jù)庫(kù)誤操作的方法,并非所有場(chǎng)景都適合你。特別是在一些高并發(fā),或者單表數(shù)據(jù)量非常大的場(chǎng)景,你需要根據(jù)實(shí)際情況酌情選擇。但我敢肯定的是讀完這篇文章,你一定會(huì)有一些收獲,因?yàn)榇蟛糠址椒▽?duì)你來說是適用的,可能會(huì)讓你少走很多彎路,強(qiáng)烈建議收藏。




				
				
		
		

免責(zé)聲明:本文內(nèi)容由21ic獲得授權(quán)后發(fā)布,版權(quán)歸原作者所有,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。文章僅代表作者個(gè)人觀點(diǎn),不代表本平臺(tái)立場(chǎng),如有問題,請(qǐng)聯(lián)系我們,謝謝!

本站聲明: 本文章由作者或相關(guān)機(jī)構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點(diǎn),本站亦不保證或承諾內(nèi)容真實(shí)性等。需要轉(zhuǎn)載請(qǐng)聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請(qǐng)及時(shí)聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或?qū)⒋呱龈蟮莫?dú)角獸公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關(guān)鍵字: 阿維塔 塞力斯 華為

倫敦2024年8月29日 /美通社/ -- 英國(guó)汽車技術(shù)公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認(rèn)證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時(shí)1.5...

關(guān)鍵字: 汽車 人工智能 智能驅(qū)動(dòng) BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務(wù)能7×24不間斷運(yùn)行,同時(shí)企業(yè)卻面臨越來越多業(yè)務(wù)中斷的風(fēng)險(xiǎn),如企業(yè)系統(tǒng)復(fù)雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務(wù)連續(xù)性,提升韌性,成...

關(guān)鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報(bào)道,騰訊和網(wǎng)易近期正在縮減他們對(duì)日本游戲市場(chǎng)的投資。

關(guān)鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國(guó)國(guó)際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)開幕式在貴陽(yáng)舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。

關(guān)鍵字: 華為 12nm EDA 半導(dǎo)體

8月28日消息,在2024中國(guó)國(guó)際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)上,華為常務(wù)董事、華為云CEO張平安發(fā)表演講稱,數(shù)字世界的話語權(quán)最終是由生態(tài)的繁榮決定的。

關(guān)鍵字: 華為 12nm 手機(jī) 衛(wèi)星通信

要點(diǎn): 有效應(yīng)對(duì)環(huán)境變化,經(jīng)營(yíng)業(yè)績(jī)穩(wěn)中有升 落實(shí)提質(zhì)增效舉措,毛利潤(rùn)率延續(xù)升勢(shì) 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務(wù)引領(lǐng)增長(zhǎng) 以科技創(chuàng)新為引領(lǐng),提升企業(yè)核心競(jìng)爭(zhēng)力 堅(jiān)持高質(zhì)量發(fā)展策略,塑強(qiáng)核心競(jìng)爭(zhēng)優(yōu)勢(shì)...

關(guān)鍵字: 通信 BSP 電信運(yùn)營(yíng)商 數(shù)字經(jīng)濟(jì)

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺(tái)與中國(guó)電影電視技術(shù)學(xué)會(huì)聯(lián)合牽頭組建的NVI技術(shù)創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會(huì)上宣布正式成立。 活動(dòng)現(xiàn)場(chǎng) NVI技術(shù)創(chuàng)新聯(lián)...

關(guān)鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長(zhǎng)三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會(huì)上,軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司(以下簡(jiǎn)稱"軟通動(dòng)力")與長(zhǎng)三角投資(上海)有限...

關(guān)鍵字: BSP 信息技術(shù)
關(guān)閉
關(guān)閉