快捷導(dǎo)航

shell腳本操作mysql數(shù)據(jù)庫(kù)刪除重復(fù)的數(shù)據(jù)

更新時(shí)間：2019年03月15日 11:28:50 作者：Scub

今天小編就為大家分享一篇關(guān)于shell腳本操作mysql數(shù)據(jù)庫(kù)刪除重復(fù)的數(shù)據(jù)，小編覺得內(nèi)容挺不錯(cuò)的，現(xiàn)在分享給大家，具有很好的參考價(jià)值，需要的朋友一起跟隨小編來(lái)看看吧

由于之前的業(yè)務(wù)，造成數(shù)據(jù)庫(kù)上產(chǎn)生了臟數(shù)據(jù)，寫個(gè)腳本刪除重復(fù)的數(shù)據(jù)。由于是開發(fā)測(cè)試環(huán)境，所以選擇任意刪除相同uid中的一條。由于每次執(zhí)行只刪除重復(fù)數(shù)據(jù)的一條，需要重復(fù)執(zhí)行，如果本輪沒有數(shù)據(jù)被刪就OK

#!/bin/sh
# delete all company's duplicate uid
MYSQL_BIN_PATH=/data/mysql/server/mysql_3306/bin
MYSQL_SOCK_PATH=/data/mysql/server/mysql_3306/tmp
DBUSER=dbuser
DBPWD=userpwd
DBHOSTNAME=192.168.1.105
PORT=3306
# get all company_id
for company_id in `${MYSQL_BIN_PATH}/mysql -u${DBUSER} -p${DBPWD} -h ${DBHOSTNAME} -P ${PORT} --socket=${MYSQL_SOCK_PATH}/mysql.sock -e "
  SELECT company_id FROM company.companypage;"`
do
 if [ $company_id != "company_id" ] ; then
# if [ $company_id -eq 2733 ] ; then 
 suffix=`expr ${company_id} % 100`
 for user_id in `${MYSQL_BIN_PATH}/mysql -u${DBUSER} -p${DBPWD} -h ${DBHOSTNAME} -P ${PORT} --socket=${MYSQL_SOCK_PATH}/mysql.sock -e "
 SELECT user_id FROM company.company_candidate_${suffix} WHERE company_id=${company_id} AND user_id>0 GROUP BY company_id, user_id HAVING COUNT(user_id) > 1;"`
 do
 if [ $user_id != "user_id" ] ; then
  ${MYSQL_BIN_PATH}/mysql -u${DBUSER} -p${DBPWD} -h ${DBHOSTNAME} -P ${PORT} --socket=${MYSQL_SOCK_PATH}/mysql.sock -e "
  DELETE FROM company.company_candidate_${suffix} WHERE company_id=${company_id} and user_id=${user_id} limit 1;" 
  echo "delete from company_candidate_${suffix} where company_id=${company_id} and user_id=${user_id} limit 1"
 fi
 done
# fi
 fi
done
exit 0

總結(jié)

以上就是這篇文章的全部?jī)?nèi)容了，希望本文的內(nèi)容對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，謝謝大家對(duì)腳本之家的支持。如果你想了解更多相關(guān)內(nèi)容請(qǐng)查看下面相關(guān)鏈接

您可能感興趣的文章:

相關(guān)文章

shell兩個(gè)文件去重的多種姿勢(shì)
最近在利用shell幫公司優(yōu)化挖掘關(guān)鍵詞的流程，用shell替代了多個(gè)環(huán)節(jié)的操作，極大提高了工作效率。下面這篇文章就給大家分享了利用shell實(shí)現(xiàn)兩個(gè)文件去重的多種姿勢(shì)，有需要的朋友們可以參考借鑒，下面來(lái)一起看看吧。
2016-12-12
Linux下統(tǒng)計(jì)當(dāng)前文件夾下的文件個(gè)數(shù)、目錄個(gè)數(shù)
這篇文章主要介紹了Linux下統(tǒng)計(jì)當(dāng)前文件夾下的文件個(gè)數(shù)、目錄個(gè)數(shù),本文使用ls命令配合管理、grep命令實(shí)現(xiàn)統(tǒng)計(jì)需求,需要的朋友可以參考下
2014-10-10
LINUX 查找tomcat日志關(guān)鍵詞命令
下面小編就為大家?guī)?lái)一篇LINUX 查找tomcat日志關(guān)鍵詞命令。小編覺得挺不錯(cuò)的，現(xiàn)在就分享給大家，也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧
2017-03-03
Shell判斷文件或目錄是否存在的腳本(收藏)
這篇文章主要介紹了Shell判斷文件或目錄是否存在的腳本，shell腳本判斷文件是否存在非常簡(jiǎn)單，文中給大家列舉了常用的例子，給大家講解的非常詳細(xì)，需要的朋友跟隨小編一起看看吧
2022-11-11
linux中scp命令和scp命令用法大全
scp是linux中功能最強(qiáng)大的文件傳輸命令，可以實(shí)現(xiàn)從本地到遠(yuǎn)程以及遠(yuǎn)程到本地的輕松文件傳輸操作，本文給大家分享linux中scp命令和scp命令用法大全，需要的朋友可以參考下
2015-09-09
Shell腳本中不同進(jìn)制數(shù)據(jù)轉(zhuǎn)換的例子（二進(jìn)制、八進(jìn)制、十六進(jìn)制、base64)
這篇文章主要介紹了Shell腳本中不同進(jìn)制數(shù)據(jù)轉(zhuǎn)換的例子（二進(jìn)制、八進(jìn)制、十六進(jìn)制、base64),需要的朋友可以參考下
2014-11-11
在Linux命令行中列出帶有l(wèi)s文件的技巧
今天小編就為大家分享一篇關(guān)于在Linux命令行中列出帶有l(wèi)s文件的技巧，小編覺得內(nèi)容挺不錯(cuò)的，現(xiàn)在分享給大家，具有很好的參考價(jià)值，需要的朋友一起跟隨小編來(lái)看看吧
2018-10-10
linux 權(quán)限管理命令腳本解析
這篇文章主要為大家介紹了linux 權(quán)限管理命令腳本解析,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪
2023-09-09
Linux?Shell腳本多命令執(zhí)行邏輯的示例詳解
Linux?中可以使用分號(hào)";“、雙and號(hào)”&&“和雙豎線”||"來(lái)連接多個(gè)命令。根據(jù)場(chǎng)景的不同適當(dāng)?shù)氖褂煤线m的符號(hào)，感興趣的小伙伴可以了解一下
2022-10-10
UNIX sh(Bourne Shell)腳本里面使用數(shù)組的兩種方法
這篇文章主要介紹了UNIX sh(Bourne Shell)腳本里面使用數(shù)組的兩種方法 ,需要的朋友可以參考下
2016-12-12