主頁 > 知識庫 > 如何利用Golang解析讀取Mysql備份文件

如何利用Golang解析讀取Mysql備份文件

熱門標簽:中國地圖標注省會高清 南通如皋申請開通400電話 廣州呼叫中心外呼系統(tǒng) 江西轉(zhuǎn)化率高的羿智云外呼系統(tǒng) 地圖標注的汽車標 高德地圖標注口訣 學(xué)海導(dǎo)航地圖標注 浙江高速公路地圖標注 西部云谷一期地圖標注

前言

前期誤操作,導(dǎo)致數(shù)據(jù)庫表刪除,雖然數(shù)據(jù)量不多,但是通過binlog恢復(fù)比較麻煩,通過備份文件來恢復(fù),備份文件達36個G打開都是問題;

使用備份文件恢復(fù)

大文件編輯器,glogg-latest-x86_64-setup通過該文件打開備份文件,雖然過程稍慢,但是能夠打開,且正常讀取編輯信息,要恢復(fù)的數(shù)據(jù)量不大時采取是沒問題的,但是如果表幾十萬行,操作起來就比較麻煩了;

Golang讀取備份文件

采用Golang讀取,借助編程語言的優(yōu)勢來讀取備份,經(jīng)過測試讀取指定備份文件(約36GB)表,大約需要12min,其實主要就是讀取遍歷備份文件的過程;

**
* @Author: ws
* @File: main
* @Date: 2019/11/16 0016 14:35
* @Remark: 
*/
var(
 _INSERT_INTO="INSERTINTO${table}VALUES"
 _Dir="temp"
)
var TABLE_CAR="T_SCM_CAR"

func ReadSqlFile(){
 t1 := time.Now() // get current time
 f, err := os.Open("E:\\update\\crm_20191112_210001.sql\\crm_20191112_210001.sql")
 defer f.Close()
 if err != nil {
 }
 buf := bufio.NewReader(f)
 nfs:=getTxtFile(TABLE_CAR)
 for {
  s, err := buf.ReadString('\n')
  if(err!=nil){
   logger.ERROR(err.Error())
   break
  }
  if err == nil {
   if s==""{
    continue
   }
   sqlstr:=getSqlStr(s,TABLE_CAR)
   if(sqlstr!=""){
    nfs.Write([]byte(sqlstr))
   }
  }
 }
 elapsed := time.Since(t1)
 fmt.Println("App elapsed: ", elapsed)
}
/**
調(diào)整驗證每一行數(shù)據(jù)的格式化,并與預(yù)設(shè)是否一致,如果一致則讀取加載到
 */
func getSqlStr(sqlstr,tableName string)string{
 var realTableName=strings.Replace(_INSERT_INTO,"${table}",tableName,-1)
 replaceEmptyStr:=strings.Replace(sqlstr," ","",-1)
 tempS:=strings.ToUpper(strings.Replace(replaceEmptyStr,"`","",-1))
 if(len(tempS)>=len(realTableName)) {
  tabName := tempS[0:len(realTableName)]
  if (tabName ==realTableName) {
   return sqlstr
  }
 }
 return ""
}

/**
打開txt文件
 */
func getTxtFile(fileName string)os.File{
 txtFile:=createToFile(fmt.Sprintf("%v/%v.txt",_Dir,fileName))
 nfs, err := os.OpenFile(txtFile.Name(), os.O_APPEND |os.O_RDWR|os.O_CREATE, 0644)
 if err != nil {
  logger.ERROR(fmt.Sprintf("打開文件失敗:%v",err.Error()))
 }
 defer nfs.Close()
 nfs.Seek(0, io.SeekEnd)
 return *nfs
}


func readLine(r *bufio.Reader) (string, error) {
 line, isprefix, err := r.ReadLine()
 for isprefix  err == nil {
  var bs []byte
  bs, isprefix, err = r.ReadLine()
  line = append(line, bs...)
 }
 return string(line), err
}

func createToFile(fileName string)os.File{
 _, err := os.Stat(_Dir)
 if err == nil {
 }
 if os.IsNotExist(err) {
  os.MkdirAll(_Dir, os.ModePerm)
 }
 newFile, err := os.Create(fileName)
 if err != nil {
  logger.ERROR(fmt.Sprintf("文件創(chuàng)建失敗:%v",err.Error()))
 }
 defer func() {
  newFile.Close()
 }()
 newFile.WriteString("\xEF\xBB\xBF") // 寫入UTF-8 BOM,防止中文亂碼
 return *newFile
}

func main() {
 ReadSqlFile()
}

總結(jié)

以上就是這篇文章的全部內(nèi)容了,希望本文的內(nèi)容對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,謝謝大家對腳本之家的支持。

您可能感興趣的文章:
  • golang文件讀取-按指定BUFF大小讀取方式
  • golang逐行讀取文件的操作
  • Golang 實現(xiàn)分片讀取http超大文件流和并發(fā)控制
  • 淺談Golang是如何讀取文件內(nèi)容的(7種)
  • golang 使用 viper 讀取自定義配置文件
  • golang讀取文件的常用方法總結(jié)
  • Golang 實現(xiàn)超大文件讀取的兩種方法

標簽:許昌 東營 貴州 吐魯番 曲靖 常州 保定 德宏

巨人網(wǎng)絡(luò)通訊聲明:本文標題《如何利用Golang解析讀取Mysql備份文件》,本文關(guān)鍵詞  如何,利用,Golang,解析,讀取,;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問題,煩請?zhí)峁┫嚓P(guān)信息告之我們,我們將及時溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無關(guān)。
  • 相關(guān)文章
  • 下面列出與本文章《如何利用Golang解析讀取Mysql備份文件》相關(guān)的同類信息!
  • 本頁收集關(guān)于如何利用Golang解析讀取Mysql備份文件的相關(guān)信息資訊供網(wǎng)民參考!
  • 推薦文章