前言
前期误操作,导致数据库表删除,虽然数据量不多,但是通过binlog恢复比较麻烦,通过备份文件来恢复,备份文件达36个G打开都是问题;
使用备份文件恢复
大文件编辑器,glogg-latest-x86_64-setup通过该文件打开备份文件,虽然过程稍慢,但是能够打开,且正常读取编辑信息,要恢复的数据量不大时采取是没问题的,但是如果表几十万行,操作起来就比较麻烦了;
Golang读取备份文件
采用Golang读取,借助编程语言的优势来读取备份,经过测试读取指定备份文件(约36GB)表,大约需要12min,其实主要就是读取遍历备份文件的过程;
** * @Author: ws * @File: main * @Date: 2019/11/16 0016 14:35 * @Remark: */ var( _INSERT_INTO="INSERTINTO${table}VALUES" _Dir="temp" ) var TABLE_CAR="T_SCM_CAR" func ReadSqlFile(){ t1 := time.Now() // get current time f, err := os.Open("E:\\update\\crm_20191112_210001.sql\\crm_20191112_210001.sql") defer f.Close() if err != nil { } buf := bufio.NewReader(f) nfs:=getTxtFile(TABLE_CAR) for { s, err := buf.ReadString('\n') if(err!=nil){ logger.ERROR(err.Error()) break } if err == nil { if s==""{ continue } sqlstr:=getSqlStr(s,TABLE_CAR) if(sqlstr!=""){ nfs.Write([]byte(sqlstr)) } } } elapsed := time.Since(t1) fmt.Println("App elapsed: ", elapsed) } /** 调整验证每一行数据的格式化,并与预设是否一致,如果一致则读取加载到 */ func getSqlStr(sqlstr,tableName string)string{ var realTableName=strings.Replace(_INSERT_INTO,"${table}",tableName,-1) replaceEmptyStr:=strings.Replace(sqlstr," ","",-1) tempS:=strings.ToUpper(strings.Replace(replaceEmptyStr,"`","",-1)) if(len(tempS)>=len(realTableName)) { tabName := tempS[0:len(realTableName)] if (tabName ==realTableName) { return sqlstr } } return "" } /** 打开txt文件 */ func getTxtFile(fileName string)os.File{ txtFile:=createToFile(fmt.Sprintf("%v/%v.txt",_Dir,fileName)) nfs, err := os.OpenFile(txtFile.Name(), os.O_APPEND |os.O_RDWR|os.O_CREATE, 0644) if err != nil { logger.ERROR(fmt.Sprintf("打开文件失败:%v",err.Error())) } defer nfs.Close() nfs.Seek(0, io.SeekEnd) return *nfs } func readLine(r *bufio.Reader) (string, error) { line, isprefix, err := r.ReadLine() for isprefix && err == nil { var bs []byte bs, isprefix, err = r.ReadLine() line = append(line, bs...) } return string(line), err } func createToFile(fileName string)os.File{ _, err := os.Stat(_Dir) if err == nil { } if os.IsNotExist(err) { os.MkdirAll(_Dir, os.ModePerm) } newFile, err := os.Create(fileName) if err != nil { logger.ERROR(fmt.Sprintf("文件创建失败:%v",err.Error())) } defer func() { newFile.Close() }() newFile.WriteString("\xEF\xBB\xBF") // 写入UTF-8 BOM,防止中文乱码 return *newFile } func main() { ReadSqlFile() }
总结
以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,谢谢大家对的支持。
免责声明:本站文章均来自网站采集或用户投稿,网站不提供任何软件下载或自行开发的软件!
如有用户或公司发现本站内容信息存在侵权行为,请邮件告知! 858582#qq.com
暂无“如何利用Golang解析读取Mysql备份文件”评论...
RTX 5090要首发 性能要翻倍!三星展示GDDR7显存
三星在GTC上展示了专为下一代游戏GPU设计的GDDR7内存。
首次推出的GDDR7内存模块密度为16GB,每个模块容量为2GB。其速度预设为32 Gbps(PAM3),但也可以降至28 Gbps,以提高产量和初始阶段的整体性能和成本效益。
据三星表示,GDDR7内存的能效将提高20%,同时工作电压仅为1.1V,低于标准的1.2V。通过采用更新的封装材料和优化的电路设计,使得在高速运行时的发热量降低,GDDR7的热阻比GDDR6降低了70%。
更新动态
2024年11月23日
2024年11月23日
- 凤飞飞《我们的主题曲》飞跃制作[正版原抓WAV+CUE]
- 刘嘉亮《亮情歌2》[WAV+CUE][1G]
- 红馆40·谭咏麟《歌者恋歌浓情30年演唱会》3CD[低速原抓WAV+CUE][1.8G]
- 刘纬武《睡眠宝宝竖琴童谣 吉卜力工作室 白噪音安抚》[320K/MP3][193.25MB]
- 【轻音乐】曼托凡尼乐团《精选辑》2CD.1998[FLAC+CUE整轨]
- 邝美云《心中有爱》1989年香港DMIJP版1MTO东芝首版[WAV+CUE]
- 群星《情叹-发烧女声DSD》天籁女声发烧碟[WAV+CUE]
- 刘纬武《睡眠宝宝竖琴童谣 吉卜力工作室 白噪音安抚》[FLAC/分轨][748.03MB]
- 理想混蛋《Origin Sessions》[320K/MP3][37.47MB]
- 公馆青少年《我其实一点都不酷》[320K/MP3][78.78MB]
- 群星《情叹-发烧男声DSD》最值得珍藏的完美男声[WAV+CUE]
- 群星《国韵飘香·贵妃醉酒HQCD黑胶王》2CD[WAV]
- 卫兰《DAUGHTER》【低速原抓WAV+CUE】
- 公馆青少年《我其实一点都不酷》[FLAC/分轨][398.22MB]
- ZWEI《迟暮的花 (Explicit)》[320K/MP3][57.16MB]