MySQL数据导出导入任务脚本
#!/usr/bin/env python
#-*- encoding: utf8 -*-
import time
import os
import mysql.connector
#定义一些全局变量
work_dir="/data1/dbacrontab/tmptranfiles/"
mysqldump_data_list=[]
mysqldump_struc_list=[]
mysqldump_datastruc_list=[]
mysqldump_config_list=[]
# 此函数用来打印输出日志
def print_log(mylogprint):
my_log_day = time.strftime("%Y-%m-%d")
my_log_time = time.strftime("%Y-%m-%d %H:%M:%S")
my_log_file = work_dir+'log_'+my_log_day+'.log'
with open(my_log_file,"aw") as f:
f.write(my_log_time+' '+mylogprint)
# 此函数用来导出数据
def export_mysqldump(getdbconfig,exportdbconfig):
# status='1'表示此表需要导出,status='0'表示此表不需要导出。
# export_data='1'表示导出数据和结构,export_data='0'表示不导出数据,只导出结构。
sql_export_data = "select distinct ALIAS,SCHEMA_NAME,TABLE_NAME,export_data,status,1_133_status as status_1_133 from dbaconfig.cf_export_tables "
cnn = mysql.connector.connect(**getdbconfig)
cursor = cnn.cursor()
cursor.execute(sql_export_data)
export_user=exportdbconfig['user']
export_password=exportdbconfig['password']
export_port=exportdbconfig['port']
for (ALIAS,SCHEMA_NAME,TABLE_NAME,export_data,status,status_1_133) in cursor:
mysqldump_name=work_dir+ALIAS+'-'+SCHEMA_NAME+'-'+TABLE_NAME+'.sql'
ifexport_data=str(export_data)
ifstatus=str(status)
ifstatus_1_133=str(status_1_133)
# 导出数据和结构
if ifstatus == '1' and ifexport_data == '1':
mysqldump_nodata= " "
mysqldumcmd="mysqldump -h%s -u%s -p%s -P%s --replace %s --single-transaction --skip-add-locks --complete-insert %s %s > %s " % (ALIAS,export_user,export_password,export_port,mysqldump_nodata,SCHEMA_NAME,TABLE_NAME,mysqldump_name)
os.system(mysqldumcmd)
mysqldump_data_list.append(mysqldump_name)
print_log("export data: from_service=%s, from_database=%s, from_table=%s \n" % (ALIAS,SCHEMA_NAME,TABLE_NAME))
# 不导出数据,只导出结构
if ifstatus == '1' and ifexport_data == '0':
mysqldump_nodata= "-d"
mysqldumcmd="mysqldump -h%s -u%s -p%s -P%s --replace %s --single-transaction --skip-add-locks --complete-insert %s %s > %s " % (ALIAS,export_user,export_password,export_port,mysqldump_nodata,SCHEMA_NAME,TABLE_NAME,mysqldump_name)
os.system(mysqldumcmd)
mysqldump_struc_list.append(mysqldump_name)
print_log("export only structure: from_service=%s, from_database=%s, from_table=%s \n" % (ALIAS,SCHEMA_NAME,TABLE_NAME))
# 导出config_mobp2p数据库数据
if ifstatus_1_133 == '1':
mysqldump_nodata= " "
mysqldumcmd="mysqldump -h%s -u%s -p%s -P%s --replace %s --single-transaction --skip-add-locks --complete-insert %s %s > %s " % (ALIAS,export_user,export_password,export_port,mysqldump_nodata,SCHEMA_NAME,TABLE_NAME,mysqldump_name)
os.system(mysqldumcmd)
mysqldump_config_list.append(mysqldump_name)
print_log("export config_mobp2p data: from_service=%s, from_database=%s, from_table=%s \n" % (ALIAS,SCHEMA_NAME,TABLE_NAME))
# 此函数用来导入数据
def import_from_mysqldump(mysqldump_file,importdbconfig):
import_host=importdbconfig['host']
import_user=importdbconfig['user']
import_password=importdbconfig['password']
import_port=importdbconfig['port']
for dumpsql in mysqldump_file:
print_log("import_data: %s \n" % (dumpsql))
mysqlimport=" mysql -h%s -u%s -p%s -P%s mobp2p < %s " % (import_host,import_user,import_password,import_port,dumpsql)
os.system(mysqlimport)
# 定义合并两个list函数
def merge_list(list_1,list_2,list_all):
for item in list_1:
list_all.append(item)
for item in list_2:
list_all.append(item)
return list_all
# 定义导出列表数据库相关信息,根据dbaconfig.cf_export_tables可判断要导出那些表
getdbconfig_13_105={
'host':'xxxx',
'user':'xxxx',
'password':'xxxx',
'port':'xxxx',
'database':'xxxx'
}
# 定义要导出数据库信息
exportdbconfig_exp={
'user':'xxxx',
'password':'xxxx',
'port':'xxxx',
}
# 定义要导入数据库信息
importdbconfig_13_106={
'host':'xxxx',
'user':'xxxx',
'password':'xxxx',
'port':'xxxx'
}
print_log("==================== 开始导出数据 ====================\n")
export_mysqldump(getdbconfig_13_105,exportdbconfig_exp)
print_log("==================== 数据导出完毕 ====================\n")
# 把 mysqldump_data_list 、 mysqldump_struc_list 两个列表合并成 mysqldump_datastruc_list 一个列表
merge_list(mysqldump_data_list,mysqldump_struc_list,mysqldump_datastruc_list)
# 根据列表 mysqldump_datastruc_list 内容,导入数据到 importdbconfig_13_106
print_log("==================== 开始导入数据到 10.30.13.106 ====================\n")
import_from_mysqldump(mysqldump_datastruc_list,importdbconfig_13_106)
print_log("==================== 导入数据到 10.30.13.106 完毕 ====================\n")
# 根据列表 mysqldump_config_list 内容,导入数据到 importdbconfig_13_106
print_log("==================== 开始导入config_mobp2p数据库数据到 10.30.13.106 ====================\n")
import_from_mysqldump(mysqldump_config_list,importdbconfig_13_106)
print_log("==================== 导入数据到 10.30.13.106 完毕 ====================\n")
MySQL数据导出导入任务脚本的更多相关文章
- MySQL数据导出导入【转】
MySQL基础 关于MySQL数据导出导入的文章,目的有二: 1.备忘 2.供开发人员测试 工具 mysqlmysqldump 应用举例 导出 导出全库备份到本地的目录 mysqldump -u$US ...
- 关于MySQL数据导出导入
工具 mysqlmysqldump 应用举例 导出 导出全库备份到本地的目录 mysqldump -u$USER -p$PASSWD -h127.0.0.1 -P3306 --routines --d ...
- 完美转换MySQL的字符集 Mysql 数据的导入导出,Mysql 4.1导入到4.0
MySQL从4.1版本开始才提出字符集的概念,所以对于MySQL4.0及其以下的版本,他们的字符集都是Latin1的,所以有时候需要对mysql的字符集进行一下转换,MySQL版本的升级.降级,特别是 ...
- 涂抹mysql笔记-数据导出导入
数据导出导入<>利用CSV存储引擎加载数据:CSV存储引擎基于CSV格式文件存储数据,CSV格式是纯文本格式的文件,以逗号分隔取值.CSV引擎表的所有列值不能为空.Excel可以直接打开有 ...
- Oracle如何实现创建数据库、备份数据库及数据导出导入的一条龙操作
Oracle中对数据对象和数据的管理,无疑都是使用PL/SQL Developer来进行管理,该工具也提供给我们很多方便.快捷的操作,使得我们不再为Oracle本身丑陋.难用的UI而抱怨.由于我们一般 ...
- 【原创】SQLServer将数据导出为SQL脚本的方法
最近很多同学问到一个问题,如何将MSSQLServer的数据库以及里面的数据导出为SQL脚本,主要问的是MSSQLServer2000和2005,因为2008的管理器已经有了这个功能,2000和200 ...
- [转]Oracle如何实现创建数据库、备份数据库及数据导出导入的一条龙操作
本文转自:http://www.cnblogs.com/wuhuacong/archive/2012/03/09/2387680.html Oracle中对数据对象和数据的管理,无疑都是使用PL/SQ ...
- 不同版本的SQL Server之间数据导出导入的方法及性能比较
原文:不同版本的SQL Server之间数据导出导入的方法及性能比较 工作中有段时间常常涉及到不同版本的数据库间导出导入数据的问题,索性整理一下,并简单比较下性能,有所遗漏的方法也欢迎讨论.补充. 0 ...
- 在sqlServer中把数据导出为insert脚本
有时候为了把数据导出为insert脚本,不得不用一些小工具,或者通过自己写存储过程来完成这一操作.其实SqlServer本身就有这种功能.以下是详细步骤:
随机推荐
- 关于 js 的框架方向
关于 js 的框架方向 http://www.breck-mckye.com/blog/2014/12/the-state-of-javascript-in-2015/?utm_source=ourj ...
- 【例题 8-15 UVA - 12174】Shuffle
[链接] 我是链接,点我呀:) [题意] 在这里输入题意 [题解] 枚举第一段的范围[0..i] (0<=i<s) 然后看看[i+1..i+s-1],[i+s,i+s+s-1]..这些区间 ...
- JS-网页中分页栏
原理 三部分 我给分页栏分成了3部分 上一页:调用prePage()函数 下一页:调用nextPage()函数 带有数字标识的部,调用skipPage()函数 prePage函数 function p ...
- LeetCode_ZigZag Conversion
一.题目 ZigZag Conversion Total Accepted: 31399 Total Submissions: 140315My Submissions The string &quo ...
- IIS下配置SilverLight
在Windows 2003 IIS 6.0环境下 在Silverlight中需要使用xap.XAML文件类型,如果您想在IIS服务器上使用Silverlight 4.0程序,所以必须在IIS中注册 ...
- BZOJ2565: 最长双回文串(Manacher)
Description 顺序和逆序读起来完全一样的串叫做回文串.比如acbca是回文串,而abc不是(abc的顺序为“abc”,逆序为“cba”,不相同).输入长度为n的串S,求S的最长双回文子串T, ...
- SpringCloud核心教程 | 第一篇: 使用Intellij中的Spring Initializr来快速构建Spring Cloud工程
spring cloud简介 spring cloud 为开发人员提供了快速构建分布式系统的一些工具,包括配置管理.服务发现.断路器.路由.微代理.事件总线.全局锁.决策竞选.分布式会话等等.它运行环 ...
- 【Codeforces Round #453 (Div. 2) B】Coloring a Tree
[链接] 我是链接,点我呀:) [题意] 在这里输入题意 [题解] 从根节点开始. 显然它是什么颜色.就要改成对应的颜色.(如果上面已经有某个点传了值就不用改 然后往下传值. [代码] #includ ...
- wmi 一些配置(参考)
http://www.bubuko.com/infodetail-1937463.html
- iOS界面生命周期过程具体解释
开发过Android的人都知道,每个Android界面就是一个Activity,而每个Activity都会有自己的生命周期, 有一系列方法会控制Activity的生命周期.如:onCreate(),o ...