Mysql用服务器用mysql命令指定格式导出数据

最新推荐文章于 2021-02-04 01:57:47 发布
最新推荐文章于 2021-02-04 01:57:47 发布
阅读量423 收藏
点赞数
分类专栏： Mysql数据库相关
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/SimpleSimpleSimples/article/details/82292138
版权

1.mysql服务器连接本地数据库报错

[bdp@host7 smart-test]$ mysql -uroot -p
Enter password: 
ERROR 2002 (HY000): Can't connect to local MySQL server through socket '/tmp/mysql.sock' (2)

添加mysql.sock文件路径连接

[bdp@host7 smart-test]$ mysql -uroot -proot -S/mysql/mysql5.6/data/mysql.sock
Warning: Using a password on the command line interface can be insecure.
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 2411652
Server version: 5.6.13-enterprise-commercial-advanced MySQL Enterprise Server - Advanced Edition (Commercial)

Copyright (c) 2000, 2013, Oracle and/or its affiliates. All rights reserved.

Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

mysql> show databases;

比较完整的命令：

mysql -h10.45.47.7 -Dsmart_prod -uroot -proot -P3306 -S/mysql/mysql5.6/data/mysql.sock

2.查看mysql --help命令，常用参数命令

3.以指定字符串竖线分割导出txt文本 

      用的是select  into outfile的方法

#!/bin/bash
#服务器域名
hostname="10.45.47.18"; 
#数据库名
dbname="smart";
#用户名
user="root";
#密码
password="root";
#端口号
prot="3306";
#scok文件所在路径,可以在安装目录的 /mysql/mysql5.6/my.cnf 查看
mysqlSock="/mysql/mysql5.6/data/mysql.sock";
#生成文件所在目录
fileDir="/home/weblogic/smart/testMysqlExport/";
#导出标签生成文件名，注意date后面空格不省略
fileName="injection_label_`date +%Y%m%d%H%M`.txt";
labelValueFileName="injection_label_value_`date +%Y%m%d%H%M`.txt";
#标签全路径=生成文件所在目录+文件名
fullPathFileName="${fileDir}${fileName}";
#标签值全路径=生成文件所在目录+文件名
labelValueFullPathFileName="${fileDir}${labelValueFileName}";
#表名
tableName="injection_label";

#目标主机信息
ftpIp="10.45.47.66";
ftpUser="bdp";
ftpPassword="bdp123";
ftpDir="/home/bdp/smarttest/injectionLabel/";

#若文件存在，则删除文件
if [ -f ${fullPathFileName} ]; then
    rm ${fullPathFileName}
fi
 
#创建文件
TIME1=$(date "+%Y-%m-%d %H:%M:%S") 
echo -e "\n\n========================"${TIME1}" start handle!\n"
echo -e '-h'${hostname} '-P'${prot} '-u'${user} '-p'${password} '-D'${dbname} '-e"'${sqlstr}'"', 
#从数据库promotion中读取cateWhiteList表信息--skip-column-names:去掉表头信息
#mysql -h${hostname} -P${prot} -u${user} -p${password} -S /mysql/mysql5.6/data/mysql.sock << EOF
mysql -h${hostname} -D${dbname} -u${user} -p${password} -P${prot} -S${mysqlSock} << EOF
    use ${dbname}; 
SELECT
    'injectionLabelId',
    'injectionLabelCode',
    'injectionLabelName',
    'injectionLabelDesc',
    'labelManageType',
    'labelType',
    'labelValueType',
    'labelDataType',
    'relevantFlag',
    'statusCd',
    'createStaff',
    'updateStaff',
    'createDate',
    'statusDate',
    'updateDate',
    'remark',
	'actionType',
	"tableCode",
	"orderId"
	
UNION
SELECT
    a.INJECTION_LABEL_ID,
    a.INJECTION_LABEL_CODE,
    a.INJECTION_LABEL_NAME,
    a.INJECTION_LABEL_DESC,
    NULL,
    a.LABEL_TYPE,
    a.LABEL_VALUE_TYPE,
    a. LABEL_DATA_TYPE,
    NULL,
    a.STATUS_CD,
    a.CREATE_STAFF,
    a.UPDATE_STAFF,
    a.CREATE_DATE,
    a.STATUS_DATE,
    a.UPDATE_DATE,
    a.REMARK,
	b.CHANGE_TYPE,
	b.table_code,
	null
FROM
    injection_label a
	join data_change_log b on a.INJECTION_LABEL_ID = b.DATA_ID
	where b.is_syn_bss =0
	and b.table_code='INJECTION_LABEL'
into outfile "${fullPathFileName}" fields terminated by '|' lines terminated by '\\n';
SELECT
    "labelValueId",
    "injectionLabelId",
    "labelValue",
    "valueName",
    "valueDesc",
    "statusCd",
    "createStaff",
    "updateStaff",
    "createDate",
    "statusDate",
    "updateDate",
    "remark",
    "actionType"
	
UNION
SELECT
    a.LABEL_VALUE_ID,
    a.INJECTION_LABEL_ID,
    a.LABEL_VALUE,
    a.VALUE_NAME,
    a.VALUE_DESC,
    a.STATUS_CD,
    a.CREATE_STAFF,
    a.UPDATE_STAFF,
    a.CREATE_DATE,
    a.STATUS_DATE,
    a.UPDATE_DATE,
    a.REMARK,
	c.CHANGE_TYPE
FROM
    injection_label_value a
	join injection_label b  on a.INJECTION_LABEL_ID = b.INJECTION_LABEL_ID
    join data_change_log c on b.INJECTION_LABEL_ID=c.DATA_ID
	where c.is_syn_bss =0
into outfile "${labelValueFullPathFileName}" fields terminated by '|' lines terminated by '\\n';

UPDATE data_change_log 
	set is_syn_bss=1
	where is_syn_bss=0 and TABLE_CODE='INJECTION_LABEL';
EOF
if [ $? -ne 0 ]; then
    echo "读取表失败"
    exit 1
fi
 
#推送文件
ftp -v -n<<!
open $ftpIp
user $ftpUser $ftpPassword
binary
cd $ftpDir
lcd ${fileDir}
prompt
mput ${fileName} ${labelValueFileName}
bye
!

echo "推送标签增量文件成功"
rm  ${fullPathFileName}  ${labelValueFullPathFileName}
##echo "清空本地文件成功"

3.远程主机导出数据并入库

     注意：乱码设置，还有如果是查询导出默认行数为1000，可以通过select_limit设置行数据，default-character-set设置编码。

#!/bin/bash
#引入服务器编码为utf-8
#export NLS_LANG="AMERICAN_AMERICA.UTF8"
#服务器域名
hostname="10.45.47.7"; 
#数据库名
dbname="smart_prod"; 
#用户名
user="root";
#密码
password="root";
#端口号
prot="3306";
#scok文件所在路径
mysqlSock="/mysql/mysql5.6/data/mysql.sock";
#生成文件所在目录
fileDir="/home/weblogic/smart/testMysqlExport/";

#服务器域名
bssHostname="10.45.46.20"; 
#数据库名
bssDbname="marking"; 
#用户名
bssUser="bss30";
#密码
bssPassword="1qaz@wsX ";
#端口号
bssProt="8890";


#创建文件
TIME1=$(date "+%Y-%m-%d %H:%M:%S") 
echo -e "\n\n========================"${TIME1}" 开始导出数据!\n"

mysql -h${bssHostname} -P${bssProt} -u${bssUser} -p${bssPassword} -D${bssDbname} --default-character-set=utf8 --select_limit=99999 -N -e"SELECT MKT_CAMPAIGN_ID,TIGGER_TYPE,MKT_CAMPAIGN_NAME,PLAN_BEGIN_TIME,PLAN_END_TIME,BEGIN_TIME,END_TIME,MKT_CAMPAIGN_TYPE,MKT_ACTIVITY_NBR,MKT_ACTIVITY_TARGET,MKT_CAMPAIGN_DESC,STATUS_CD,STATUS_DATE,CREATE_STAFF,CREATE_DATE,UPDATE_STAFF,UPDATE_DATE,REMARK,LAN_ID,MKT_CAM_CATE_ID,MKT_CAM_LEVEL,IS_PARENT_CAM,MANAGE_TYPE,EXEC_TYPE,EXEC_INVL,EXEC_NUM,MKT_CAM_EXEC_LEVEL,SERVICE_TYPE,EXT_MKT_CAMPAIGN_ID,REGION_ID FROM mkt_campaign" > ${fileDir}mkt_campaign.txt;
mysql -h${bssHostname} -P${bssProt} -u${bssUser} -p${bssPassword} -D${bssDbname} --default-character-set=utf8 --select_limit=99999 -N -e"SELECT EVT_RECOM_CALC_REL_ID,MKT_CAMPAIGN_ID,ALGO_ID,ALGORITHMS_RUL_ID,PRIORITY,STATUS_CD,CREATE_STAFF,UPDATE_STAFF,CREATE_DATE,UPDATE_DATE,STATUS_DATE,REMARK,STRATEGY_ID FROM mkt_cam_recom_calc_rel" > ${fileDir}mkt_cam_recom_calc_rel.txt;
mysql -h${bssHostname} -P${bssProt} -u${bssUser} -p${bssPassword} -D${bssDbname} --default-character-set=utf8 --select_limit=99999 -N -e"SELECT ALGO_ID,ALGO_CODE,ALGO_NAME,HANDLE_CLASS,ALGO_DESC,STATUS_CD,STATUS_DATE,CREATE_STAFF,CREATE_DATE,UPDATE_STAFF,UPDATE_DATE,REMARK,EXT_ALGO_ID FROM mkt_algorithms limit 999999" > /home/weblogic/smart/testMysqlExport/mkt_algorithms.txt;
mysql -h${bssHostname} -P${bssProt} -u${bssUser} -p${bssPassword} -D${bssDbname} --default-character-set=utf8 --select_limit=99999 -N -e"SELECT ALG_RUL_RELA_ID,MKT_CAMPAIGN_ID,ALGORITHMS_RUL_ID,STATUS_CD,CREATE_STAFF,UPDATE_STAFF,CREATE_DATE,STATUS_DATE,UPDATE_DATE,REMARK FROM cpc_alg_rul_detail_rela" > ${fileDir}cpc_alg_rul_detail_rela.txt;
mysql -h${bssHostname} -P${bssProt} -u${bssUser} -p${bssPassword} -D${bssDbname} --default-character-set=utf8 --select_limit=99999 -N -e"SELECT ALGORITHMS_RUL_ID,TAR_GRP_ID,ITEM_ID,CONTACT_CHL_ID,PRIORITY,STATUS_CD,CREATE_STAFF,UPDATE_STAFF,CREATE_DATE,STATUS_DATE,UPDATE_DATE,REMARK,STRATEGY_ID FROM cpc_alg_rul_detail" > ${fileDir}cpc_alg_rul_detail.txt;
mysql -h${bssHostname} -P${bssProt} -u${bssUser} -p${bssPassword} -D${bssDbname} --default-character-set=utf8 --select_limit=99999 -N -e"SELECT EVENT_ID,INTERFACE_CFG_ID,EVENT_NBR,EVENT_NAME,EVT_MAPPED_ADDR,EVT_MAPPED_IP,EVT_PROCOTOL_TYPE,EVT_MAPPED_FUN_NAME,EVENT_DESC,EVT_TYPE_ID,EVENT_TRIG_TYPE,STATUS_CD,CREATE_STAFF,UPDATE_STAFF,CREATE_DATE,STATUS_DATE,UPDATE_DATE,REMARK,CONTACT_EVT_TYPE,IS_ORIG_EVENT,LOGO_URL,EXT_EVENT_ID,TRIG_RUN_PERIOD,TRIG_CYCLE_VALUE,TRIG_RUN_TIME,NEXT_RUN_TIME FROM event" > ${fileDir}event.txt;
mysql -h${bssHostname} -P${bssProt} -u${bssUser} -p${bssPassword} -D${bssDbname} --default-character-set=utf8 --select_limit=99999 -N -e"SELECT MKT_CAMP_EVT_REL_ID,MKT_CAMPAIGN_ID,EVENT_ID,STATUS_CD,STATUS_DATE,CREATE_STAFF,CREATE_DATE,UPDATE_STAFF,UPDATE_DATE,REMARK,LAN_ID,EXT_MKT_CAMP_EVT_REL_ID FROM mkt_cam_evt_rel" > ${fileDir}mkt_cam_evt_rel.txt;

#把数据导入到本地
mysql -h${hostname} -D${dbname} -u${user} -p${password} -P${prot} -S${mysqlSock} << EOF
use ${dbname}; 
truncate table mkt_campaign;
truncate table mkt_cam_recom_calc_rel;
truncate table mkt_algorithms;
truncate table cpc_alg_rul_detail_rela;
truncate table cpc_alg_rul_detail;
truncate table event;
truncate table mkt_cam_evt_rel;
load data infile '${fileDir}mkt_campaign.txt' into table mkt_campaign(MKT_CAMPAIGN_ID,TIGGER_TYPE,MKT_CAMPAIGN_NAME,PLAN_BEGIN_TIME,PLAN_END_TIME,BEGIN_TIME,END_TIME,MKT_CAMPAIGN_TYPE,MKT_ACTIVITY_NBR,MKT_ACTIVITY_TARGET,MKT_CAMPAIGN_DESC,STATUS_CD,STATUS_DATE,CREATE_STAFF,CREATE_DATE,UPDATE_STAFF,UPDATE_DATE,REMARK,LAN_ID,MKT_CAM_CATE_ID,MKT_CAM_LEVEL,IS_PARENT_CAM,MANAGE_TYPE,EXEC_TYPE,EXEC_INVL,EXEC_NUM,MKT_CAM_EXEC_LEVEL,SERVICE_TYPE,EXT_MKT_CAMPAIGN_ID,REGION_ID);
load data infile '${fileDir}mkt_cam_recom_calc_rel.txt' into table mkt_cam_recom_calc_rel(EVT_RECOM_CALC_REL_ID,MKT_CAMPAIGN_ID,ALGO_ID,ALGORITHMS_RUL_ID,PRIORITY,STATUS_CD,CREATE_STAFF,UPDATE_STAFF,CREATE_DATE,UPDATE_DATE,STATUS_DATE,REMARK,STRATEGY_ID);
load data infile '${fileDir}mkt_algorithms.txt' into table mkt_algorithms(ALGO_ID,ALGO_CODE,ALGO_NAME,HANDLE_CLASS,ALGO_DESC,STATUS_CD,STATUS_DATE,CREATE_STAFF,CREATE_DATE,UPDATE_STAFF,UPDATE_DATE,REMARK,EXT_ALGO_ID);
load data infile '${fileDir}cpc_alg_rul_detail_rela.txt' into table cpc_alg_rul_detail_rela(ALG_RUL_RELA_ID,MKT_CAMPAIGN_ID,ALGORITHMS_RUL_ID,STATUS_CD,CREATE_STAFF,UPDATE_STAFF,CREATE_DATE,STATUS_DATE,UPDATE_DATE,REMARK);
load data infile '${fileDir}cpc_alg_rul_detail.txt' into table cpc_alg_rul_detail(ALGORITHMS_RUL_ID,TAR_GRP_ID,ITEM_ID,CONTACT_CHL_ID,PRIORITY,STATUS_CD,CREATE_STAFF,UPDATE_STAFF,CREATE_DATE,STATUS_DATE,UPDATE_DATE,REMARK,STRATEGY_ID);
load data infile '${fileDir}event.txt' into table event(EVENT_ID,INTERFACE_CFG_ID,EVENT_NBR,EVENT_NAME,EVT_MAPPED_ADDR,EVT_MAPPED_IP,EVT_PROCOTOL_TYPE,EVT_MAPPED_FUN_NAME,EVENT_DESC,EVT_TYPE_ID,EVENT_TRIG_TYPE,STATUS_CD,CREATE_STAFF,UPDATE_STAFF,CREATE_DATE,STATUS_DATE,UPDATE_DATE,REMARK,CONTACT_EVT_TYPE,IS_ORIG_EVENT,LOGO_URL,EXT_EVENT_ID,TRIG_RUN_PERIOD,TRIG_CYCLE_VALUE,TRIG_RUN_TIME,NEXT_RUN_TIME);
load data infile '${fileDir}mkt_cam_evt_rel.txt' into table mkt_cam_evt_rel(MKT_CAMP_EVT_REL_ID,MKT_CAMPAIGN_ID,EVENT_ID,STATUS_CD,STATUS_DATE,CREATE_STAFF,CREATE_DATE,UPDATE_STAFF,UPDATE_DATE,REMARK,LAN_ID,EXT_MKT_CAMP_EVT_REL_ID);
EOF

#占位查询
#mysql -h${hostname} -P${prot} -u${user} -p${password} -D${dbname} -e"${sqlstr}"
if [ $? -ne 0 ]; then
    echo "数据导入失败"
    exit 1
fi

echo "导入cpc数据成功";
#rm  ${fullPathFileName}  ${labelValueFullPathFileName}
##echo "清空本地文件成功"

 

mysql jdbcurl配置_jdbc的URL配置
weixin_34891129的博客
01-26 1661
Microsoft SQL ServerMicrosoft SQL Server JDBC Driver (一般用来连接 SQLServer 2000)驱动程序包名：msbase.jar mssqlserver.jar msutil.jar驱动程序类名: com.microsoft.jdbc.sqlserver.SQLServerDriverJDBC URL: jdbc:microsoft:sql...
mysql 导出 -e_mysql导出数据库几种方法
weixin_39534149的博客
01-27 695
mysql教程导出数据库教程几种方法方法一cmd 到mysql bin目录下用 如下命令 mysqldump --opt -h192.168.0.156 -uusername -ppassword --skip-lock-tables databasename>database.sql把ip改成localhost就可以的如果装了navicate那就更简单了 先连接上数据库，选中数据库 再选择...
mysql+特殊字符+输出_Mysql 特殊字符处理
weixin_39530833的博客
02-02 233
import java.util.HashMap;import java.util.Map;/*** User: pdc738 Date: 06.22, 2010 Time: 3:36:20 PM* To Encoder special character.* If you want to insert binary data into a string column (such as a BLO...
mysql特定格式导出数据_MySQL 将表数据以特定格式的文本导出与导入
weixin_42517854的博客
02-04 537
SELECT ... INTO OUTFILE ...使用该语句将数据表的数据以特定格式导出到本机。该方式需要登录 mysql 客户端才可以执行。注意：1. 这种方式只能将表的记录导出到服务器所在机器，不能在远程连接的情况下导出到本地！！！也就是说，下面的 filepath 应该是 MySQL 所在的机器的路径。2. 该导出受制于 --secure-file-priv 选项语法格式：SELECT ...
mysql_select按照指定的格式输出到文件
weixin_33857679的博客
03-19 619
2019独角兽企业重金招聘Python工程师标准>>> ...
MySQL表数据导出为特定格式文件
qq_42547338的博客
07-11 1762
在平时的业务中，我们有时。需要导出数据库中的数据以及将数据插入到数据库中，如果是使用代码开发，那过程是比较复杂的。 比如：我们要将某个.csv文件数据最终入库，那就要经过解析文件读取行来插入数据库中，相同的，要将数据库中的数据最终写入到.csv文件中，我们要先查询然后再行写入到对应的文件中，这样的过程在使用mysql数据时可以很容易的搞定，因为mysql的语法本身就支持将表数据导出到一定格式的文件以及将文件直接写入表，而且对于百万级的大数据也是速度相当快的 一、表数据导出 导出文件格式支持 基本语
使用MySQL MySqldump命令导出数据时的注意事项
12-15
当`mysqldump`命令导出数据时，默认会使用`extended-insert`语法，即多行插入，这可以优化插入性能。然而，如果在导入时遇到重复键错误，多行插入会停止，导致后续的正确数据无法插入。为了解决这个问题，可以在...
docker 使用mysqldump命令备份导出项目中的mysql数据
01-09
mysqldump命令 介绍：一个数据库备份程序 格式：mysqldump [options] [db...下图为镜像重命名后的镜像名为uoj，现在要把这个镜像中的mysql导出 运行如下命令： docker exec -it uoj mysqldump -uroot -proot app_uoj2
mysql数据字典导出工具.zip
06-08
在使用这类工具时，用户需要注意确保正确配置MySQL服务器的连接参数，如主机名、端口、用户名和密码，以成功连接并导出数据字典。 总之，"mysql数据字典导出工具.zip"是MySQL数据库管理员和开发者的实用资源，它...
导出mysql某个表数据_mysql数据库导出指定表数据的方法
weixin_35120608的博客
01-19 2807
linux下导出mysql中指定表数据 ：复制代码 代码示例:MYSQLdump -uroot -p databaseName talbeName.....tableName > xxx.sql这样就可以导出表的数据了。导出数据库的命令：复制代码 代码示例:mysql -uroot -p -f database_name如何导出数据库表的数据？(不同于备份哦)复制代码 代码示例:#mysq...
linux下导入、导出mysql数据库命令
weixin_30299539的博客
04-20 1165
一、导出数据库用mysqldump命令（注意mysql的安装路径，即此命令的路径）： 1、导出数据和表结构： mysqldump -u用户名 -p密码 数据库名 > 数据库名.sql #/usr/local/mysql/bin/ mysqldump -uroot -p abc > abc.sql 敲回车后会提示输入密码 2、只导出表结构 mysqldump -u用户名 ...
mysql select 导出数据 加分隔符
weixin_33878457的博客
07-28 2176
mysql select 导出数据 加分隔符，方便生成Excel和利用python进行数据处理。mysql>selectID,VERSION,HEADLINEfromnewslimit10INTOOUTFILE"/tmp/1.txt"fieldsterminatedby'|';导入数据loaddatalocalinfile'test....
mysql从服务器导出\导入数据
二进制杯莫停的博客
09-23 1144
导出数据 导出表作为原始数据 mysqldump是MySQL用于转存储数据库的实用程序。它主要产生一个SQL脚本，其中包含从头重新创建数据库所必需的命令CREATE TABLE INSERT等。 使用mysqldump导出数据需要使用 --tab 选项来指定导出文件指定的目录，该目标必须是可写的。 以下实例将数据表 tutorials_tbl 导出到 /tmp 目录中： $ mysqldump ...
MySQL命令行格式化输出
yangjianli868的专栏
10-15 1857
来自http://www.codesky.net/article/200907/168892.htmlMySQL的客户端命令行工具，有很多方便使用者的特性，某些方面甚至可以说比Oracle的sqlplus更加人性化。当然从整体来说，还是sqlplus更加方便些，这么说或许是我对sqlplus更加熟悉吧。这里记录下MySQL命令行几个比较常用的特性。1.使用G按行垂直显示结果如果一行很长，需要这行显...
MySQL mysqldump数据导出详解 --dump-slave 注意事项
weixin_34381666的博客
07-21 1883
http://www.cnblogs.com/chenmh/p/5300370.html 介绍  在日常维护工作当中经常会需要对数据进行导出操作，而mysqldump是导出数据过程中使用非常频繁的一个工具；它自带的功能参数非常多，文章中会列举出一些常用的操作，在文章末尾会将所有的参数详细说明列出来。   语法： 默认不带参数的导出，导出文本内容大概如下：创建数据库判断语句-删...
mysql设置导出字符集编码格式_MYSQL 编码格式的设置
weixin_32494473的博客
01-19 845
修改my.ini文件加上default-character-set=gb2312设定数据库字符集alter database da_name default character set 'charset'1)设置数据库编码 /etc/my.cnf[mysqld]default-character-set=gbk...[client]default-character-set=gbk－－－－－－－－...
mysql导入竖杠分割的数据_读入文件数据，根据竖线分割，并存入对象。
weixin_31140959的博客
01-27 905
1，架包 要用到的包import java.io.BufferedReader;import java.io.FileInputStream;import java.io.InputStreamReader;2.放上代码public static void main(String[] args) throws Exception {// 开一个io流 把文件读入，读取文件的路径与文件名，设置字符...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值