将MySQL的表数据全量导入clichhouse库中
更新时间：2022年03月21日 11:26:23 作者：运维之美
这篇文章主要介绍了将MySQL的表数据全量导入clichhouse库中，详细介绍全量导出MySQL数据到clickhouse表的相关内容，需要的小伙伴可以参考一下
一、环境
- tidb06 mysql5.7.32
- tidb05 clickhouse20.8.3.18
二、创建测试库表写入测试数据
tidb06库创建复制账户:
GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'click_rep'@'172.16.0.246' identified by 'jwts996';flush privileges; Query OK, 0 rows affected, 1 warning (0.00 sec)
tidb06库创建测试库表test01.tb2并且写入测试数据：
CREATE TABLE `tb2` (
`id` int(8) NOT NULL AUTO_INCREMENT,
`username` varchar(20) COLLATE utf8_unicode_ci NOT NULL,
`password` varchar(20) COLLATE utf8_unicode_ci NOT NULL,
`create_time` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
PRIMARY KEY (`id`) #主键ID
) ENGINE=innodb AUTO_INCREMENT=0 DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
INSERT INTO tb2(username,password,create_time) values('tomcat', 'xiaohuahua',now());
INSERT INTO tb2(username,password,create_time) values('java', 'xiaohuahua',now());
root@tidb06 14:01: [test01]> select * from tb2;
+----+----------+------------+---------------------+
| id | username | password | create_time |
+----+----------+------------+---------------------+
| 1 | tomcat | xiaohuahua | 2021-07-21 14:01:50 |
| 2 | java | xiaohuahua | 2021-07-21 14:01:59 |
+----+----------+------------+---------------------+
2 rows in set (0.00 sec)clickhouse库的建表创建方法:
CREATE TABLE tb2 ENGINE = MergeTree PARTITION BY toYYYYMM(create_time) ORDER BY create_time AS SELECT * FROM mysql('172.16.0.247:3306', 'test01', 'tb2', 'click_rep', 'jwts996');提示:clichhouse表中要求必须至少包含一个时间字段
tidb05 :) CREATE TABLE tb2 ENGINE = MergeTree PARTITION BY toYYYYMM(create_time) ORDER BY create_time AS SELECT * FROM mysql('172.16.0.247:3306', 'test01', 'tb2', 'click_rep', 'jwts996');
CREATE TABLE tb2
ENGINE = MergeTree
PARTITION BY toYYYYMM(create_time)
ORDER BY create_time AS
SELECT *
FROM mysql('172.16.0.247:3306', 'test01', 'tb2', 'click_rep', 'jwts996')
Ok.
0 rows in set. Elapsed: 0.014 sec.
tidb05 :) select * from tb2;
SELECT *
FROM tb2
┌─id─┬─username─┬─password───┬─────────create_time─┐
│ 1 │ tomcat │ xiaohuahua │ 2021-07-21 14:01:50 │
│ 2 │ java │ xiaohuahua │ 2021-07-21 14:01:59 │
└────┴──────────┴────────────┴─────────────────────┘
2 rows in set. Elapsed: 0.002 sec.
到此这篇关于将MySQL的表数据全量导入clichhouse库中的文章就介绍到这了,更多相关MySQL表数据导入clichhouse库中内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！
相关文章
在本篇文章里小编给大家整理的是关于重置mysql的root密码最简单的方法，需要的朋友们参考下。2020-03-03
随着网站数据量与访问量的增加，MySQL 查询速度慢与性能差的问题就日渐明显，这里为大家分享一下解决方法,需要的朋友可以参考下2019-09-09
mysql特殊语法insert into .. on duplicate key update ..使用方
在我们的日常开发中经常会遇到过这样的情景,查看某条记录是否存在,不存在的话创建一条新记录,存在的话更新某些字段,下面这篇文章主要给大家介绍了关于mysql特殊语法insert into .. on duplicate key update ..使用方法的相关资料,需要的朋友可以参考下2023-04-04
这篇文章主要介绍了mysql中in条件使用字符串方式，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教2022-08-08
这篇文章主要介绍了MySQL查询用户权限的方法总结内容，需要的朋友们可以参考下。2020-03-03
与MSSQL对比学习MYSQL的心得（四）--BLOB数据类型
在MYSQL中BLOB是一个二进制大对象，用来储存可变数量的数据，而MSSQL中并没有BLOB数据类型，只有大型对象数据类型（LOB）2014-06-06
MySQL备份是指将MySQL数据库中的数据进行备份,以便在需要的时候能够恢复数据,下面这篇文章主要给大家介绍了关于MySQL中binlog+dump备份还原的相关资料,需要的朋友可以参考下2023-05-05
在做网站开发时，我们也许会想要取得mysql里id最大的一条记录，这个其实很简单。这篇文章给大家整理了获取一个表的记录数、获取一个表的最大id、获取一个表的auto_increment值等相关问题的答案，有需要的朋友们可以参考借鉴。2016-09-09
这篇文章主要介绍了mysql中根据已有的表来创建新表的三种方式，本文给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下2023-07-07
Mysql我们可以使用递归查询来构建一个递归树,本文就来介绍一下Mysql实现递归树查询的使用示例,具有一定的参考价值,感兴趣的可以了解一下2023-10-10
最新评论