TiDB（6）：数据迁移-TiDB Lightning

9月前作者：不死鸟.亚历山大.狼崽子分类：Toy博客阅读(65) 违法举报

这篇具有很好参考价值的文章主要介绍了TiDB（6）：数据迁移-TiDB Lightning。希望对大家有所帮助。如果存在错误或未考虑完全的地方，请大家不吝赐教，您也可以点击"举报违法"按钮提交疑问。

1 TiDB Lightning介绍

TiDB Lightning 是一个将全量数据高速导入到 TiDB 集群的工具，目前支持 Mydumper 或 CSV 输出格式的数据源。你可以在以下两种场景下使用 Lightning：

迅速导入大量新数据。

备份恢复所有数据。

TiDB Lightning 主要包含两个部分:

（1）tidb-lightning（“前端”）：主要完成适配工作，通过读取数据源，在下游 TiDB 集群建表、将数据转换成键/值对 (KV 对) 发送到 tikv-importer、检查数据完整性等。

（2）tikv-importer（“后端”）：主要完成将数据导入 TiKV 集群的工作，把 tidb-lightning 写入的 KV 对缓存、排序、切分并导入到 TiKV 集群。

TiDB（6）：数据迁移-TiDB Lightning,TiDB,tidb

2 准备迁移工具

首先用过一下地址下载工具文章来源地址https://www.toymoban.com/news/detail-534324.html

wget https://download.pingcap.org/tidb-enterprise-tools-latest-linux-amd64.tar.gz

wget https://download.pingcap.org/tidb-toolkit-latest-linux-amd64.tar.gz

3 准备MySQL数据

CREATE DATABASE mytest;
USE mytest;

CREATE TABLE mytest.t1 (
	id BIGINT UNSIGNED NOT NULL AUTO

到了这里，关于TiDB（6）：数据迁移-TiDB Lightning的文章就介绍完了。如果您还想了解更多内容，请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章，希望大家以后多多支持TOY模板网！

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：如若内容造成侵权/违法违规/事实不符，请点击违法举报进行投诉反馈，一经查实，立即删除！

分享到：

领支付宝红包赞助服务器费用

TIDB: 元数据查询语句

一、获取表描述二、获取视图DDL 三、判断表是否存在sql 四、字段详情查询五、查询当前用户是否存在六、查询库列表七、查询表列表八、查询用户对某表所拥有的权限九、查询分区信息

2024年01月17日
浏览(40)
tidb数据库的安装与部署

TiDB 是 PingCAP 公司自主设计、研发的开源分布式关系型数据库，是一款同时支持在线事务处理与在线分析处理 (Hybrid Transactional and Analytical Processing, HTAP) 的融合型分布式数据库产品，具备水平扩容或者缩容、金融级高可用、实时 HTAP、云原生的分布式数据库、兼容 MySQL

2024年02月04日
浏览(44)
大数据存储组件TiDB原理+实战篇

1.TiDB引入 1.1.数据库技术发展简史数据库技术产生于20世纪60年代末70年代初，其主要主要研究如何存储，使用和管理数据。随着计算机硬件和软件的发展，数据库技术也不断地发展。数据库技术在理论研究和系统开发上都取得了辉煌的成就。从数据管理的角度看，数据库

2024年02月02日
浏览(39)
[Lesson 01] TiDB数据库架构概述

目录一章节目标二 TiDB 体系结构 1 TiDB Server 2.1 TiKV 2.2 TiFlash 3 PD 参考理解TiDB数据库整体架构了解TiDB Server ，TiKV ，TiFlash 和 PD的主要功能了解这些体系结构是如何实现TiDB的核心功能的 TiDB Server 是无状态的，所以可以结合负载均衡的组件LVS。数据并不是存储在TiDB Ser

2024年02月16日
浏览(38)
我的docker随笔42：TiDB数据库部署

本文介绍 TiDB 数据库的容器化部署。前段时间，国产化替换提上了日程，有关部门（这个真的是某部门）作为领导身份介入，因此，需启动相应的事情，但最近似乎没有什么动静。因为身份问题，只好私下做一些力所能及的事。数据库方面，有同事已经对接上达梦，当前只

2024年02月12日
浏览(41)
使用Sqoop将Hive数据导出到TiDB

关系型数据库与大数据平台之间的数据传输之前写过一些使用Sqoop将数据在HDFS与MySQL互导使用Sqoop将SQL Server视图中数据导入Hive 使用DataX将Hive与MySQL中的表互导使用Sqoop将Hive数据导出到TiDB虽然没写过，但网上一堆写的，那为什么我要专门写一下呢？我发现一些大家可能会忽

2024年01月23日
浏览(47)
11.云原生分布式数据库之TIDB

云原生专栏大纲从后端视角、运维视角和基础架构视角来看，使用 TiDB 作为数据库系统可以获得分布式架构、高可用性、强一致性、事务支持、水平扩展、高性能、简化运维、灵活的扩展和配置、集成的监控和告警等优势。这些优势使得 TiDB 成为处理大规模数据和高并发请求

2024年02月01日
浏览(65)
如何在TiDB中进行数据仓库与ETL操作？

作者：禅与计算机程序设计艺术数据仓库（Data Warehouse）是组织、管理和分析数据的集合体。其主要功能包括：数据整理、清洗和转换；提供面向主题的集中、可重复使用的信息；对复杂的业务数据进行加工和分析；为决策者提供有价值的信息。而数据库中的ETL（Extract

2024年02月11日
浏览(49)
分布式数据库（DorisDB、Clickhouse、TiDB）调研

B站视频：DorisDB VS ClickHouse OLAP PK 1.1 DorisDB 场量：线上数据应用访问官方网站 DorisDB企业版文档单表/多表查询，DorisDB总体时间最短单表查询：DorisDB最快次数最多，ClickHouse次之多表查询：DorisDB所有执行均最快 DorisDB多表关联效率好支持各种主流分布式Join，不仅支持大宽表模

2024年02月06日
浏览(45)
【产品兼容认证】WhaleStudio 成功兼容TiDB数据库软件

北京，2023年12月27日 - 平凯星辰（北京）科技有限公司（以下简称平凯星辰）旗下的 TiDB 产品与白鲸开源的 WhaleStudio 已成功完成产品兼容性认证。这一重要合作旨在为全球客户提供更大的价值。 WhaleStudio 是一款由 Apache DolphinScheduler 和 SeaTunnel 核心团队打造的商业版高性能分布

2024年01月24日
浏览(43)