msyql迁移到mongodb

本文介绍: 导出后添加,号 sed –i.b a k ‘s/t/,/g’ test log.txt。mysql 添加参数 secure–file–pr i v=/tmp #/tmp为导出的目录。-T 参数用于指定导出结果的目录和表文件名前缀，会导出 txt 格式的数据。支持基于时间戳的增量同步，需要源表有合适的时间戳支持。安装同步工具（如kettle/Talend）-f指定列（就是mongodb中的列）导入。创建输入源（mongodb）创建输入源（mongodb）创建输入源（关系型数据库）创建输入源（关系型数据库）

关系型数据库迁移到 mongodb的理由
高并发需求，关系型数据库不容易扩展
 快速迭代
灵活的json 模式
大数据量需求

应用迁移难度：
关系型到关系
oracle-》mysql oracle -》 postgresql
关系到文档–
oracle -》 mongodb
需要考虑：
总体架构（单体到分布式）
模式设计（关系模式到文档模型）
SQL语句/储存过程/JDBC/ORM
数据迁移（如何处理已有数据？）

模式设计：
针对已有关系模型，考虑如何用文档模型进行设计

方法一：使用 mon g export

一次性导入，需要停机

1.数据库导出

mysql 添加参数 secure–file–pr i v=/tmp #/tmp为导出的目录
 方法一：
mysqldump导出：
-T 参数用于指定导出结果的目录和表文件名前缀，会导出txt 格式的数据
mysqldump -uroot –p123456 test -T /tm p/
cat /tm p/test log.txt

select导出：
select * fro m test.test lo g into out file ‘/tm p/test lo g.csv’;

导出后添加,号 sed –i.b a k ‘s/t/,/g’ t e stl o g.txt

2.导入
 mongo export 导入
方法一

 --headerline -第一行做为mongodb中的列，要编辑testlog.txt添加列
 mongoimport  -d test -c testlog --headerline --type=csv /tmp/testlog.txt
2023-11-30T00:46:52.430+0800	connected to: mongodb://localhost/
2023-11-30T00:46:52.756+0800	29757 document(s) imported successfully. 0 document(s) failed to import.