百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术教程 > 正文

从 MySQL 迁移数据到 Oracle 中的全过程

mhr18 2024-09-14 05:28 19 浏览 0 评论

一、前言

这里记录一次将MySQL数据库中的表数据迁移到Oracle数据库中的全过程 ,使用工具 Navicat,版本 12.0.11

操作环境及所用工具:


  1. mysql5.7
  2. oracle18c
  3. windows
  4. Navicat12.0.11
  5. idea

二、开始移植

点击 工具 -> 数据传输

左边 源 标识mysql数据库 , 右边 目标 标识要移植到的oracle数据库

高级选项中勾选大写

温馨小提示:
如果字段名和表名都为小写,oracle操作数据的时候将会出现找不到表或视图的错误,解决方法是必须加上双引号才能查询到, 这样的话我们通过程序操作数据的时候必须加上双引号,即大大加重了迁移数据库后的工作量,因此这里需勾选转换对象名为大写 ,同时在转换过程中如果字段名出现oracle关键字的话,它会自动给我们加上双引号解决关键字的困扰!!!
【 ex: user -> "USER" number -> "NUMBER" desc -> "DESC" level -> "LEVEL" 】

选择需要移植的表,这里我一把梭全选了~

然后等待数据传输完成

如果最后遇到如下情况,可暂不管,直接关闭即可~

然后查看oracle,如下,数据导入成功

温馨小提示:传输过程中可能会存在有部分几张表不成功,手动导一下就好了~~

三、问题


1、解决oracle自增主键


oracle设置自增主键的几种方式:


  1. 序列 + 触发器
  2. 序列 + Hibernate配置 (注:此方式仅适用于通过Hibernate连接数据库的方式)
  3. oracle12c版本之后新增 自增列语法 GENERATED BY DEFAULT AS IDENTITY

解决思路:

在ddl 创建表sql中添加自增主键的命令,重新创建一次表结构,然后再将oracle中的数据单独导入这里由于小编oracle版本为18c 因此在创建表的时候加上自增主键语法即可完成!

① 备份数据 -> 数据泵方式

数据泵 -> 数据泵导出

② idea中如下查看ddl

然后将ddl拷贝到一个txt文本文件中保存

③ ddl文件内容替换自增主键工具类


温馨小提示:
这里小编数据库中的时间类型为 DATE 类型 需 改为 TIMESTAMP 类型 ,这个问题可以直接使用idea的替换功能完成修改~ ,其余修改可根据个人实际情况来进行修改

public class MySQLToOracleTest {

    public static void main(String[] args) {
        try {
            replaceDDLContent("D:\\Users\\zq\\Desktop\\oracle测试\\oracle_ddl.txt"); // TODO 这里修改为自己的ddl文件存放位置
        } catch (IOException e) {
            e.printStackTrace();
        }
    }

    /**
     * 替换文本文件中的 自增主键ID
     *
     * @param path
     * @throws IOException
     */
    public static void replaceDDLContent(String path) throws IOException {
        // 原有的内容
        String srcStr = "not null";
        // 要替换的内容
        String replaceStr = "GENERATED BY DEFAULT AS IDENTITY";
        // 读
        File file = new File(path);
        FileReader in = new FileReader(file);
        BufferedReader bufIn = new BufferedReader(in);
        // 内存流, 作为临时流
        CharArrayWriter tempStream = new CharArrayWriter();
        // 替换
        String line = null;
        // 需要替换的行
        Map<Integer, Object> lineMap = new HashMap<>(104);
        //定义顺序变量
        int count = 0;
        while ((line = bufIn.readLine()) != null) {
            count++;
            if (line.contains("create table")) {
                lineMap.put(count + 2, line);
            }

            //遍历map中的键
            for (Integer key : lineMap.keySet()) {
                if (count == key && !line.contains("NVARCHAR2")) {
                    // TODO 在这里这是自增主键哦
                    line = line.replaceAll(srcStr, replaceStr);
                    lineMap.put(count, line);
                }
            }

            // 将该行写入内存
            tempStream.write(line);
            // 添加换行符
            tempStream.append(System.getProperty("line.separator"));
        }
        // 关闭 输入流
        bufIn.close();
        // 将内存中的流 写入 文件
        FileWriter out = new FileWriter(file);
        tempStream.writeTo(out);
        out.close();
        System.out.println("文件存放位置:" + path);
        System.out.println(lineMap);
    }

}


④ 将替换过后的ddl拷贝到idea中的一个新控制台中运行创建表

全选ddl,然后点击左上角运行创建表 【 注:这里需先清空该库下所有表,因此步骤①要先备份一下从mysql迁移到oracle后的表数据,不要忘记哦!!】

等待表全部创建成功,如下所示:

⑤ 导入备份数据

数据泵 -> 数据泵导入

⑥ 最后查看数据导入成功!

这时候,数据有了,自增主键也有了,但是存在一个问题就是插入数据的时候主键自增ID都是从1开始自增,如果表中没有数据都还ok,问题是如果表有数据,就会出现主键ID重复的问题!!!


2、解决自增主键ID无法从表数据ID最大值开始增值


思路:拼接出修改表自增ID从几开始的sql即可!


SELECT
    'SELECT ''ALTER TABLE SEWAGE_GY.' || t1.table_name || ' MODIFY(' || t1.Column_Name || ' Generated as Identity (START WITH '' || MAX( ' || t1.Column_Name || '+1 ) || ''));'' FROM ' || t1.table_name || ' UNION ALL' AS FINAL_SQL
FROM cols t1
LEFT JOIN user_col_comments t2 ON t1.Table_name = t2.Table_name AND t1.Column_Name = t2.Column_Name
LEFT JOIN user_tab_comments t3 ON t1.Table_name = t3.Table_name
WHERE
    NOT EXISTS (
        SELECT t4.Object_Name
        FROM User_objects t4
        WHERE
            t4.Object_Type = 'TABLE'
            AND t4.TEMPORARY = 'Y'
            AND t4.Object_Name = t1.Table_Name
    )
    AND t1.IDENTITY_COLUMN = 'YES'
ORDER BY t1.Table_Name, t1.Column_ID

命令解析:

# 设置表主键ID从多少开始自增  ex:下面标识从10000开始自增
ALTER TABLE 数据库名.表名 MODIFY(主键ID Generated as Identity (START WITH 10000));

# 查询该库下所有表名
SELECT table_name FROM user_tables;

# 查询出指定表的主键ID字段名
SELECT t1.table_name,t1.Column_Name
FROM cols t1
    LEFT JOIN user_col_comments t2 ON t1.Table_name = t2.Table_name AND t1.Column_Name = t2.Column_Name
    LEFT JOIN user_tab_comments t3 ON t1.Table_name = t3.Table_name 
WHERE NOT EXISTS (
        SELECT t4.Object_Name 
        FROM User_objects t4 
        WHERE t4.Object_Type = 'TABLE' 
            AND t4.TEMPORARY = 'Y' 
            AND t4.Object_Name = t1.Table_Name 
    ) 
    AND t1.table_name = '表名' 
    AND t1.IDENTITY_COLUMN = 'YES' 
ORDER BY t1.Table_Name, t1.Column_ID

# 查询该库下所有表名+表主键字段名
SELECT t1.table_name,t1.Column_Name
FROM cols t1
    LEFT JOIN user_col_comments t2 ON t1.Table_name = t2.Table_name AND t1.Column_Name = t2.Column_Name
    LEFT JOIN user_tab_comments t3 ON t1.Table_name = t3.Table_name 
WHERE NOT EXISTS (
        SELECT t4.Object_Name 
        FROM User_objects t4 
        WHERE t4.Object_Type = 'TABLE' 
            AND t4.TEMPORARY = 'Y' 
            AND t4.Object_Name = t1.Table_Name 
    ) 
    AND t1.IDENTITY_COLUMN = 'YES' 
ORDER BY t1.Table_Name, t1.Column_ID

拷贝到新的控制台后注意删除最后一个 UNION ALL 再运行哦!!!

最终完成自增主键ID从表数据最大值开始自增!

3、程序中的sql语句转换

这里结合个人语言实际操作...

相关推荐

Docker安装详细步骤及相关环境安装配置

最近自己在虚拟机上搭建一个docker,将项目运行在虚拟机中。需要提前准备的工具,FinallShell(远程链接工具),VM(虚拟机-配置网络)、CentOS7(Linux操作系统-在虚拟机上安装)...

Linux下安装常用软件都有哪些?做了一个汇总列表,你看还缺啥?

1.安装列表MySQL5.7.11Java1.8ApacheMaven3.6+tomcat8.5gitRedisNginxpythondocker2.安装mysql1.拷贝mysql安装文件到...

Nginx安装和使用指南详细讲解(nginx1.20安装)

Nginx安装和使用指南安装1.检查并安装所需的依赖软件1).gcc:nginx编译依赖gcc环境安装命令:yuminstallgcc-c++2).pcre:(PerlCompatibleRe...

docker之安装部署Harbor(docker安装hacs)

在现代软件开发和部署环境中,Harbor作为一个企业级的容器镜像仓库,提供了高效、安全的镜像管理解决方案。通过Docker部署Harbor,可以轻松构建私有镜像仓库,满足企业对镜像存储、管理和安全性...

成功安装 Magento2.4.3最新版教程「技术干货」

外贸独立站设计公司xingbell.com经过多次的反复实验,最新版的magento2.4.3在oneinstack的环境下的详细安装教程如下:一.vps系统:LinuxCentOS7.7.19...

【Linux】——从0到1的学习,让你熟练掌握,带你玩转Linu

学习Linux并掌握Java环境配置及SpringBoot项目部署是一个系统化的过程,以下是从零开始的详细指南,帮助你逐步掌握这些技能。一、Linux基础入门1.安装Linux系统选择发行版:推荐...

cent6.5安装gitlab-ce最新版本-11.8.2并配置邮件服务

cent6.5安装gitlab-ce最新版本-11.8.2并配置邮件服务(yum选择的,时间不同,版本不同)如果对运维课程感兴趣,可以在b站上搜索我的账号:运维实战课程,可以关注我,学习更多免费的运...

时隔三月,参加2020秋招散招,终拿字节跳动后端开发意向书.

3个月前头条正式批笔试4道编程题只AC了2道,然后被刷了做了200多道还是太菜了,本来对字节不抱太大希望,毕竟后台竞争太大,而且字节招客户端开发比较多。后来看到有散招免笔试,抱着试一试的心态投了,然而...

Redisson:Java程序员手中的“魔法锁”

Redisson:Java程序员手中的“魔法锁”在这个万物互联的时代,分布式系统已经成为主流。然而,随着系统的扩展,共享资源的争夺成为了一个棘手的问题。就比如你想在淘宝“秒杀”一款商品,却发现抢的人太...

【线上故障复盘】RPC 线程池被打满,1024个线程居然不够用?

1.故障背景昨天晚上,我刚到家里打开公司群,就看见群里有人讨论:线上环境出现大量RPC请求报错,异常原因:被线程池拒绝。虽然异常量很大,但是异常服务非核心服务,属于系统旁路,服务于数据核对任务,即使...

小红书取消大小周,有人不高兴了!

小红书宣布五一节假日之后,取消大小周,恢复为正常的双休,乍一看工作时长变少,按道理来说大家应该都会很开心,毕竟上班时间缩短了,但是还是有一些小红书的朋友高兴不起来,心情很复杂。因为没有了大小周,以前...

延迟任务的多种实现方案(延迟机制)

场景订单超时自动取消:延迟任务典型的使用场景是订单超时自动取消。功能精确的时间控制:延时任务的时间控制要尽量准确。可靠性:延时任务的处理要是可靠的,确保所有任务最终都能被执行。这通常要求延时任务的方案...

百度java面试真题(java面试题下载)

1、SpingBoot也有定时任务?是什么注解?在SpringBoot中使用定时任务主要有两种不同的方式,一个就是使用Spring中的@Scheduled注解,另一个则是使用第三方框架Q...

回归基础:访问 Kubernetes Pod(concurrent.futures访问数据库)

Kubernetes是一头巨大的野兽。在它开始有用之前,您需要了解许多概念。在这里,学习几种访问集群外pod的方法。Kubernetes是一头巨大的野兽。在它开始有用之前,您需要了解许多不同的...

Spring 缓存神器 @Cacheable:3 分钟学会优化高频数据访问

在互联网应用中,高频数据查询(如商品详情、用户信息)往往成为性能瓶颈。每次请求都触发数据库查询,不仅增加服务器压力,还会导致响应延迟。Spring框架提供的@Cacheable注解,就像给方法加了一...

取消回复欢迎 发表评论: