异构数据库向南大通用GBase 8a迁移调研工作指南

调研分类

调研项

调研情况

调研项解释

整体系统架构

包含：数据源、ETL、ODS层、流处理、数据仓库、数据治理(元数据管理、数据清洗、数据质量)、调度、AI平台、图数据库、数据集市、BI、各应用组件。
数据流向、属性(数据流实时性、离线等)

系统组件构成

包括原数据库相关套件中除数据库外的其他软件与数据库为上下游关系的其他第三方软件

原数据库系统集群硬件配置

各组件集群硬件配置(cpu、memory、disk、network、switch)
1）硬件型号
2）单个节点各部分配置：cpu、memory、disk、network、switch
3）总体多少个柜，每个柜是全配还是半配，每个柜配置多少个节点

源系统数据存储产品名称、版本、用途、使用者、运维方

例如：
产品名称：Teradata数据仓库系统
版本：14.00.00.10
用途：作为商务领域为主的各业务部门的业务数据需求以及部分生产系统的数据需要的数据基础
使用者：部分应用系统、公司各业务部门
运维方：Teradata原厂提供维护支持

原数据库对外数据接口方式

采用何种方式对接上下游，数据如何入库和出库

原数据库负载现状

1）主要业务形态：定时跑批+即席查询？第三方工具连接报表？给下游供数？
2）数据库内用户数量、分时段连接数据库用户数量
3）跑批加工时段、窗口要求，即席查询性能指标要求等
4）混合负载情况：数据同步周期及同步规模、加工处理周期（T+N)、前端访问等读写分离及并发情况

是否使用了视图、tmp表等数据对象

特性应用

如表类型、函数、语法等

数据生命周期

核心（如对内对外重点上报）、瓶颈、大数据量业务的数据存储周期及应用周期，评估活跃数据占比，如数据存储三年，但实际主要用到近一个月
业务名称  业务类型（核心、瓶颈、大数据量） 存储周期 活跃周期（近xx天）

现有痛点、需求

作业调度产品名称、版本、使用者、运维方

调度程序产品名称、版本、运维方信息

作业调度分类

数据加工作业的分层情况，执行顺序

作业调度各分类数量、当前执行时间量级

每层调度的数量、大致执行时间

各作业调度定时方式

是时间触发还是定时作业，作业的依赖配置和调度方式怎样的

是库内存储过程还是库外脚本，使用和种脚本语言

各作业执行时间和周期

当前负载下跑批调度作业的执行时间，每天执行频次

整体作业的数据流向

从数据源->加工->向下游供数的整体描述

现有痛点、需求

当前业务运行的痛点和需求有哪些？

各应用产品名称、版本、开发商(集成商)、使用者、运维方

系统对接各应用方式(接口类型、模板、语言、工具说明。如有样例附上样例)

系统对接各应用需要迁移代码量

脚本数量、行数

现有痛点、需求

迁移工作范围

迁移工期限定和计划

其他迁移工作参与方介绍

实施人员要求

硬件配置

数据量

性能表现

顾虑

改进项