更多行记录 ] 相关产品 数据传输服务DTS 提供数据迁移、数据同步、数据订阅于一体的数据库数据传输服务,在不停服的前提下轻松完成数据库迁移
什么是月光宝盒 月光宝盒介绍 月光宝盒是百度智能云对象存储提供的安全、高效、便捷的数据迁移服务。通过离线的物理设备-月光宝盒,实现 TB 到 PB 级别的本地数据迁移上云,适用于本地 IDC 机房大规模数据迁移上云的场景。当本地机房带宽较小或无公网时,可通过离线迁移设备月光宝盒将数据迁移至百度智能云BOS。
适用场景 适用于使用百度智能云数据传输服务DTS(以下简称 DTS),将Oracle数据库实例的数据迁移到目标端MySQL实例中。 方案概述 使用限制 自建Oracle数据库的版本为10g、11g、12c(需使用PDB连接模式)、18c(需使用PDB连接模式)、19c(需使用PDB连接模式)。 MySQL数据库的版本需要大于等于5.6。 增量同步不支持同步关系型数据库的DDL语句。
数据同步 为了方便数据发布生成数据API,需要将数据湖中的数据进行导出,本示例通过可视化ETL作业,将数据从EDAP数据湖同步到RDS。 数据湖数据导出到RDS 1、进入项目“产品体验测试”,选择可视化作业,在画布中添加源端插件DataLakeSource、目标端插件DataBase。 2、点击插件进行属性配置,源端数据表为test_stu,目标端数据表为mysql_stu。
报表和图表过滤操作指导 介绍Sugar BI产品中如何应用报表和图表过滤功能。
默认情况下,过滤条件搜索只能在已查询到的结果中进行静态搜索,可以在维度字段上右键,选择「过滤条件设置」,在设置弹窗中开启「搜索时重新拉取数据」,这样每次搜索时都会重新查询一遍含有搜索词的数据。 图表过滤组件的级联、依赖 过滤条件之间可以设置依赖关系,从而达到过滤条件级联的效果。
图表联动 图表联动是指在点击本图表的某一部分时,旁边的图表数据联动刷新,例如一个饼图展示了各个「地区」销售利润,点击饼图中的每一个地区,旁边的柱状图联动展示该地区下所有「省份」的销售利润。 在编辑报表时,某些图表的控制面板里可以看到「联动」选项卡,如下饼图的联动: 联动的触发 每种图表触发联动的方式不同,例如:折线图的触发方式是点击折线上的某一点,地图是点击某个区域,表格是点击某行或某列。
粒度要求: 现 Redis 到 Redis 的迁移支持以 实例级别 为粒度进行迁移。 迁移限制 一致性限制: DTS在执行Redis数据迁移任务时,如果在增量同步过程中出错导致任务失败,然后再重启该迁移任务,可能会导致目标端数据不一致。
单台月光宝盒设备的标定容量为 96 TB,实际使用容量为 83 TB 左右/每台,适用于百 TB 级别的本地 IDC 数据迁移上云场景。 使用场景 您的网络环境不好(带宽小、网络不稳定),且带宽成本非常昂贵; 希望尽快完成数据的上云,但是专线方式的费用过于昂贵; 自己没有硬盘或者无可移动的数据存储和传输设备。
Flume 数据存储到 BOS Flume Flume 是一个分布式、可靠性和高可用的海量日志聚合系统,支持在系统中定制各类数据发送方,用于收集数据;同时,Flume 提供对数据进行简单处理,并写到各种数据接收方(可定制)的能力。 Flume 支持多种 Sink 类型,可以借助 HDFS Sink 将收集到的数据存储到 BOS。 开始 1. 下载并安装 apache-flume 略 2.