EasyDAP 包括 物理表、映射表。 物理表:物理表指数据存储于接入EasyDAP的数据湖存储系统中(主要是BOS、HDFS ,针对HIVE数仓,可以接入HIVE的HDFS存储路径作为数据湖存储 ),存储的路径由EasyDAP进行管理。EasyDAP管理物理表的读、写操作,当表被删除时,数据也会被一同删除。
常见问题总览 数据迁移问题 DTS支持哪几类数据迁移? DTS结构迁移会迁移哪些内容? DTS增量迁移的原理是什么,如何保证增量实时迁移? DTS迁移过程中对源数据库是否有影响,是否会删除源库中数据? DTS迁移过程中,对于BCC自建数据库或RDS实例走内网还是外网? DTS迁移过程中,是否支持DDL操作? DTS是否支持VPC内的BCC自建数据库或RDS实例的数据迁移?
解决问题的方法是,创建与源数据库相同字符集的目标数据库后再次执行数据迁移。 MySQL 数据库表名都是大写但是导入云数据库 RDS 后表名都是小写,怎么处理? 如果在实例的“参数设置”中设置了“lower_case_table_names”即表名大小写敏感会出现这种情况。需要修改该参数取值并重新导入云数据库 RDS 。
请至RDS实例的基本信息中获取,可参考 连接RDS实例 db_name 需导入数据所在数据库的名称。如需创建关系型数据库RDS实例,请参考 创建数据库 。 table_name 需导入数据的数据表的名称。如需创建数据表,请先登录到关系型数据库RDS实例中创建,请参考 创建RDS实例 。 --username和--password 需导入数据所在数据库的账号和密码。
数据绑定标签中可供选择的数据表,是已在数据标签中创建好的二维数据表。数据表的创建过程可参考 仪表盘数据表处理 及 典型实践 文档。 下拉选项 数据表:【必填】单选,可选择已创建的数据表。 值:【必填】单选,可选择string类型的数据。 标签:【必填】单选,可选择string类型的数据。
Json Path 和 Columns Json Path 用于指定如何对 JSON 格式中的数据进行抽取,而 Columns 指定列的映射和转换关系。两者可以配合使用。 换句话说,相当于通过 Json Path,将一个 Json 格式的数据,按照 Json Path 中指定的列顺序进行了列的重排。之后,可以通过 Columns,将这个重排后的源数据和表的列进行映射。
编辑删除权限设置表格中列出了当前空间中所有数据源和数据模型,您可以赋予用户或角色任意资源的编辑删除权限。 超级数据开发师权限 当超级数据开发师打开时,意为赋予该用户或角色,当前空间内所有数据模型和数据源的新增、删除、编辑、使用(所有数据源)和目录排序的权限。
建议您在执行数据同步前谨慎评估,在业务低峰期执行数据同步。 如果源库中待迁移的表没有主键或唯一约束,且所有字段没有唯一性,可能会导致目标数据库中出现重复数据。 4 配置步骤 4.1 准备工作 如果 TiDB 数据库具有白名单限制访问,您需要将 DTS 服务器IP地址加入 TiDB 白名单中。详情参见 DTS 授权 IP 白名单 。
通过生成的sql我们可以看到,留存源行为筛选主要影响最外层的筛选: 留存目标行为筛选 留存目标行为筛选是针对统计后续留存行为人数的限定条件: 通过生成的sql我们可以看到,留存目标行为筛选主要影响每次留存的筛选: 注:留存报表目前只支持单表,不支持多表join,留存报表推荐使用clickhouse数据源(clickhouse内置留存函数可以大幅度缩短数据获取时间) 留存报表目前只支持的数据源为clickhouse
运行时动态修改 TSDB 查询参数 在另一篇最佳实践“数据源接入之 TSDB”中,我们配置的参数为“city”为“bj”。自然的,仪表盘在运行时,只会拿到“bj”的数据。 那么,如何在仪表盘运行时修改查询参数,使其展示“gz”的数据,而不修改数据表配置+重新保存仪表盘?这就需要写一些代码了。