写入和查询数据 写入数据 bulk写入 用户创建向量索引后,即可使用ES BULK API写入数据。不同的 index_type 与 space_type ,在数据写入时没有区别。 在以下示例中,我们向 my_index 索引的 field_hnsw 和 field_linear 字段分别写入样例向量数据。
登陆 DataBuilder 控制台,进入 数据加工 点击左上角切换至目标项目。
DataBuilder 为您提供BML节点,方便您通过算法节点载入BML工作流,实现数据在 DataBuilder 、BML间的周期性任务调度。
除了Values之外,其他数据格式都不允许将值设置为诸如等表达式 now() 。Values 1 + 2 格式允许有限地使用表达式,但不建议这样做,因为在这种情况下,执行表达式的代码效率低下。 不支持修改数据部分的其他查询: UPDATE , DELETE , REPLACE , MERGE , UPSERT 。
tring module 类型, 例如 master、worker、driver等 日志下载 result 字段名 类型 说明 downloadId String 下载任务ID 获取下载链接 Task 字段名 类型 说明 limit int 下载日志条数限制 order String 数据返回排序方式
概述 概述 DataBuilder 支持离线作业开发模式,主要面向离线数据处理场景,同时提供了可视化作业开发、脚本作业开发、作业组开发三种开发方式,满足不同客户开发需求。 进入项目 在【我的项目】中的项目列表点击具体某个项目,进入项目内部。 离线开发 项目内,选择【离线开发】,进入离线作业的开发和编排界面。离线开发分为三类: 可视化作业开发、脚本作业开发、作业组开发。
为了满足性能优化和在线存储空间的需求,我们经常需要对符合一定条件的数据进行 归档 管理,同时对已经归档的数据进行清理。 DBSC 的数据归档功能支持一次性或周期性的归档和清理功能,让您的业务库永远保持高性能稳定运行。 前提条件 实例已开启开启企业版。 需要归档的表中必须有时间字段。 目标数据库类型为 MySQL、PostgreSQL。 提交数据归档或归档+清理任务 登录 DBSC 控制台 。
其他字段参数 如果所选规则需要关联其他数据源,则选择其他字段参数。系统内置规则模板中一致性校验需要选择参考数据源。自定义规则根据实际逻辑选择对应数据源。 数据过滤 仅规则模板的可用对象为数据表时需配置,可选择打开或关闭数据过滤,打开时可以设置校验表的过滤条件,可以配置分区过滤或普通数据过滤,过滤条件会直接追加到校验SQL中。
参数: 标准键:JAVA_HOME,填写value值 标准键:python2,填写 python 2.x bin执行文件路径 标准键:python3,填写 python 3.x bin执行文件路径 资源组 EDAP支持Serverless资源组, 用于数据开发、数据湖分析、数据服务。
维度数据: 维度表是与事实表相对应的表,用于存储与数据中心的各个业务领域相关的维度信息,如用户表、商品表,日期表等,维度表保存了维度的属性值,可以与事实表做关联。 储存引擎 Doris:适合存储结构化数据 ElasticSearch:适合存储文本类数据,选择es后该数据集不参与和其他Doris数据集的关联。 4、数据字段配置:您可自定义添加字段,也可使用「AI生产字段」。