Formats
所有文档

          百度流式计算 BSC

          Formats

          BSC 目前支持三种 format:JSON、CSV、TXT

          支持的数据源

          编码类型 Source Sink
          CSV BKAFKA、BOS、MQTT BKAFKA、BOS、MQTT
          JSON BKAFKA、BOS、MQTT BKAFKA、BOS、MQTT
          TXT PALO

          Format 相关参数

          公共参数

          名称 简称 用例 SPARK FLINK 说明
          format.encode encode JSON / CSV / TXT Y Y 数据编码

          JSON 参数设置

          名称 简称 用例 SPARK FLINK 说明
          format.options.fail-on-missing-field json.fail-on-missing-field true / false Y 是否允许缺失的列补齐为null

          CSV 参数设置

          名称 简称 用例 SPARK FLINK 说明
          format.options.field-delimiter csv.field-delimiter , ; \t Y Y 列分隔符
          format.options.line-delimiter csv.line-delimiter \n Y Y 行分隔符

          TXT 参数设置

          名称 简称 用例 SPARK FLINK 说明
          format.options.field-delimiter txt.field-delimiter , Y Y 列分隔符,仅适用于 PALO

          上一篇
          Overview
          下一篇
          ES