介绍Spark SQL 工作原理
公共请求头与响应头 公共请求头 头域 说明 是否必须 Authorization 包含Access Key与请求签名。具体请参考 鉴权认证 必须 host 服务域名 必须 Content-Type application/json; charset=utf-8 可选 x-bce-date 该请求创建的时间,表示日期一律采用YYYY-MM-DD方式,例如2014-06-01表示2014年6月1日。
公共请求头 公共请求头 头域 说明 是否必须 Authorization 包含Access Key与请求签名。 必须 x-bce-date 该请求创建的时间,表示日期一律采用YYYY-MM-DD方式,例如2014-06-01表示2014年6月1日。如果用户使用了标准的Date域,该头域可以不填。当两者同时存在时,以x-bce-date为准。
SQL中行转列 什么是行转列 什么是行转列?首先看一个简单明了的例子: 数据库中存储的数据格式是这样的: 但是想展示的数据是这样的: 上面的例子就是典型的行转列,我们把 name 字段中的每种取值都转换成了一个列来展示,并且将 val 字段的取值作为了转换后新列的取值。
创建Bucket 概述 存储桶 Bucket 是用来存储 Object 文件的容器。在使用对象存储 BOS 服务之前,您必须先创建 Bucket。 存储桶 Bucket 具有若干配置属性。在创建 Bucket 时,您需要对部分 Bucket 属性进行配置,如 Bucket 名称、所属地域、默认存储类型和读写权限等,同时可以设置 CDN 官方加速,并对标签进行绑定等。
SQL-开发类问题 单表数据量多大合适? 建议单表记录数不要超过2000w,如果超过了建议拆库或拆表。 单条 SQL 如何批量删除数据? 删除顺序如下:主键范围删除大于(>)主键in方式删除大于(>) 联合主键删除,单条SQL删除数据范围800~1000。 单条 SQL 插入是需要注意什么? 行数控制在2000个以内,批量操作时建议执行必要sleep;有自增键的表并发要控制在200以内。
start=2006-01-02T15:04:05Z end String 否 RequestBody参数 SQL结束时间。end=2006-01-02T15:04:05Z 返回头域 除公共头域,无其它特殊头域。
start=2006-01-02T15:04:05Z end String 否 RequestBody参数 SQL结束时间。end=2006-01-02T15:04:05Z 返回头域 除公共头域,无其它特殊头域。
具体请参考 鉴权认证 必须 host 服务域名 必须 Content-Type application/json; charset=utf-8 可选 x-bce-date 该请求创建的时间,表示日期一律采用YYYY-MM-DD方式,例如2014-06-01表示2014年6月1日。如果用户使用了标准的Date域,该头域可以不填。当两者同时存在时,以x-bce-date为准。
❌ 限制表必须注释 ✔️ ❌ ✔️ ✔️ ❌ ❌ ❌ 表要有主键 ✔️ ✔️ ✔️ ✔️ ❌ ❌ ❌ 限制表不能使用外键 ✔️ ✔️ ✔️ ✔️ ❌ ❌ ❌ OnlineDDL:大表结构变更风险检测 ✔️ ❌ ✔️ ✔️ ❌ ❌ ❌ 表需要包含某些列 ✔️ ✔️ ✔️ ✔️ ❌ ❌ ❌ 限制表存储引擎