删除队列 接口描述 删除指定集群的一个指定队列。 默认队列不可删除。
创建队列 接口描述 指定集群创建一个队列。 请求结构 POST /v{version}/cluster/{clusterId}/queue HTTP/1.1 Host: chpc.bj.baidubce.com Authorization: authorization string 请求头域 除公共头域外,无其他特殊头域。
BrokerFailedProduceRequestsPerSec 失败写入请求频率 次/s ClusterId,BrokerId BrokerFetchMessageConversionsPerSec 读取消息格式转换频率 条/s ClusterId,BrokerId BrokerMessagesInPerSec 生产消息速率 条/s ClusterId,BrokerId BrokerProduceMessageConversionsPerSec
查询队列详情 接口描述 查询指定集群指定队列详情。 请求结构 GET /v{version}/cluster/{clusterId}/queue/{queueName} HTTP/1.1 Host: chpc.bj.baidubce.com Authorization: authorization string 请求头域 除公共头域,无其他特殊头域。
查询队列列表 接口描述 查询指定集群全部队列列表。 请求结构 GET /v{version}/cluster/{clusterId}/queues HTTP/1.1 Host: chpc.bj.baidubce.com Authorization: authorization string 请求头域 除公共头域外,无其他特殊头域。
由于消息是以队列的形式缓存在Kafka中,分区个数并不需要按照峰值来设置,而只要按照平均值来设置即可,当然缺点是延时会提高。 什么是客户端? 您可以通过Kafka客户端连接消息中心,并且把代码部署在多个百度智能云服务BCC或应用引擎BAE实例中生产或者消费消息。
在队列管理页面单击 新建队列 。 在新建队列页面中,完成队列基本信息配置: 队列名称:自定义队名名称,长度为 1-63 个字符,只能包含数字、小写字母和“-”,且首尾只能是字母或数字。 备注:自定义队列的备注信息,长度不超过 300 个字符。 完成队列配额信息配置: CPU:为队列指定 CPU 资源大小,输入限制为大于 0 的数且最多保留两位小数。
在集群管理页面单击 云原生AI > 队列管理 。 在队列管理页面中,单击目标队列的 删除 。 在确认删除弹出框中,单击“确定”按钮完成队列删除。 注意:删除队列并不会删除队列关联的任务。
在集群管理页面单击 云原生AI > 队列管理 。 在队列管理页面中,单击目标队列的 修改 。 在修改队列页面中,更新队列配置。 点击“确定”按钮,完成修改队列。
Checkpoint异步加速工具 产品介绍 Checkpoint异步加速工具是基于Megatron训练框架,利用模型信息转储、模型对象反序列化等技术,近0开销的模型保存机制,实现大模型训练全过程精度无损的模型保存与恢复。 如何使用 使用限制 1)内存占用:单机所有GPU卡的Checkpoint内存会优先保存在内存,因此对于千亿参数规模模型建议预留200G内存以上。