快速入门 本文为您简要的介绍使用百度百舸·AI异构计算平台的准备工作和创建流程。在首次使用百度百舸·AI异构计算平台的情况下,帮助用户快速上手,在平台上完成创建资源池及队列、通过模版创建典型大模型训练任务、查看监控等关键流程。
尽量均衡 DP 间的采样样本长度; Packing 模式下,支持数据集按 packing 后的样本总计算量排序,尽量均衡 DP 间的计算量(在长序列场景下,由于样本长度差异较大,该问题可能更严重); 升级 Megatron 显存优化机制,在长序列等对显存要求极高的场景下,可用于精细的调整显存占用,包括: 支持流水线并行按 PP Stage 动态设置不同的 PP Layer 数目; 支持重计算功能按
BCE-Serverless-Application-Model规范 BCE SAM 是用来定义百度函数计算CFC无服务器应用架构的模型,为本地开发工具bce-sam-cli提供指引。BCE SAM定义了一组对象,这些对象可以包含在模板定义文件中,以便轻松地描述CFC函数。 当前BCE SAM的版本号为2018-08-30。
初始化 确认Endpoint 目前支持“华北-北京”、“华南-广州” 两个区域。北京区域: http://cfc.bj.baidubce.com ,广州区域: http://cfc.gz.baidubce.com 对应信息为: 访问区域 对应Endpoint BJ cfc.bj.baidubce.com GZ cfc.gz.baidubce.com 获取密钥 要使用百度云CFC,您需要拥有一个有效
Python 本示例演示用 Python SDK 创建和执行您的 CFC 函数。 安装 在 官方网站 下载Python SDK。 进入下载目录。 安装SDK之前,需要先执行命令 pip install pycrypto 安装pycrypto依赖。 执行以下命令安装SDK包: python setup.py install 使用样例 #!/usr/bin/env python # -*- codin
初始化 确认Endpoint 在确认您使用SDK时配置的Endpoint时,可先阅读API参考中关于 CFC域名服务 的部分,理解Endpoint相关概念。 目前CFC支持“华北-北京”: http://cfc.bj.baidubce.com 、“华南-广州”: http://cfc.gz.baidubce.com 、“华东-苏州”: http://cfc.su.baidubce.com 三个区域
支持 如果您遇到无法解决的问题,您可以申请 工单 ,我们会立马安排专业的工程师为您解答问题。 工单服务时间:工作日9:30 - 19:00
Python 目前支持的Python开发语言包括如下版本: Python2.7 Python3.6 Python3.10 函数代码 一个简单的Python函数代码如下所示: # -*- coding: utf-8 -*- def handler(event, context): return "Hello World" 执行函数 在创建CFC云函数时,需要指定执行方法。 普通方
初始化 确认Endpoint 在确认您使用SDK时配置的Endpoint时,可先阅读API参考中关于 CFC域名服务 的部分,理解Endpoint相关概念。 目前CFC支持“华北-北京”: http://cfc.bj.baidubce.com 、“华南-广州”: http://cfc.gz.baidubce.com 、“华东-苏州”: http://cfc.su.baidubce.com 三个区域
初始化 确认Endpoint 在确认您使用SDK时配置的Endpoint时,可先阅读API参考中关于 CFC域名服务 的部分,理解Endpoint相关概念。 目前CFC支持 “华北-北京”: http://cfc.bj.baidubce.com 、“华南-广州”: http://cfc.gz.baidubce.com 、“华东-苏州”: http://cfc.su.baidubce.com 三个区