标准存储-多 AZ 低频存储 低频存储-多 AZ 其他类型 无法迁移,请在任务失败报告获取文件清单 说明 : AWS 迁移说明:AWS 存储桶不区分多 AZ 和单 AZ。
3. local_address路径请不要修改,保持共享存储路径为/chpcdata/。如更改可能导致计算节点无法读取网盘下载的文件。 4. local_upload_address上传网盘文件夹名称,请确保和本地文件夹名称一致。
采集端:采集物理机/容器内日志文件的Agent组件,一般一个物理机/容器组内部署一个,由 BCI 负责创建。 传输任务:实际满足用户的日志采集需求,关键参数包含: 采集任务名称、收集器列表、日志文件路径、日志存储端 。传输任务可以由 用户 创建,也可以由 BCI 创建。 使用流程 创建存储产品(存储端) 注:如果已有存储产品,可跳过此步骤。
采集端:采集物理机/容器内日志文件的Agent组件,一般一个物理机/容器组内部署一个,由 BCI 负责创建。 传输任务:实际满足用户的日志采集需求,关键参数包含: 采集任务名称、收集器列表、日志文件路径、日志存储端 。传输任务可以由 用户 创建,也可以由 BCI 创建。 使用流程 创建存储产品(存储端) 注:如果已有存储产品,可跳过此步骤。
通过 local tvf 访问 NAS 上的数据 NAS 共享存储允许同时挂载到多个节点。每个节点都可以像访问本地文件一样访问共享存储中的文件。因此,可以将 NAS 视为本地文件系统,通过 local tvf 进行访问。 当设置 shared_storage = true 时,PALO 会认为所指定的文件可以在任意 BE 节点访问。
前提条件 具有空间管理员权限或其他具备该功能权限的角色。 任务运行需使用任务所在项目绑定的计算资源。 上传文件到数据卷 登录百度智能云 DataBuilder 控制台,在侧边导航选中数据集成模块。 在数据集成tab选择文件采集,单击页面中 上传文件到数据卷 。 将文件夹或多个文件拖到对应区域或者单击 点击上传 按钮后,选择上传文件到对应目录后单击上传按钮,文件开始上传。
选择“源类型”,可选“BOS”或“HTTPS”,如选择BOS时 根据需要选择BOS的Bucket下的文件上传至目标目录 如选择HTTPS时,输入“源路径” 输入需要将文件存储的目标目录,若目录不存在会直接新建。
10 配置容器文件路径 CRD 示例 采集指定 namespace 指定容器内部文件路径 注意:容器内文件路径,如 /usr/local/tomcat/logs/ ,设置完CRD后需要在工作负载中mount emptyDir,具体方法见Tomcat deployment 参考示例 YAML 复制 1 apiVersion: cce.baidubce.com/v1 2 kind: LogConfig
BOS :百度云提供的对象存储服务,支持任何类型的数据存储。Bucket 是存放数据的容器,可看做是存储桶。 BOS 触发器 :BOS 和 CFC 的无缝集成。您可以为各种类型的事件设置处理函数,当 BOS 监控到指定类型的文件、事件后,会自动调用 CFC 函数。
l{false}; // 是否显示所有frame,若为false,仅显示根据skip_frames抽取的frame 15 16 bool enable_save{false}; 17 std::string save_path; // frame存储为视频文件的路径