示例参考 ,如需要自定义,可以在训练代码中指定 TRAINING_CONFIG 文件即可 模型权重& tokenizer准备 百舸平台已经在对象存储BOS中预置模型权重,您可以从对应地域的BOS路径中下载数据。
l{false}; // 是否显示所有frame,若为false,仅显示根据skip_frames抽取的frame 15 16 bool enable_save{false}; 17 std::string save_path; // frame存储为视频文件的路径
在本案例中,我们勾选“根据时间聚合”,注意选择源日志文件的时间戳为yyyyMMdd,这是跟我们服务器上日志文件名中的时间戳正则匹配的,BLS收集器将根据这个正则去匹配日志文件名,从而得到改日志文件对应的时间数据。然后,我们选择“用户自定义”,这里是配置具体的聚合路径,我们填入配置“%Y%m%d”,也就是把BOS目的端路径配置为bos://nginx-logs/%Y%m%d/。
异常数据配置 如果系统内置规则支持异常数据保存输出,则显示该配置项 配置项 说明 生成异常数据 开启或关闭生成异常数据按钮, 异常数据量 存储的异常数据条数,可选全部或填写指定条数。 存储位置 输入异常数据存储路径,支持将异常数据写入到CSV文件,文件路径示例:存储位置/运行记录ID/规则名称.csv,请确保选择的存储位置有写入权限。
用户发送视频请求至APP Server,APP Server根据用户请求信息检索业务数据库,将与用户终端类型相匹配的视频资源存储路径发送给用户。 用户到BOS上指定的路径上获取视频文件,BOS将视频文件推送给用户。同时可以在方案中引入CDN,提升视频资源的分发效率,保障用户体验。
NFS: NFS数据卷将网络文件系统挂载到容器组中,提供持久化存储,Server地址需要与容器组在相同VPC或者公网可访问,建议搭配百度云文件服务CFS使用。 EmptyDir: EmptyDir提供一个容器组内所有容器均能访问的共享路径,将容器组被删除后,EmptyDir上的数据也会被一并删除,适用于容器组运行时的临时数据。
查看训练结果 训练结果保存在$WORK_DIR下,包含训练日志以及模型权重文件,使用其他保存路径可以修改环境变量$WORK_DIR。
AdditionalFile数据结构 参数名 参数类型 是否必须 参数描述 remote String 否 远程文件 local String 否 本地文件 作业描述 Streaming作业的properties定义如下: 参数名 参数类型 是否必须 参数描述 input String 是 输入路径 mapper String 是 mapper程序 output String 是 输出路径 arguments
var/lib/baetyl/store/core.db:baetyl-core模块本地kv存储文件 /var/lib/baetyl/object: 大文件下载存储目录 /var/lib/baetyl/host:其他文件 /var/lib/baetyl/run:程序运行目录,程序工作目录就位于改目录下。
不同层级只会展示当前层级创建的分类和上传的文件。 应用级 对于与应用或业务强相关,且不需要共享给其他项目使用的图片资源,建议在应用级进行维护,应用级图片管理的入口为:应用开发 > 应用设置 > 资源管理 > 图片管理。 不同类型的应用支持的应用设置的配置项不完全相同,示例为web应用的应用设置支持的配置项。对于其他类型的应用,入口的路径是一样的。