海量数据稳定存储,数据统计分析,方便快捷的查询以及高昂运维成本成了作业帮最为头疼的问题。 解决方案 面对每天由用户产生的海量应用数据和行为数据,作业帮首先使用百度日志服务BLS从服务器收集数据。百度日志服务是百度智能云提供的托管式日志收集、投递服务,提供了以下特性: 提供托管式服务模式,无需开发与运维投入,一次部署即可轻松使用。 可灵活配置日志任务,轻量级架构不影响主机性能。
业务形态扩展 支持单节点缓存架构和双节点存储架构,适配不同业务场景。标准版和双节点版之间能够灵活变配。 性能扩展 支持集群架构下弹性扩展数据库系统的存储空间及吞吐性能,突破海量数据高 QPS 性能瓶颈,轻松应对每秒百万次的读写需求。 智能运维 监控平台 提供 CPU 利用率、连接数、磁盘空间利用率等实例信息实时监控及报警,随时随地了解实例动态。
产品架构 云高性能计算产品架构示意图如下: 基础设施管理人员通过公网访问CHPC的控制台或者OpenAPi来统一使用CHPC服务。CHPC集群部署在用户的私有网络中,可支持扩展不同可用区或子网的计算节点,这些计算节点可配置访问共享存储空间,即文件存储产品。业务人员可通过公网或者云上跳转机访问集群的登录节点提交作业,作业的文件输入及输出可存储在云上对象存储或者百度网盘中。
了解详情 对象存储BOS 提供稳定、安全、高效、高可扩展的云存储服务。您可以将任意数量和形式的非结构化数据存入BOS,并对数据进行管理和处理。BOS支持标准、低频、冷和归档存储等多种存储类型,满足多场景的存储需求。
速解决您的问题 专家咨询 分享案例 扫一扫 即刻分享精彩案例 复制链接 下载二维码 相关案例 更多行业 专属云 全球最大中文社区为兴趣而生 百度智能云多媒体服务为贴吧提供了一整套完整的媒体资源处理覆盖全生命周期管理的技术架构,涵盖直播、录播、媒体存储、媒体分发、媒体内容分析与审核等等
架构优化: 流日志可采集网卡流量,帮助提升数据驱动的网络运维能力,合理优化网络架构,比如分析历史网络数据,构建业务网络基准;及时发现性能瓶颈,合理扩容或流量降级;分析访问用户地域,合理拓展业务覆盖域;分析网络流量,优化网络安全策略。
架构优化: 流日志可采集网卡流量,帮助提升数据驱动的网络运维能力,合理优化网络架构,比如分析历史网络数据,构建业务网络基准;及时发现性能瓶颈,合理扩容或流量降级;分析访问用户地域,合理拓展业务覆盖域;分析网络流量,优化网络安全策略。
新特性:架构灵活性与模型拓展 MongoDB 5.0 带来了里程碑式的架构升级,重点解决了分片键选择的难题,并原生拓展了时序数据处理能力。 核心架构:在线重分片(Resharding) 内核原生支持了 在线重新分片(Resharding) ,允许用户在业务运行期间更改集合的分片键。这彻底解决了因早期分片键设计失误导致的数据倾斜或扩展瓶颈问题,且无需停机迁移数据。
架构概览 - 行业应用 - AI通用产品 - AI大底座 AI PaaS - AI大底座 AI IaaS - 基础云 03. 产业实践 04.
废除与限制项 为了降低内核复杂度并明确事务生态的演进方向,MongoDB 4.0 对遗留架构进行了果断清理。 遗留存储与架构清理 传统的 Master-Slave 复制模型 与 Replica Set Protocol v0 被彻底移除,集群高可用架构实现了标准化收敛。