高传输性能 使用高规格服务器来保证每条迁移同步链路都能拥有良好的传输性能;数据传输服务底层使用了多种性能优化措施,全量数据迁移高峰期时性能可以达到30MB/s,10w TPS。 高可靠性 链路稳定性高达99.9%; 数据传输服务底层为服务集群,集群内任何一个节点宕机或发生故障,控制中心都能够将该节点上的所有任务秒级切换到其他节点上。
本地计算集群LCC 本地计算集群LCC是基于计算、存储、网络公有云产品,将底层设备与云组件、软件一体化交付到客户数据中心,兼具本地IDC部署与公有云特性的云服务产品。用户在本地即可获得等同于公有云环境的基础设施。
应用场景 日志分析 数据仓储 场景概述 网站日志包含着网站最重要的信息,通过日志分析网站,可帮助您获取用户行为以优化网站的商业价值,而日益增长的日志信息需大规模处理平台的支撑。 我们能提供 将海量日志同步到MapRedue的数据节点后,通过MapReduce全托Hadoop服务高效处理海量网站日志。 根据日志分析场景可视化设置索引字段,SQL语法自由进行日志分析。
产品功能 资源共享 同地域/跨地域的数据同步 对等连接支持云上不同VPC间网络的资源共享,帮您轻松构建云上两地三中心。 支持5G带宽 基于HA,自动故障切换及恢复,实现高可靠。 跨账号互通 网络互通 对等连接支持不同账号间的网络互通。 流量互通 过在两端配置路由策略,实现与其他企业、服务商的私有网络的流量互通。
元数据管理 基于物理表、映射表管理各类型数据源系统数据进行统一元数据管理,数据高效查找。 数据集成 离线数据同步 数据库、MPP数仓、Nosql、对象存储、HDFS分布式文件系统等异构数据源的定时、周期性同步。 实时流采集 支持http ,kafka 实时流数据同步到 DB、MPP数仓、Nosql、对象存储、HDFS分布式文件系统等数据源。
数据流转平台 数据流转平台(Cloud Flow)为用户提供安全、高效、便捷的数据传输服务,支持将对象存储从不同的设备、不同云服务商同步和迁移到百度智能云对象存储 BOS。Cloud Flow提供在线与离线迁移两种模式,解决大规模数据迁移安全、效率等问题。
弹性扩展 数据容量扩展 根据业务规模,支持多种内存规格的产品变更配置。 业务形态扩展 支持单节点缓存架构和双节点存储架构,适配不同业务场景。 性能扩展 支持集群架构下弹性扩展数据库系统的存储空间及吞吐性能。 可用性强 自动检测与恢复 自动侦测故障,及时迁移,数秒内恢复线上业务。 异地多活 多地域数据同步,数据一致性高,主从故障自动切换。
消息服务 for Kafka 全兼容Apache Kafka的分布式、高可扩展、高通量的消息托管服务,您可以直接享用Kafka带来的先进功能而无需考虑集群运维,并按照使用量付费。即时插拔的方式,让您用最低的成本,享受最优质的消息服务。
稳 超大规模集群保障能力 业界首发BCCL、大规模快速重调度和任务初始化、故障容错能力迁移到国产芯,保障集群稳定性。 立即使用 03. 省 百舸综合产品力 对应整个大模型业务的生命周期,快速部署验证,产品更易用、更强大,为客户省成本、省资源、省时间。 立即使用 04. 多芯混训 规模化应用阶段 产品全面适配多芯,支持多种异构芯片混训,为规模化应用提供安全稳定、利用率高的训练集群。
应用场景 流量突增型业务 数据批处理任务 场景概述 业务波峰波谷明显,高峰期流量突增需要及时扩容支撑业务,平时流量稳定时大量资源闲置浪费,如电商、直播、在线教育等场景。