c hdfs api  内容精选
  • Alluxio - MapReduce BMR_全托管Hadoop/Spark集群

    服务器端 API 翻译转换:Alluxio支持工业界场景的API接口,例如HDFS API, S3 API, FUSE API, REST API。它能够透明地标准客户端接口转换到任何存储接口。Alluxio 负责管理应用程序和文件或对象存储之间的通信,从而消除了对复杂系统进行配置和管理的需求。文件数据可以看起来像对象数据,反之亦然。 创建集群 准备数据,请参考 数据准备 。

    查看更多>>

  • 使用 DistCp 迁移数据至分层命名空间 Bucket 对象存储(BOS)

    bos://bucket/dst 注意:使用 CRC 校验拷贝前后的数据,BOS HDFS 需设置 fs.bos.block.size 和源 HDFS 一致,并开启 fs.bos.crc32c.checksum.enable;仅支持 HDFS 的 dfs.checksum.combine.mode=COMPOSITE_CRC 校验算法。

    查看更多>>

c hdfs api  更多内容