百度MapReduce BMR

    BmrClient

    新建BmrClient

    BmrClient是BMR服务的Java客户端,为调用者与BMR服务进行交互提供一系列的方法。

    用户可以参考如下代码新建一个BmrClient:

    public class Sample {
        public static void main(String[] args) {
            String ACCESS_KEY_ID = "your-access-key-id";                   // 用户的Access Key ID
            String SECRET_ACCESS_KEY = "your-secret-access-key";           // 用户的Secret Access Key
    
            // 初始化一个BmrClient
            BceClientConfiguration config = new BceClientConfiguration();
            config.setCredentials(new DefaultBceCredentials(ACCESS_KEY_ID, SECRET_ACCESS_KEY));
            BmrClient client = new BmrClient(config);
        }
    }

    在上面代码中,变量ACCESS_KEY_IDSECRET_ACCESS_KEY是由系统分配给用户的,均为 字符串,用于标识用户,为访问BMR做签名验证。其中ACCESS_KEY_ID对应控制台中的“Ac cess Key ID”,SECRET_ACCESS_KEY对应控制台中的“Access Key Secret”,获取方式 请参考《管理ACCESSKEY》。

    上面的方式使用默认域名作为BMR的服务地址,可能出现不能访问的情况。目前BMR产品使用独占服务地址,用户可以通过传入endpoint参数来指定。

    String ACCESS_KEY_ID = "your-access-key-id";                   // 用户的Access Key ID
    String SECRET_ACCESS_KEY = "your-secret-access-key";           // 用户的Secret Access Key
    String ENDPOINT = "http://bmr.bj.baidubce.com";                // 用户指定BMR的服务域名
    
    BceClientConfiguration config = new BceClientConfiguration();
    config.setCredentials(new DefaultBceCredentials(ACCESS_KEY_ID,SECRET_ACCESS_KEY));
    config.setEndpoint(ENDPOINT);
    BmrClient client = new BmrClient(config);

    注意:ENDPOINT参数只能用指定的包含Region的域名来进行定义,目前开放了BMR SDK服务的区域是“华北-北京”和“华南-广州”,北京Region的endpoint的域名是http://bmr.bj.baidubce.com,广州Region的endpoint的域名是http://bmr.gz.baidubce.com

    配置BmrClient

    如果用户需要配置BmrClient的一些细节的参数,可以在构造BmrClient的时候传入BceClientConfiguration对象。 BceClientConfiguration是BMR服务的配置类,可以为客户端配置代理,最大连接数等参数。

    使用代理

    下面一段代码可以让客户端使用代理访问BMR服务:

    String ACCESS_KEY_ID = "your-access-key-id";                   // 用户的Access Key ID
    String SECRET_ACCESS_KEY = "your-secret-access-key";           // 用户的Secret Access Key
    String ENDPOINT = "domain-name";                               // 用户自己指定的域名
    
    // 创建BceClientConfiguration实例
    BceClientConfiguration config = new BceClientConfiguration();
    
    // 配置代理为本地8080端口
    config.setProxyHost("127.0.0.1");
    config.setProxyPort(8080);
    
    // 配置认证秘钥和服务器信息
    config.setCredentials(new DefaultBceCredentials(ACCESS_KEY_ID,SECRET_ACCESS_KEY));
    config.setEndpoint(ENDPOINT);
    
    // 创建BMR客户端
    BmrClient client = new BmrClient(config);

    使用上面的代码段,客户端的所有操作都会通过127.0.0.1地址的8080端口做代理执行。

    对于有用户验证的代理,可以通过下面的代码段配置用户名和密码:

    // 创建BceClientConfiguration实例
    BceClientConfiguration config = new BceClientConfiguration();
    
    // 配置代理为本地8080端口
    config.setProxyHost("127.0.0.1");
    config.setProxyPort(8080);
    
    //设置用户名和密码
    config.setProxyUsername("username");
    config.setProxyPassword("password");

    设置网络参数

    用户可以用BceClientConfiguration对基本网络参数进行设置:

    BceClientConfiguration config = new BceClientConfiguration();
    
    // 设置HTTP最大连接数为10
    config.setMaxConnections(10);
    
    // 设置TCP连接超时为5000毫秒
    config.setConnectionTimeout(5000);
    
    // 设置Socket传输数据超时的时间为2000毫秒
    config.setSocketTimeout(2000);

    BceClientConfiguration参数说明

    通过BceClientConfiguration能指定的所有参数如下表所示:

    参数 说明
    UserAgent 用户代理,指HTTP的User-Agent头
    Protocol 连接协议类型
    ProxyDomain 访问NTLM验证的代理服务器的Windows域名
    ProxyHost 代理服务器主机地址
    ProxyPort 代理服务器端口
    ProxyUsername 代理服务器验证的用户名
    ProxyPassword 代理服务器验证的密码
    ProxyPreemptiveAuthenticationEnabled 是否设置用户代理认证
    ProxyWorkstation NTLM代理服务器的Windows工作站名称
    LocalAddress 本地地址
    ConnectionTimeoutInMillis 建立连接的超时时间(单位:毫秒)
    SocketTimeoutInMillis 通过打开的连接传输数据的超时时间(单位:毫秒)
    MaxConnections 允许打开的最大HTTP连接数
    RetryPolicy 连接重试策略
    SocketBufferSizeInBytes Socket缓冲区大小
    一篇
    日志
    一篇
    异常