功能发布记录

MapReduce BMR

  • 发行版本
  • 功能发布记录
  • 产品描述
    • 节点类型说明
    • 产品优势
    • 应用场景
    • 产品功能
    • 产品简介
  • Python-SDK
    • Cluster(集群)
    • BmrClient
    • 异常处理
    • InstanceGroup(实例组)
    • 简介
    • 文档更新记录
    • Step(作业)
    • 版本变更记录
    • Instance(实例)
    • 快速入门
    • 安装SDK工具包
  • 开源组件介绍
    • Impala
    • Pig
    • Druid
    • Presto
    • Hue
    • Ooize
    • HBase
    • Kudu
    • Sqoop
    • Hadoop-Streaming
    • Zeppelin
    • Alluxio
    • Kerberos
      • 集群互信配置
      • 概述
    • ClickHouse
      • 常见问题
      • 数据迁移同步
        • 从Spark导入
        • 从Kafka同步数据
        • 将自建ClickHouse数据迁移到云ClickHouse中
        • 从Flink导入
        • 从MySQL导入和同步
        • 从本地数据导入
          • Parquet格式
          • JSON
          • SQL转储
          • CSV and TSV
      • 快速入门
        • 访问模式
        • 客户端登录
        • 创建ClickHouse集群
        • 基础操作
      • 运维相关操作
        • ClickHouse集群扩容
        • ClickHouse集群缩容
        • 日志配置说明
        • 监控告警配置
    • Ranger
      • ranger概述
      • 权限策略配置
    • Paimon
      • Hive示例
      • StarRocks示例
      • 联合查询示例
      • Flink示例
      • Spark示例
    • Flink
      • 基础使用
    • Trino
      • 基础使用
      • 概述
    • Spark
      • 引擎增强
      • 基础使用
    • Hive
      • 开发指南
        • 自定义函数(UDF)
      • 实践操作
        • Hive迁移
        • Hive操作HBase外表
      • 基础使用
        • Hive基础操作
        • Hive连接方式
  • Java-SDK
    • Cluster(集群)
    • 异常
    • BmrClient
    • InstanceGroup(实例组)
    • 日志
    • 文档更新记录
    • 版本更新记录
    • Step(作业)
    • Instance(实例)
    • 快速入门
    • 安装SDK工具包
    • 概述
  • 快速入门
    • 操作流程概览
    • 环境准备
    • 创建集群
    • 数据准备
    • 开发作业
    • 查看结果
    • ClickHouse
      • 导入数据
      • 创建数据库
      • 连接集群
      • 创建表
  • 操作指南
    • 集群模板
    • 服务管理
    • 集群配置
      • 用户管理
      • 弹性伸缩
      • 创建集群
      • 集群安全模式
      • EIP
      • Hive元数据说明
      • 集群审计
      • 配置已有集群
      • 安全组
    • 管理作业
      • 创建作业
      • 诊断、调优
      • 定时任务
      • 查看作业
    • 访问集群
      • 访问集群服务页面
      • 访问集群-openVPN访问集群
      • 使用OpenVPN提交Hadoop作业
      • SSH连接到集群
    • 实践操作
      • 存储数据至HBase
      • 导入数据
      • 编译Maven项目
      • Sqoop导入导出数据
        • 导出数据
    • 权限管理
      • 多用户访问控制
      • 用户管理
    • 集群管理
      • 节点管理
      • 监控报警
      • 集群指标
      • 资源管理
  • 服务等级协议SLA
    • BMR服务等级协议SLA
  • API参考
    • 通用说明
    • 公共头
    • 数据类型
    • 版本更新记录
    • 服务域名
    • 实例操作接口
    • 实例组操作接口
    • 集群操作接口
    • API简介
    • 错误码
  • 常见问题
    • 安全性问题
    • 计费类问题
    • 常见问题总览
    • 性能类问题
    • 配置类问题
    • 故障类问题
  • 视频专区
    • 操作指南
    • 产品介绍
  • 场景教程
    • 流式应用场景
    • 离线应用场景
    • 使用Hive分析网站日志
    • Sqoop应用文档
    • 定时分析日志数据
    • HIVE
      • 不同集群的 Hive 迁移方案
      • Hive 操作 Hbase 外部表
  • 产品定价
    • 转换计费方式
    • 计费项
    • 到期或欠费说明
    • 包年包月计费
    • 续费说明
    • 变更配置计费说明
    • 计费方式
    • 按需计费
    • 账单和用量查询
    • 退款说明
所有文档
menu
没有找到结果,请重新输入

MapReduce BMR

  • 发行版本
  • 功能发布记录
  • 产品描述
    • 节点类型说明
    • 产品优势
    • 应用场景
    • 产品功能
    • 产品简介
  • Python-SDK
    • Cluster(集群)
    • BmrClient
    • 异常处理
    • InstanceGroup(实例组)
    • 简介
    • 文档更新记录
    • Step(作业)
    • 版本变更记录
    • Instance(实例)
    • 快速入门
    • 安装SDK工具包
  • 开源组件介绍
    • Impala
    • Pig
    • Druid
    • Presto
    • Hue
    • Ooize
    • HBase
    • Kudu
    • Sqoop
    • Hadoop-Streaming
    • Zeppelin
    • Alluxio
    • Kerberos
      • 集群互信配置
      • 概述
    • ClickHouse
      • 常见问题
      • 数据迁移同步
        • 从Spark导入
        • 从Kafka同步数据
        • 将自建ClickHouse数据迁移到云ClickHouse中
        • 从Flink导入
        • 从MySQL导入和同步
        • 从本地数据导入
          • Parquet格式
          • JSON
          • SQL转储
          • CSV and TSV
      • 快速入门
        • 访问模式
        • 客户端登录
        • 创建ClickHouse集群
        • 基础操作
      • 运维相关操作
        • ClickHouse集群扩容
        • ClickHouse集群缩容
        • 日志配置说明
        • 监控告警配置
    • Ranger
      • ranger概述
      • 权限策略配置
    • Paimon
      • Hive示例
      • StarRocks示例
      • 联合查询示例
      • Flink示例
      • Spark示例
    • Flink
      • 基础使用
    • Trino
      • 基础使用
      • 概述
    • Spark
      • 引擎增强
      • 基础使用
    • Hive
      • 开发指南
        • 自定义函数(UDF)
      • 实践操作
        • Hive迁移
        • Hive操作HBase外表
      • 基础使用
        • Hive基础操作
        • Hive连接方式
  • Java-SDK
    • Cluster(集群)
    • 异常
    • BmrClient
    • InstanceGroup(实例组)
    • 日志
    • 文档更新记录
    • 版本更新记录
    • Step(作业)
    • Instance(实例)
    • 快速入门
    • 安装SDK工具包
    • 概述
  • 快速入门
    • 操作流程概览
    • 环境准备
    • 创建集群
    • 数据准备
    • 开发作业
    • 查看结果
    • ClickHouse
      • 导入数据
      • 创建数据库
      • 连接集群
      • 创建表
  • 操作指南
    • 集群模板
    • 服务管理
    • 集群配置
      • 用户管理
      • 弹性伸缩
      • 创建集群
      • 集群安全模式
      • EIP
      • Hive元数据说明
      • 集群审计
      • 配置已有集群
      • 安全组
    • 管理作业
      • 创建作业
      • 诊断、调优
      • 定时任务
      • 查看作业
    • 访问集群
      • 访问集群服务页面
      • 访问集群-openVPN访问集群
      • 使用OpenVPN提交Hadoop作业
      • SSH连接到集群
    • 实践操作
      • 存储数据至HBase
      • 导入数据
      • 编译Maven项目
      • Sqoop导入导出数据
        • 导出数据
    • 权限管理
      • 多用户访问控制
      • 用户管理
    • 集群管理
      • 节点管理
      • 监控报警
      • 集群指标
      • 资源管理
  • 服务等级协议SLA
    • BMR服务等级协议SLA
  • API参考
    • 通用说明
    • 公共头
    • 数据类型
    • 版本更新记录
    • 服务域名
    • 实例操作接口
    • 实例组操作接口
    • 集群操作接口
    • API简介
    • 错误码
  • 常见问题
    • 安全性问题
    • 计费类问题
    • 常见问题总览
    • 性能类问题
    • 配置类问题
    • 故障类问题
  • 视频专区
    • 操作指南
    • 产品介绍
  • 场景教程
    • 流式应用场景
    • 离线应用场景
    • 使用Hive分析网站日志
    • Sqoop应用文档
    • 定时分析日志数据
    • HIVE
      • 不同集群的 Hive 迁移方案
      • Hive 操作 Hbase 外部表
  • 产品定价
    • 转换计费方式
    • 计费项
    • 到期或欠费说明
    • 包年包月计费
    • 续费说明
    • 变更配置计费说明
    • 计费方式
    • 按需计费
    • 账单和用量查询
    • 退款说明
  • 文档中心
  • arrow
  • MapReduceBMR
  • arrow
  • 功能发布记录

功能发布记录

更新时间:2025-08-21
发布时间 功能概述
2025-04
  • 下线上海区域。
  • 2025-01
  • 发布BMR 3.6.0,集成Paimon,升级Ranger、Flink等组件。
  • 2024-11
  • 发布 BMR 3.5.0,支持 Hadoop-存算分离集群,降低存储成本。
  • 发布节点管理功能,支持缩容,提升运维灵活性。
  • 2022-12
  • 上线Infinite_spark集群类型,发布BMR Impala Infinite_spark 3.2.2镜像,集成Infinite_spark和remote_shuffle组件,Infinite_spark在开源spark框架的基础上进行优化,离线计算速度提升30%,remote_shuffle开启后提升大规模离线计算场景稳定性,镜像组件版本:infinite_spark 3.2.2、hive 3.1.3、tez 0.10.1、hdfs 3.2.3、yarn 3.2.3、mapreduce2 3.2.3、zookeeper 3.4.6、ldap 2.4.48、remote_shuffle 4.1.0、rapidfs 1.0.0.1。
  • 发布BMR 2.3.3镜像版本,hive、hue组件支持中文。
  • 2022-10
  • 上线Impala集群类型,发布BMR Impala 2.12.0镜像,支持impala 2.12.0、kudu 1.10.0。
  • 上线全托管集群、半托管集群两种托管方式,支持用户在创建集群时根据需要选择不同托管方式。
  • 发布BMR 3.2.1镜像版本,在3.2.0镜像基础上,升级hudi版本为1.11.0。
  • 发布BMR 2.3.2镜像版本,在BMR 2.3.1镜像基础上新增hudu 0.11.0。
  • 2022-09
  • 上线服务管理模块,支持用户在控制台统一管理集群,包括服务组件的启停、重启以及组件参数配置,并支持查看启停操作以及配置变更操作相关记录。
  • 发布BMR 3.2.0镜像版本,在BMR 3.1.0镜像基础上新增Rapidfs 1.0.01。
  • 2022-08
  • BMR更新高可用架构,由2Master调整为3Master结构,提供更加稳定和高可用的大数据集群管控服务。
  • 发布BMR 3.1.0镜像版本,集成百度侧优化改造后的spark引擎,支持spark 3.2.0。
  • 2022-07
  • BMR发布全新BMR1.6.0版本,支持Hadoop 2.8.5、Spark 2.4.8、Hive 2.3.9等版本。
  • 支持删除已释放集群和修改标签和批量编辑标签功能。
  • 默认不再开启dns解析按钮。
  • 提供集群名称、实例ID、作业ID等复制功能。
  • 修复BMR 3.0.0镜像选中spark后不关联hive的问题。
  • 2022-06
  • BMR发布全新BMR3.0.0版本,升级Hadoop为3.2.3,Spark为3.2.0,Hive 3.1.3,Tez 0.10.1,Flink 1.13.6,新增Hudi 0.10.1。
  • 2022-05
  • BMR 发布 BMR 2.3.1版本,升级Impala版本为3.4.0,Kudu版本为1.14.0。
  • 2022-04
  • BMR 发布 BMR HBase 2.2.1版本,支持HBase on BOS 读写分离集群功能,详情见HBase组件介绍。
  • 2022-04
  • BMR 发布 BMR Kafka 2.7.2 版本,同时对副本同步参数进行了调整。
  • num.replica.fetchers=12
  • replica.fetch.max.bytes=5242880
  • replica.fetch.wait.max.ms=300
  • 2022-03
  • BMR 发布 BMR 2.3.0 镜像,支持Ooize 5.1.0与Hue 4.8.0。
  • 2021-11
  • BMR 发布 BMR 2.2.2 镜像,支持Flink 1.12.4版本。
  • 2021-09
  • BMR支持用户对Master、Core、Task、Client节点主动绑定和解绑EIP。
  • 2021-08
  • BMR 更新Hbase版本为Hbase 2.2.7版本,Hbase集群模板发布新版本:BMR HBASE 2.2.0。
  • BMR ClickHouse 模板发布新版本:BMR Clickhouse 21.8.3,同时支持ClickHouse 高可用版本。
  • BMR 监控大盘新增Hbase监控,支持Hbase表级数据趋势监控和告警。
  • 2021-04
  • BMR 2.2.0 版本新增组件kudu
  • BMR 新版安全组上线,支持用户新建集群时绑定用户自己的安全组,并且支持新建集群的安全组在VPC安全组中控制安全组规则
  • BMR 上线集群标签功能,支持用户在创建时为集群添加标签,方便用户区分和管理集群,同时用户可以在云上标签管理中绑定和解绑BMR集群资源
  • 2021-03
  • BMR在苏州、上海Region 上线BMR 1.6.0 版本 支持hadoop2.8.5版本,同时适配了spark、hive、hbase、hue等组件
  • 2021-02
    • BMR 新增监控运维大盘,提供集群仪表盘和集群监控、主机监控和服务监控,支持查看主机层监控详情和主机层面的指标筛选功能
    • Flink 升级版本至1.11.2
    • BMR上线 BMR 2.2.0 版本,支持hadoop 3.1 版本,同时适配升级了其他组件
    • BMR Kafka上线BMR Kafka 1.0.1,BMR Kafka 1.1.0,BMR Kafka 2.0.1和BMR Kafka 2.5.1多个版本
    2021-01
    • BMR 上线 2.0.0 版本 支持hadoop 3.1 版本
    • BMR 上线 1.4.0 版本 支持hadoop 2.7.1 版本,同时适配presto、azkaban、hive、spark等组件
    • BMR 上线 1.2.0 版本 支持hadoop 2.7.1 版本
    2020-12 BMR 发布独立模板 ClickHouse,多用于联机分析(OLAP)场景,可提供海量数据的存储和分析,版本 BMR ClickHouse 1.0.0,ClickHouse版本为20.5.3.27
    2020-04 上线计费变更功能,支持预付费与后付费集群互转
    2020-03 上线配置变更功能,可以对一个正在运行的集群,对虚机的cpu和内存规格进行调整
    2020-01 上线2.1.0镜像,新增kafka组件,spark版本升级到2.4.2
    2019-12 新增Flink、Impala、Druid组件
    2019-11 上线弹性伸缩功能,可以自动调整task节点规模
    2019-10 在创建集群时,新增client节点类型,可以作为独立的集群管控节点及作业提交节点,可以提高集群的稳定性及安全性。
    2019-09 在创建集群时,支持将BOS的bucket作为Hbase的deepstorage。提供数据存储可靠性及使用灵活性
    2019-06 新增BMR节点并更新价格
    2019-05 提供Java SDK实现创建管理集群、实例、实例组及作业等功能
    2019-04 新增Scala场景教程。以使用Scala为例介绍数据计算过程通过BMR的Spark Streaming连接百度消息服务
    2018-12
    • 提供备用节点,提供集群的高可用性
    • BMR从1.0.0版本开始支持创建安全类型的集群,即集群中的开源组件以Kerberos的安全模式启动,在这种安全环境下只有经过认证的客户端才能访问集群中的服务(如HDFS,HIVE 等)
    • 接入IAM主子账户鉴权,细化用户权限颗粒度,便于根据业务需要为不同职责的用户分配不同的权限
    • 新增Hadoop集群管理系统。Hadoop Manger是BMR产品为用户提供的细粒度hadoop管理平台,提供集群监控、服务管理、hadoop多租户管理功能
    2018-11
    • 新增支持集群安全模式,提供备用节点,提供集群的高可用性
    • 支持多用户访问控制。用户访问控制实现了企业或组织内部不同人员乃至不同部门协同地管理和使用BMR资源的功能。在BMR中,我们将集群和定时任务视为资源。协同工作的方式是主用户需要创建子用户,并为子用户分配访问策略

    上一篇
    发行版本
    下一篇
    产品描述