ELK 全新升级,支持热温冷数据分级存储 & 滚动升级 & 自动扩容等高级特性

ELK 是 Elasticsearch 、 Kibana 和 Logstash 这三个软件集合的简称, Elasticsearch 是一个实时分布式搜索和分析引擎, Kibana 则为 Elasticsearch提供了强大的可视化界面, Logstash 为用户提供数据采集、转换、优化和输出的能力。 ELK 目前被广泛应用于实时日志处理、全文搜索和数据分析等领域。

ELK on QingCloud 将 Elasticsearch 、Kibana 和 Logstash 集成到同一个集群服务中,以AppCenter 云应用的形式交付给用户使用。为帮助用户更高效便捷的使用 ELK 服务,本次升级包括更新如下:

ELK on QingCloud:立即使用→
  • 支持 Elasticsearch 5.6.16 及 6.8.0 版本
  • 支持 Region 跨多可用区部署同城多活架构
  • 支持 Elasticsearch 多主节点架构,保障集群高可用
  • 支持 Elasticsearch VIP
  • 支持自动感知多可用区并分配副本
  • 支持数据节点热温冷(Hot-Warm-Cold)架构
  • 支持单节点最大 50T 硬盘容量
  • 支持硬盘容量自动扩容
  • 可删除 Elasticsearch 热节点,硬盘容量重新分配
  • Elasticsearch 数据节点支持同时挂载三块硬盘,提升读写吞吐
  • 支持 Elasticsearch 节点滚动升级,最小化对业务的影响
  • 支持自助生成和清理 Heap Dump 文件

更多详细使用指南请参考:ELK on QingCloud 用户指南

Kakfa on QingCloud 支持 Region 跨可用区多活

为帮助用户便捷地构建高可用的业务架构,青云对 AppCenter上 Kafka 进行了升级,用户可以在 Region 内实现跨可用区部署,实现系统架构的多可用区部署,构建多活及灾备业务架构。本次更新包括如下:

Kafka on QingCloud:立即使用→
  • 新增支持 Region 多可用区,同城多活
  • 优化健康检查,防止 JVM 假阴性
  • 优化数据清理参数,节省硬盘空间
  • 加强集群操作稳定性
  • 关闭 OpenSSH 服务提高安全性
  • 最大文件打开数 Max Open Files 增加到 500000
  • 开启 JVM Heap Dump 及新增日志文件查看器以更高效定位问题

更多详细使用指南请参考:Kafka on QingCloud 用户指南

分布式数据库 RadonDB 全面升级,支持分布式 Join及跨可用区高可用等重要特性

青云 QingCloud RadonDB 是基于 MySQL 研发的新一代分布式关系型数据库,1.0.6 版本新增了许多重要功能特性,并修复若干 BUG ,具体新增功能如下:

RadonDB立即使用→

1. MySQL内核升级至 5.7.25-28

2. 新增分布式Join、full-text index、prepare语句、checksum table、SINGLE 表等功能

3. 支持在Region(多可用区,同城多活)区域部署

4. 新增集群一键rebalance功能

5. 关闭FTP匿名访问,只允许指定用户访问

6. 支持database级租户隔离

7. 支持重建指定的存储节点

MongoDB 升级至 4.0.3 版本并支持超大容量 NeonSAN 型存储

MongoDB 是一个开源的文档型数据库,具有高性能、高可用等优点。MongoDB on QingCloud 提供的是原生 MongoDB Replication 云服务,提供冗余并增加了数据的高可用性。此次升级包含内容如下:

  • 采用 MongoDB 4.0.3 版本构建
  • 基于 WiredTiger 引擎
  • 默认三个节点,最大支持七个节点
  • 支持集群节点的横向伸缩和纵向扩容
  • 支持数据备份– 支持版本升级
  • 支持 NeonSAN 型存储,单盘最高可达 50 TB
  • 修改 FTP 服务为 Caddy 服务,支持用户名和密码
  • 添加配置参数项

MongoDB on QingCloud:立即使用→

更多详细使用指南请参考:MongoDB 用户指南

QingMR 支持NeonSAN、支持 BigDL深度学习框架

青云 QingCloud 大数据相关服务将会统一在 QingMR 下。 QingMR 目前已经集成了:分布式文件系统 HDFS、集群资源管理系统 YARN、数据处理框架 Hadoop MapReduceSpark、数据仓库工具 Hive 、极速海量数据 OLAP 分析引擎 Kylin,为更好的满足用户对大数据产品更多的需求,本次对核心组件进行了版本升级,新增对基于 Spark 的分布式深度学习框架 BigDL 的支持,具体更新如下::

QingMR 2.0 – Core立即使用→

  • Hadoop 版本升级到 2.9.2 ;
  • Spark 版本升级到 2.2.3 ;
  • Hive 版本升级到 2.3.5 ;
  • 新增 Hadoop, Spark 和 Hive 对 lzo 压缩的支持;
  • 新增对基于 Spark 的分布式深度学习框架 BigDL 的支持;
  • 新增 NeonSAN 超高性能大容量存储的支持,单节点最高容量可达 50 TB。
  • 新增 Spark 作为 Hive 的默认执行引擎即 Hive on Spark,同时支持用户切换到传统的 MapReduce 引擎。
  • 新增多个 Hive 调优配置参数。
  • 新增 Hive 通过 beeline 执行 HQL 使用指南。
  • 新增 HiveServer2 WEB UI 使用指南。

RabbitMQ on QingCloud 支持 Region 多可用区部署

为帮助用户便捷地构建高可用的业务架构,青云对 AppCenter上 RabbitMQ 进行了升级,用户可以在 Region 内实现跨可用区部署,实现系统架构的多可用区部署,构建多活及灾备业务架构。本次更新包括如下:

RabbitMQ on QingCloud:立即使用→
  • 新增 Region 跨区部署功能,实现同城多活,增强业务容灾能力;
  • 修复 VIP 偶尔丢失的问题;

PostgreSQL V1.0.10版本 Release Notes

PostgreSQL立即使用→)为了提高产品稳定性,同时增强用户体验,在 V1.0.10 版本中,修复了之前版本的一些bug,并新增了多项服务,具体情况如下:

PG9.6-高可用版-V1.0.10

  • 磁盘扩容最大支持2T

  • 增加zh_CN.UTF-8支持
  • 支持TimescaleDB
  • 修复从备份恢复集群从库启动失败问题
  • 增强自动化运维能力
  • 支持wal2json插件

PG10-高可用版-V1.0.10

  • 增强自动化运维能力
  • 支持wal2json插件

高性能列式数据库 ClickHouse on QingCloud 上线

ClickHouse 是一款高性能的、面向联机分析处理(OLAP)的、开源的、列式数据库,ClickHouse on QingCloud 是云化版本的 ClickHouse 集群应用。立即使用→

 

ClickHouse on QingCloud 的主要功能:

  • 兼容目前 ClickHouse 所有支持的数据引擎;
  • 支持横向增加节点、集群节点升降配置等弹性功能;
  • 提供集群内数据重分布等高级集群管理功能;
  • 您可以像单节点一样使用、管理整个云端集群。

MySQL Plus 支持创建高级权限账户及开启更多调优参数等

MySQL Plus 为了增加用户体验,在 1.5.2 版本中,新增了多项服务,并同时提供标准版和对企业级分布式 SAN—NeonSAN 支持的两种版本,其中NeonSAN 版本中每个节点的硬盘容量可支持最高 50 TB,具体新增功能如下:

MySQL Plus立即使用→

  • 支持创建高级权限账户,并展示用户权限类型;

  • 支持指定同步日志月数

  • 控制台新增 MySQL 参数 binlog_cache_size、binlog_stmt_cache_size

  • MySQL 内核升级至 5.7.25-28