青云QingCloud推出Hadoop集群服务 进一步完善大数据平台

北京,2015年12月22日——

企业级基础云服务商青云QingCloud(qingcloud.com)日前宣布,基于Hadoop的大数据集群服务现已正式推出。该服务包括三大核心组件,即HDFS分布式文件系统、YARN任务调度和集群资源管理系统,以及MapReduce并行计算系统。通过QingCloud Hadoop集群服务,用户能够在2-3分钟内创建一个Hadoop集群,并且可以进行横向和纵向的在线伸缩,极大地降低了Hadoop平台的技术门槛。

 hadoop

青云QingCloud推出Hadoop集群服务

Hadoop是一个针对海量大数据进行存储和处理的分布式开源平台,在大数据领域的应用极为广泛。它使用简洁的MapReduce编程模型分布式处理跨集群的大型数据集,集群规模可以扩展到几千甚至上万。QingCloud Hadoop集群服务采用Master/Slave架构,由三种节点类型构成,即主节点(YARN Resource Manager和HDFS Name Node)、从节点(YARN Node Manager和HDFS Data Node),以及客户端节点(Hadoop Client Node)。用户在客户端节点发起MapReduce任务,通过与HDFS和YARN集群中各节点的交互存取文件、执行MapReduce任务,最终获取结果。

青云QingCloud Hadoop集群架构图

青云QingCloud Hadoop集群架构图

早在2015年8月,青云QingCloud就已推出基于Spark的大数据集群服务,此次Hadoop集群服务的上线是对QingCloud大数据基础平台的有力补充。Hadoop和Spark各有千秋,Hadoop适用于更大规模的离线数据处理,且对系统故障具备天然的抵抗力;Spark更适合做快速的实时数据分析。因此,用户可以根据应用场景的不同,选择灵活的大数据解决方案。

具体而言,青云QingCloud Hadoop集群服务具有以下特性:

  •  一键部署:用户只需要简单的几步操作就能够在2-3分钟内创建出一个Hadoop集群,帮助用户降低Hadoop的技术门槛和开发成本,快速地利用Hadoop展开数据分析工作。
  • 简化运维:大数据平台尤其是Hadoop的运维非常繁琐,QingCloud为用户提供了便捷的运维工具和图形化操作,极大地简化了Hadoop集群的运维和管理工作。
  • 在线伸缩:Hadoop集群服务支持横向和纵向在线伸缩,以满足用户对计算能力和容量的需求。用户可以选择新增或者删除节点进行横向伸缩,也可以根据节点的监测数据随时调整各个节点的配置。
  • 监控告警:QingCloud针对HDFS、YARN和MapReduce提供了丰富的监控信息,还为每个节点资源提供了监控告警服务,包括CPU使用率、内存使用率、硬盘使用率等,以帮助用户更好地管理和维护Hadoop集群。
  • 安全性:Hadoop集群运行于100%二层隔离的私有网络内,结合QingCloud提供的高性能硬盘,在保障高性能的同时兼顾用户的数据安全。

青云QingCloud CTO甘泉(Reno Gan)表示,Hadoop集群服务的推出标志着QingCloud大数据基础平台的进一步完善,结合已经推出的Spark、ZooKeeper、消息队列(Kafka)、Redis、Memcached、MongoDB等服务,QingCloud的大数据平台服务已经能够越来越灵活地满足用户的各种需求,实现用户数据价值的最大化。

青云QingCloud宣布第五次降价 最高降幅达16.7%

北京,2015年12月18日——

企业级基础云服务商青云QingCloud(qingcloud.com)日前宣布,自12月18日零时起下调公有云的部分资源价格,最高降幅达16.7%。这是青云QingCloud公有云正式对外运营以来的第五次降价,也是2015年的第二次降价。

青云QingCloud公有云第五次资费下调

青云QingCloud公有云第五次资费下调

在此次降价范围内的QingCloud公有云区域包括:北京1区(PEK1)、北京2区(PEK2)和广东1区(GD1),即将正式对外运营的北京3区(PEK3)将与降价后的北京2区(PEK2)资费标准保持一致。此次参与降价的云资源主要包括存储服务相关的性能盘、容量盘和备份,以及PaaS服务相关的ZooKeeper服务、Queue队列服务和Spark大数据处理服务。具体降价方案如下:

  • 存储服务相关:
    • 性能盘: 资费下调 9.6%
    • 容量盘: 资费下调9.3%
    •  备份: 资费下调16.7% 
  • PaaS服务相关:
    • ZooKeeper服务: 资费下调12%
    • Queue队列服务: 资费下调12%
    • Spark大数据处理服务: 资费下调4.3%

青云QingCloud CEO 黄允松(Richard Huang)表示,此次降价得益于QingCloud规模效益的进一步提高,以及自营数据中心采用QingCloud超融合一体化设备后带来的单位成本的下降。QingCloud承诺每年至少两次资费下调,最终将IT能力变成像水和电一样廉价便捷的基础资源。

百尺行|青云QingCloud 2016新年发布会邀请函

百尺行|青云QingCloud 2016新年发布会邀请函

2016年1月6日,青云QingCloud 将在新年发布会(报名参加:http://www.qingcloud.com/2016)上宣布开放采用区域多活网络架构的北京3区,并发布全球领先的 QingCloud SDN/NFV 2.0 网络技术。此外,QingCloud还将精选一场电影原声交响音乐会与您共贺新年。

防火墙支持备份、跨区复制;自动伸缩功能升级等

1. 防火墙备份

我们对青云平台上的防火墙规则进行了优化,提供了备份功能,用户可以在防火墙的详情页,随时根据当前的防火墙规则创建一个新的备份点,并且可以随时删除不需要的备份,防火墙备份是免费资源。

snapshot

用户可以随时用一个备份点来回滚防火墙的规则,在回滚之前,可以对比备份点和当前防火墙规则之间的差异,另外,防火墙回滚之后,您需要『应用修改』把规则应用到主机和路由器上才生效。

rollback

2. 防火墙与 SSH 密钥复制

我们提供了防火墙与 SSH 密钥的复制功能(跨区),您可以在防火墙或者 SSH 密钥的列表选中等待复制的项目,然后复制到目的区域,此项功能主要目的是为了方便用户做跨区资源的迁移。

copy

3. 消费记录导出

新提供了用户的消费记录和当前计费资源的导出功能,在控制台的右上-消费记录-查询-导出,填写您需要导出记录的月份和邮箱即可以导出相关数据(导出当前计费资源不需要填月份),数据导出之后会生成一个 csv 文件发送到您指定的邮箱,然后您可以用 Excel 等软件对自己的消费情况进行各种纬度的统计和分析,(如果您需要导出的消费数据比较多,我们会把数据拆分成几个文件分批发送到您的邮箱)。

export

4. 自动伸缩功能更新

自动伸缩策略除支持动态调整后端数量外,还新增支持了固定后端数量:

  • 动态浮动的后端数量:基于负载均衡器监听器的多种压力监控项,自动增加或减少其下的后端服务器。 并支持设置后端服务器集群的最大、最小数,在可控的范围内自动调节。
  • 固定的后端数量:基于负载均衡器监听器的健康检查机制,维持一个固定数量的后端集群。 当健康的后端数量不等于所设置的值时,会自动创建或删除后端服务器。

create as

路由器 OpenVPN 功能支持多种验证方式

路由器 OpenVPN 功能支持多种验证方式

为了更好的满足用户使用路由器 OpenVPN 功能的需求,我们在原有 “证书验证” 基础上,新增了 “用户名/密码” 和 “证书” + “用户名/密码” 组合等验证方式。
用户可以根据实际需求选择不同验证方式,更好地对登录授权进行管理。详情请参看 VPN 隧道指南

enable vpn open vpn accounts

青云QingCloud携手合作伙伴 打造开放共赢“X计划”

北京,2015年11月18日——

秉承“专注、专业、开放、共赢”的理念,企业级基础云服务商青云QingCloud于11月18日在京举办合作伙伴计划启动大会,正式宣布“QingCloud X”合作伙伴计划,并在现场举行授牌仪式,为首批合作伙伴颁发证书。作为青云QingCloud合作伙伴招募的开端,大会邀请了300余位合作伙伴、用户代表,以及媒体和分析师出席,并向他们分享了QingCloud的技术、产品和专业的解决方案如何帮助合作伙伴实现业务的转型与升级。

QingCloud-X-2015-11-18_1920x1280

“QingCloud X”合作伙伴计划授牌仪式

南瑞集团信息系统集成公司 CTO徐戟、北京中电广通科技有限公司总裁郭雪梅、深圳市华成峰数据技术有限公司总裁范长春及总经理顾正、云南彩立方数据科技有限公司执行董事张学东及首席执行官蒋鹏、北京赞同科技发展有限公司副总经理江山、华青融天(北京)技术股份有限公司首席运营官马可、FIT2CLOUD创始人阮志敏等嘉宾出席并分享了他们对云计算时代新型IT生态的观点。

在“互联网+”时代,所有企业共同面临着重构核心竞争力的挑战,业务创新的需求驱动企业采用更加敏捷高效的IT基础设施保障,越来越多的业务正在迁移至云平台。毋庸置疑,基于云计算的IT架构已经成为面向未来的企业IT新形态,云计算正在深刻地改变着信息产业的发展格局,为产业链上下游企业带来各式各样的挑战的同时,更意味着前所未有的机遇。

QingCloud-X-Richard-2015-11-18

青云QingCloud CEO 黄允松

青云QingCloud CEO黄允松(Richard Huang)在会上表示,云计算彻底改变了IT产业的基本理念,驱动IT产业关系从垂直走向水平,IT世界的分工更精细、角色更丰富、价值更多元。从硬件模式到虚拟化模式,再到容器模式和 UniKernel 模式,IT 系统越来越复杂,多种模式将长期共存。Cloud IT 越发需要针对用户应用的需求来提供相应最佳支持。相比传统的IT模式,合作伙伴在云模式下能够获得更好的机会。QingCloud专注于基础云服务领域,希望通过领先的技术实力、专业的行业解决方案和最佳实践,以及无限开放的API,为合作伙伴营造一个良好的发展环境。

青云QingCloud目前不仅提供公有云服务,还提供包括智能云管理平台、桌面云平台、大数据平台、对象存储平台、超融合一体设备、云计算方案咨询与项目实施在内的完整的企业级云计算解决方案。本次发布的“QingCloud X”合作伙伴计划是QingCloud云生态建设的关键环节,其中“X”代表相互支撑,QingCloud愿与合作伙伴达成亲密无间的合作关系;“X”也是乘号,代表合作的乘法效应能够为双方带来更大的价值。

据青云QingCloud渠道总监田华介绍,在“QingCloud X”合作伙伴计划中招募的合作伙伴主要有六类,分别是基础资源合作伙伴、解决方案合作伙伴、行业战略合作伙伴、渠道战略合作伙伴、应用中心合作伙伴,以及云服务合作伙伴。为了与合作伙伴共同构筑新型的云计算生态,为客户创造新的价值,QingCloud接下来的动作将会分为以下几步:首先,根据合作伙伴的业务特点和所在领域进行身份授权及项目授权;其次,针对特定市场、行业举办联合市场活动;第三,发布千人专家计划,在一年内培育千名QingCloud技术专家,对销售人员和架构师进行官方认证;第四,联合合作伙伴创建技术/方案创新实验室;第五,丰富完善QingCloud应用中心/集成方案进行推广。田华用“通过价值保证利益”来总结QingCloud的合作伙伴计划。

今年5月发布的“青云应用中心(QingCloud AppCenter)” 是QingCloud打造合作伙伴计划的第一步。目前已有近30家合作伙伴的专业服务登陆QingCloud AppCenter,用户只需要通过登录QingCloud控制台即可选择、激活、授权和应用第三方专业服务。FIT2CLOUD就是其中的典型代表。

作为青云QingCloud首批渠道战略合作伙伴,深圳市华成峰数据技术有限公司总裁范长春表示,当前云计算与大数据成已经成为IT产业的新战场,成为所有IT服务商必争的战略高点。中国目前几十家云服务商,鱼龙混杂,一旦选择错误将满盘皆输。选择QingCloud主要是基于三点:第一,双方均服务于企业级市场,有共同的语言;第二,QingCloud的技术和性能表现业界领先;第三,QingCloud能够给合作伙伴带来更大的价值。

此外,在会议举办期间,青云QingCloud与云南彩立方数据科技有限公司举行达成战略合作协议,云南彩立方数据科技有限公司执行董事张学东、首席执行官蒋鹏出席签约仪式,并表示,云计算已经成为房地产企业最合适的解决方案,通过云计算的部署可以避免企业自建IT平台,减少大量的IT设备购买成本,同时在数据的存放、处理上,基于云平台自身的对象存储服务和自动化部署的大数据平台可以帮助提高整个企业的业务效率。

Redis Cluster (集群)服务上线

Redis cluster

Redis Cluster (集群)

青云 Redis 集群提供原生的开源 Redis 3.x,除了继续支持以前的一主多从外,还支持多主多从,每个主所在分片 (shard) 平均分摊 16384 个 slots, 增加或删除主节点系统会自动平衡 slots。并且集群支持 HA, 即当某个主节点异常,它的从节点会自动切换成主节点。更多详情请参看用户指南

create_basic

在线伸缩 文档

在缓存服务运行过程中,会出现服务能力不足或者容量不够的情况,可以通过扩容来解决,或者服务能力过剩时可以删除节点。在纵向扩容中, 服务需要重启,所以这个时候业务需要停止。在横向伸缩中,数据会发生迁移,但并影响业务的正常运行。支持的伸缩操作包括以下几种:

  • 增加集群分片 (shard)
  • 增加集群从节点
  • 删除集群分片 (shard)
  • 删除集群从节点
  • 增加缓存容量

add_node_group

图形化操作 文档

用户可以在图形中进行以下操作:

  • 查看节点的监控信息
  • 查看节点的基本信息
  • 绑定节点的监控告警策略,并查看监控告警历史
  • 添加、删除从节点
  • 添加、删除节点组

graphnode_graph

迁移与升级

迁移数据既包括 Redis standalone 之间也包括从 Redis Standalone 到 Redis Cluster。具体步骤请参考 文档

监控
Redis 集群的监控提供与 Redis standalone 完全一样的监控信息,详情请见 文档

青云QingCloud推出Redis Cluster 支持多主多从

北京,2015年11月17日——

企业级基础云服务商青云QingCloud日前宣布,正式推出Redis Cluster缓存集群服务。此次推出的Redis 3.0.5版本既提供一主多从的普通版,又提供多主多从的集群版,用户可以在控制台中自行选择适合的版本。其中Redis集群版还提供HA(High Availability)功能,即当某个主节点发生异常时,它的从节点会自动切换成主节点,从而有效地保证业务的有效性和连续性。

Redis集群服务上线

Redis集群服务上线

Redis是一款基于内存的Key-Value数据库。与传统数据库相比,Redis的优势在于它将数据存储在内存中,读写性能得以巨大提升,适合那些频繁读写、并对速度要求较高的业务场景。Redis 自3.0版本起开始支持Cluster,即分布式、集群的、高可用的Redis实现。相对于之前的版本,Redis的自动扩展、容错和高可用性都有了很大的提升。

去年12月,青云QingCloud推出了基于2.8版本的Redis缓存服务,不仅支持一主一从和一主多从的架构,还提供了可持久化和自动备份的服务。此次推出的基于3.0.5版本的Redis不仅可以支持一主多从,还可以支持多主多从,并且主从节点都可以持久化,在保证高可用的同时,保护用户数据安全。

相对于单主的Redis服务,Redis Cluster缓存服务不仅具有安全可靠的架构,还在性能上提升数倍,性价比大幅提升。为了让用户更便捷地升级到Redis Cluster,QingCloud提供了丰富的迁移工具,帮助用户从低版本迁至高版本,或者从普通版迁至集群版。

Redis-Cluster-图形化操作

Redis Cluster图形化操作

除此之外,青云QingCloud还支持Redis Cluster图形化操作,方便用户更直观的查看集群状态和各项操作。通过独创性的图形化操作(如上图),用户可以轻松地完成添加和删除主从节点、查看节点的监控信息、绑定节点的监控告警策略、查看监控告警历史等操作。

青云QingCloud CTO 甘泉(Reno Gan)表示,青云QingCloud提供的数据库与缓存服务除了Redis之外,还包括MySQL、PostgreSQL、Memcached和MongoDB等主流开源方案。未来还将陆续推出SQL Server、HBase、Hive、Cassandra等丰富的数据库类型,以满足不同应用场景的用户需求。

【安全公告】Redis Crackit 入侵事件通告

近日曝出大规模利用 Redis 漏洞进行入侵的事件,会给用户的 Redis 运行环境以及 Linux 主机造成安全风险,请可能被漏洞影响的用户仔细阅读本文,并做相应的处理。

容易遭受入侵的环境:

用户自建的运行了 Redis 服务的 Linux 主机,并在公网上开放了 Redis 端口,例如 6379

入侵现象:

  • Redis 可能被执行过 flushall 命令
  • Redis 内建了名为 crackit 的 key
  • Redis 的 dir 参数指向了 /root/.ssh
  • /root/.ssh/authorized_keys 被覆盖或者包含 Redis 相关的内容

修复办法:

  • 以非 root 权限启动 Redis
  • 增加 Redis 密码验证
  • 禁止公网开放 Redis 端口, 例如可以在青云防火墙上禁用 Redis 的端口,例如 6379
  • 检查 authorized_keys 是否非法

温馨提示:

青云提供的 Redis 服务是运行在私有网络中的,并且已经考虑了安全加固措施,同时提供密钥验证的配置,不会受到该漏洞的影响,请用户放心使用。

关于入侵事件的更多详情还可以参见: https://nosec.org/bobao/redis_crackit

另外,有任何其他问题可以工单与我们联系。

QingCloud 技术团队

用户注册流程升级并增加认证机制

注册流程

为了更好的服务用户,青云升级了用户注册流程,增加了“认证机制”,通过认证的用户可以获得更多的测试费用、资源配额以及更专业的咨询服务。具体流程如下:

1. 选择用户类型

青云用户在注册时可以根据自身情况及需求选择不同的注册类型,目前分为个人”企业”两种。

2. 提交认证资料及申请

注册完成后用户可以前往认证页面完善相关信息并提交认证申请。

3. 等待审核

审核需要1-2个工作日,审核完成后系统会将结果及时以邮件的形式通知到用户。若需要加紧审核可以提交工单。审核期间以及审核失败都不会影响用户的正常使用。

4. 审核通过

审核通过后系统会自动在资源配额以及测试费用上做追加,以满足不同类型用户的测试及使用需求。

注:青云用户可以自主选择是否提交认证申请及信息,没有通过认证的用户并不影响其使用青云服务,只是在资源配额上会有所限制。用户可以在使用青云过程中随时提交认证申请,也可以从个人用户升级为企业用户。

 

青云QingCloud推出NAS服务 支持NFS和CIFS

北京,2015年10月28日——

企业级基础云服务商青云QingCloud日前宣布正式推出NAS共享存储服务。该服务通过标准的NFS和CIFS (SMB协议增强版)网络协议将存储空间以文件系统的形式暴露给用户,支持多客户端同时挂载与访问。存储空间源于QingCloud的硬盘资源,用户可通过将一块或多块已经格式化过的硬盘挂载到NAS服务器。另外,QingCloud NAS服务支持权限组和账号功能,允许用户对服务的访问进行控制与管理。

NAS

NAS (Network Attached Storage),即网络附加存储,其通过网络提供文件级别的存储服务,允许大量客户端同时访问,提供便捷的访问控制和数据管理,并且支持多种协议,允许不同的操作系统访问。

QingCloud提供的NAS服务具有以下特点:

  • 支持多种网络协议。QingCloud的NAS服务同时支持 NFS 和 CIFS (SMB协议增强版)网络协议,能够满足不同用户的不同应用场景。
  • 高安全性。用户可以根据自己的需求为共享存储目标绑定权限组,并指定权限组中各个帐号的读写权限,实现对服务细粒度的访问控制和管理。此外,NAS服务运行在QingCloud的私有网络中,能够最大限度地确保用户的数据安全。
  • 配置灵活。目前 NAS 服务提供了小型、中型、大型三种类型,分别支持不同数量客户端的同时读写。用户还可以根据业务需求,对NAS服务器进行扩容。
  • 便捷易用。支持用户直接将硬盘挂载到NAS服务器,免去了额外的数据拷贝。用户可以选择“容量型”、“性能型”,以及“超高性能型(即将支持)”硬盘,以满足用户对存储性能和容量的不同需求。
  • 服务监控。QingCloud提供共享存储目录所加载硬盘的基本监控信息,包括硬盘使用率、硬盘 IOPS、硬盘吞吐量等实时及历史数据的查询。

除NAS共享存储之外,青云QingCloud还提供面向传统企业级市场的Virtual SAN服务。Virtual SAN是基于iSCSI 协议的存储服务,比较典型的应用场景是Oracle RAC等大型分布式数据库,QingCloud通过技术手段确保用户的企业级应用和性能需求得以满足。

青云QingCloud首席架构师林源(Spencer Lin)表示,NAS服务的推出进一步完善了QingCloud的企业级存储体系。目前QingCloud在容量和性能两个维度上推出了多种解决方案,如容量型块存储、性能型块存储、超高性能块存储、对象存储等,并配合传统企业级业务推出Virtual SAN和NAS服务。