首页 > 新闻 > 国内 >

青云QingCloud推Hadoop集群服务完善大数据平台

2015-12-22 14:24:17   作者:   来源:CTI论坛   评论:0  点击:


  CTI论坛(ctiforum)12月22日消息(记者李文杰):企业级基础云服务商青云QingCloud日前宣布,基于Hadoop的大数据集群服务现已正式推出。该服务包括三大核心组件,即HDFS分布式文件系统、YARN任务调度和集群资源管理系统,以及MapReduce并行计算系统。通过QingCloudHadoop集群服务,用户能够在2-3分钟内创建一个Hadoop集群,并且可以进行横向和纵向的在线伸缩,极大地降低了Hadoop平台的技术门槛。
  青云QingCloud推出Hadoop集群服务
  Hadoop是一个针对海量大数据进行存储和处理的分布式开源平台,在大数据领域的应用极为广泛。它使用简洁的MapReduce编程模型分布式处理跨集群的大型数据集,集群规模可以扩展到几千甚至上万。QingCloudHadoop集群服务采用Master/Slave架构,由三种节点类型构成,即主节点(YARNResourceManager和HDFSNameNode)、从节点(YARNNodeManager和HDFSDataNode),以及客户端节点(HadoopClientNode)。用户在客户端节点发起MapReduce任务,通过与HDFS和YARN集群中各节点的交互存取文件、执行MapReduce任务,最终获取结果。
  青云QingCloudHadoop集群架构图
  早在2015年8月,青云QingCloud就已推出基于Spark的大数据集群服务,此次Hadoop集群服务的上线是对QingCloud大数据基础平台的有力补充。Hadoop和Spark各有千秋,Hadoop适用于更大规模的离线数据处理,且对系统故障具备天然的抵抗力;Spark更适合做快速的实时数据分析。因此,用户可以根据应用场景的不同,选择灵活的大数据解决方案。
  具体而言,青云QingCloudHadoop集群服务具有以下特性:
  • 一键部署:用户只需要简单的几步操作就能够在2-3分钟内创建出一个Hadoop集群,帮助用户降低Hadoop的技术门槛和开发成本,快速地利用Hadoop展开数据分析工作。
  • 简化运维:大数据平台尤其是Hadoop的运维非常繁琐,QingCloud为用户提供了便捷的运维工具和图形化操作,极大地简化了Hadoop集群的运维和管理工作。
  • 在线伸缩:Hadoop集群服务支持横向和纵向在线伸缩,以满足用户对计算能力和容量的需求。用户可以选择新增或者删除节点进行横向伸缩,也可以根据节点的监测数据随时调整各个节点的配置。
  • 监控告警:QingCloud针对HDFS、YARN和MapReduce提供了丰富的监控信息,还为每个节点资源提供了监控告警服务,包括CPU使用率、内存使用率、硬盘使用率等,以帮助用户更好地管理和维护Hadoop集群。
  • 安全性:Hadoop集群运行于100%二层隔离的私有网络内,结合QingCloud提供的高性能硬盘,在保障高性能的同时兼顾用户的数据安全。
  青云QingCloudCTO甘泉(RenoGan)表示,Hadoop集群服务的推出标志着QingCloud大数据基础平台的进一步完善,结合已经推出的Spark、ZooKeeper、消息队列(Kafka)、Redis、Memcached、MongoDB等服务,QingCloud的大数据平台服务已经能够越来越灵活地满足用户的各种需求,实现用户数据价值的最大化。
  关于青云QingCloud
  青云QingCloud是全球首家实现资源秒级响应并按秒计量的基础云服务商,致力于为企业用户提供安全可靠、性能卓越、按需、实时的IT资源交付平台。其产品包含完整的IaaS层组件、PaaS/Orchestration层服务及超融合硬件设备。
  QingCloud提供全维度的存储服务,采用分布式块存储系统确保高性能I/O,部署实时异地副本保障数据安全,通过云端SDN实现灵活易用的专享私有云服务(VPC),提供块设备级的备份与恢复,设计实时P2P机器人社区协作确保故障无害,支持全透明代理模式的负载均衡器,并基于自身IaaS平台构建的数据库、大数据平台等服务。QingCloud无限开放全部功能API,并致力于同众多领域的合作伙伴共同打造开放、健全、专业、共赢的云生态。
  在为逾40,000家企业提供公有云服务的同时,QingCloud面向中、大型政企用户提供包含软件定义的智能云平台、超融合设备及桌面云等产品与服务的云计算整体解决方案,帮助企业用户构建和运维更加可靠、敏捷、有效的IT基础资源调度平台,有效降低总拥有成本和运维投入。目前已帮助包括中国银行、招商银行在内的众多大型企业完成了企业云平台的构建与实施。因其全球领先的技术水平、卓越的产品表现和成熟的企业云解决方案,QingCloud荣获工信部“2014-2015云计算优秀解决方案/产品奖”、“2014-2015年度推动中国云计算行业发展突出贡献单位奖”,荣膺2015年Gartner“CoolVendor”,并被Forrester评为2015年中国公有云“StrongPerformer”。
分享到: 收藏

专题