何时将大数据存储在云计算中

日期: 2013-04-22 来源:TechTarget中国 英文

  鉴于云计算对我们大部分人来说还只是一个概念性的梦想,当有人谈及他们的大数据的策略是“把所有的数据都存储在云服务中”时,您尚不能明确的分辨他们的策略是一种有远见的方案,抑或只是简单的重复了他们在行业会议上所听到的某些专家的谈话。

  大数据和云计算范例之间的重叠实际是如此地广泛,您可以声称您的企业正在利用现有的内部部署的Hadoop、NoSQL、或企业级数据仓库环境,进行基于云计算的大数据部署。但请务必记住,云计算这一概念在当前更为广泛的是被理解为“私人云”的部署,然后才是以公共云计算、SaaS和多租户托管环境为补充。

  但是,如果您将您的关于“云计算”的实际定义限制在公众认购服务的范围,您便找到了问题的核心了:您必须确定哪些大数据应用程序更适合于公共云/ SaaS部署,而哪些则更适合于内部部署(如涉及到提前优化的硬件设备或虚拟的服务器集群)。

  换句话说:您什么时候可以收集到可扩展性、弹性、高性能、符合成本效益、高可靠性和可管理性的大数据,让外部服务供应商对其进行管理?如下是几个明显的大数据在公共云进行管理的例子。

  企业应用程序已经托管在云服务中:如果,许多企业(尤其是中小型企业)已经在使用外部服务提供商的基于云的应用程序,您的大部分的事务的数据源已经在一个公共云。或者如果您的企业与这一云平台有着很深的历史数据渊源,其可能已经进行了大数据量的积累。在某种程度上,该服务供应商或其合作伙伴提供增值分析服务——如流失分析、营销优化、或异地备份和客户资料归档——这样,将大数据托管在该云服务中,而不是存储在企业内部的主机,可能更有意义。

  高容量的外部数据源,需要相当大的预处理:例如,如果您正在根据社交媒体数据进行客户情绪监测,您可能不需要利用企业内部的服务器、存储设备、带宽容量资源。这是一个很明显的应用程序的例子,您只需要利用公共云基于大数据服务提供的社交媒体过滤服务。

  应用程序需求超出您企业内部设备的大数据处理能力:如果您的企业内部已经有本地的大数据平台,专门致力于处理某一款应用程序(如专用的Hadoop集群处理高容量非结构化数据源ETL)。那么,当有一款新的应用程序,而企业当前的大数据平台又不适合,无法满足新应用程序的需求时,采用公共云就显得是恰到好处的解决方案了。(例如,多渠道营销、社交媒体分析、地理空间分析功能、可查询归档、弹性数据、科学沙箱),而且,按需服务更符合成本效益。事实上,如果您需要尽快处理PB级规模、流媒体、多结构的大数据,公共云解决方案可能是唯一可行的选择。

  弹性供应非常大规模而项目短暂的沙箱解析:如果您有一个周期非常短的数据科学项目,需要一个探索性数据集(又名沙箱)而且其数量级要大于一般的规模,那么公共云可能是您唯一可行的或经济的选择。您可以利用基于云的存储和处理能力,很快地投入该项目。然后又能够在该项目结束时,重新规定存储和处理能力。我把这称为“泡沫集”的部署模型,它是专门为云量身定制的。

  如果您已经做了上述任何一点,那么基于云的大数据的战略问题不是出现在您的项目刚刚开始的时候。随着基于云的大数据服务的日趋成熟、性价比、可扩展性、灵活性和可管理性的提高,这个问题将出现在您的项目终止的时候。到本十年末,随着越来越多的应用程序和数据转移到公共云,建立和运行自己的大数据部署的想法将变得如同今天的设计您自己的服务器一样不切实际。

我们一直都在努力坚持原创.......请不要一声不吭,就悄悄拿走。

我原创,你原创,我们的内容世界才会更加精彩!

【所有原创内容版权均属TechTarget,欢迎大家转发分享。但未经授权,严禁任何媒体(平面媒体、网络媒体、自媒体等)以及微信公众号复制、转载、摘编或以其他方式进行使用。】

微信公众号

TechTarget微信公众号二维码

TechTarget

官方微博

TechTarget中国官方微博二维码

TechTarget中国

相关推荐

  • 从事云计算职业的四个选择

    随着技术变得越来越广泛,IT就业市场上出现了很多云计算工作相关的职位。本文探索四种常见的职业道路,以及如何准备面试。

  • 华大基因:BT+IT引领物种学科的新开工

    BT和IT融合,为基因组学这个重要的生物学分支奠定了基础。所谓基因组学(英文名称Genomics),就是研究生物基因组、研究如何利用基因的一门学问。它涉及基因测序、基因作图、基因组功能分析等。

  • 黄允松:2017,云的机遇在哪里

    在这个倡导所有企业都将最终成为IT企业的时代,你认为在新的一年中,云计算将会有哪些新机遇?未来世界会哪些新的技术方向。

  • 2017年数字经济新时代:除去云计算,还需要什么

    据LinkedIn最近的调查结果显示,最受欢迎的职业技能都与数字技术有关,可见日益普及的数字技术将引领未来。目前,用户界面设计已成为最受欢迎的移动应用技能之一。