大数据时代：CIO需考虑的关键技术因素

来源：51cto

2012/6/4 9:40:00

摘要：现在，基于Hadoop的基础设施的前景日趋明朗，它可以关联结构化和非结构化数据，扩展成本低廉，并能以此获得快速的市场洞察力。 Hadoop和其生态系统在弹性、安全性和易用性上会为企业提供新的能力吗?现今CIO在利用大量和多样化的数据时，需要考虑的关键技术因素。

分享到：新浪微博腾讯微博

本文关键字：大数据时代 Hadoop 数据管理

随着开源Apache Hadoop的采用，数据管理软件厂商已发生巨变。现在，基于Hadoop的基础设施的前景日趋明朗，它可以关联结构化和非结构化数据，扩展成本低廉，并能以此获得快速的市场洞察力。 Hadoop和其生态系统在弹性、安全性和易用性上会为企业提供新的能力吗?

现今CIO在利用大量和多样化的数据时，需要考虑的关键技术因素包括：

因素：1、与其他数据库和数据管理环境共存

包括标准的关系环境(甲骨文)和分析数据仓库(Teradata)。警告：数据移动和整合是必要的，但它增加了对各种提取、转换和加载(ETL)工具的支出，也增加了运营成本。

因素：2、存储和硬件

创新的压缩和重复数据删除技术是解决大数据问题的关键。目前在这方面已有很大的进步，我们现在看到的多层次压缩在容量方面比原始数据减少 40倍。然而，重要的是考虑已压缩的数据中有多少最终需要再次膨胀，这将影响你的容量。例如，如果再次膨胀时需要增加30%的容量，那可能不值得把压缩摆在首位。

因素：3、查询和分析

并不是所有的数据都是同等的，查询和业务分析的范围变化很大，这取决于使用情况。有合适的工作工具是必须的。在许多情况下，快速反应的 SQL查询将足以生成所需要的信息。在其他情况下，深层的分析查询需要一个具有完整的操作界面和可视化功能的商业智能工具。正确部署专有技术和开源 Hadoop，将帮助您的组织实现具有规模的快速分析，同时防止运营成本不断攀升。

因素：4、规模和管理能力

由于企业面对不同的数据库和分析环境，因此向外和向上的扩展能力是非常重要的。简单的向外扩展能力是Hadoop为什么会被企业迅速采用的原因。通过低成本的服务器集群进行大规模并行处理是关键，比其他的数据管理方式需要更少的专业技能，而这直接影响您对IT资源的投资。

责编：孔维维

微信扫一扫实时了解行业动态

微信扫一扫分享本文给好友

收藏到畅享打印全文复制链接添加到收藏投稿邮箱

分享到：新浪微博腾讯微博

著作权声明：畅享网文章著作权分属畅享网、网友和合作伙伴，部分非原创文章作者信息可能有所缺失，如需补充或修改请与我们联系，工作人员会在1个工作日内配合处理。

大数据时代：CIO需考虑的关键技术因素

通过咨询项目或年度顾问方式，帮助您架起业务和IT的桥梁，解决业务和IT创新融合、现有系统取舍难、IT架构、建设路径、IT治理、IT支出优化等IT策略问题。

与您签订总包或三方合同，帮您解决业务和IT规划落地走样、IT详细设计缺失、难以寻觅靠谱的技术供应商、多个供应商协调难、维护升级服务保障难等棘手问题。

与您签订监理合同，以里程碑专家评审、项目变更协调、风险控制研讨、供应商关系协调、CIO智力网络等为主要服务内容，与甲乙方一起实现上线成功。

畅享IT帮助寻找可靠的、性价比高的开发力量，签订外包合同或三方合同，为企业提供可信赖的开发量，为IT供应商解决开发力量不足的问题。

畅享IT帮助寻找靠谱的、性价比高的维护力量，签订外包合同，对客户满意度负责，为客户解决维护运营服务保障难的问题。

对IT系统、IT项目或IT管理进行评估，出具中立评估报告，解决IT评价难、取舍难的问题。