Loading [MathJax]/jax/output/CommonHTML/config.js
前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >大数据Hadoop解决方案的形势

大数据Hadoop解决方案的形势

作者头像
静一
发布于 2018-03-16 06:36:53
发布于 2018-03-16 06:36:53
5461
举报
文章被收录于专栏:云计算D1net云计算D1net

根据最新的Forrest报告,有很多公司都在努力挖掘他们拥有的大量数据,包括结构化、非结构化、半结构化以及二进制数据等,探索对数据的深入利用。下面是报告结论的其中一点:

大多数公司估计他们只分析了已有数据的12%,剩余88%还没有被充分利用。大量的数据孤岛和分析能力的缺乏是造成这种局面的主要原因。另外一个难题是如何判断数据是否有价值。尤其是在大数据时代,你必须采集并存储这些数据。一些看起来与业务无关的数据,如手机GPS数据,将来也可能是座金矿。

所以,大量公司都寄希望于使用Hadoop解决如下难题:

采集并存储与公司业务职能相关的所有数据。支撑先进的分析功能,包括商业智能,采用现代方式对数据进行先进的可视化和预测性分析。将数据快速分享给所需之人。整合多个数据孤岛帮助组织解答以前根本没人提过,甚至是未知的复杂问题。容纳持续增长的数据量和新数据源。Hadoop支持解决方案规模的快速、有效扩大,使不断增长的容量、速度以及多样的数据尽在公司的把控之中。

根据报告的内容,Hadoop的购买周期正处于上升阶段,因此在该领域催生了越来越多的厂商。尽管Hadoop是Apache的开源项目,任何人都可以免费下载,但大多数消费者还是倾向于采用厂商的打包方案。除了将所有的Hadoop组件打包并保证其能正常使用(兼容版本)之外,厂商一般还会提供企业级支持和扩展:以Apache Hadoop(Common,HDFSMapReduce )作为方案的核心组件,搭配额外实现增强Hadoop的功能,并增加差异化功能使其解决方案更具吸引力。

Forrester的报告详细介绍了9家厂商:Amazon Web Services、Cloudera、Hortonworks、IBM、Intel、MapR科技、Microsoft、Pivotal软件和Teradata,并根据以下指标对这些厂商进行了评测:

现有产品,包括解决方案架构、数据和处理功能、安装、管理、监控工具、兼容性和社区成熟度等方面。战略,包括厂商在满足当前客户需求和弥补企业部署方面的计划。对战略的评测包括股权并购、内部战略的执行能力、产品路线图以及对客户的支持能力等。市场占有率,包括公司的财务,全球占有率,安装基数,与其他软件厂商、专业服务厂商以及软件即服务(Saas)/云/托管提供商之间的战略合作关系等。

报告的主要研究结果如下:

厂商众多,但是并没有占主导地位的厂商。

在此次大数据Hadoop解决方案评测中,领导厂商有Amazon Web Services、Cloudera、Hortonworks、IBM、MapR科技、Pivotal软件和Teradata。这些厂商都是基于Apache开源项目,然后增加打包、支持、集成等特性以及自己的创新等内容以弥补Hadoop在企业中的短板。所有厂商都实现了这些功能,尽管方式略有不同——从各厂商的评测得分和厂商资料可见一斑。

新晋厂商的解决方案也有不俗的表现。

在此次大数据Hadoop解决方案评测中,表现强劲的厂商有Intel和Microsoft。Microsoft为HDInsight产品制定了强劲的路线图,使其竞争力不亚于其他领导厂商。Microsoft HDInsight为Azure进行了特殊优化,所以对于那些想要在Azure上实现Hadoop的Microsoft客户来说,它是最好的解决方案。而Intel将其创新能力聚焦于芯片级,如果它想将其产品打造成企业级解决方案,还需要加强其战略和企业工具。

根据该报告,虽然此次对大数据Hadoop解决方案市场的评测只是一个开始,但是对于那些努力摆脱复杂的Hadoop厂商局面的公司而言,该报告提供了很好的参考信息。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2014-03-19,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 云计算D1net 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
1 条评论
热度
最新
这篇文章真是太棒了!作为一个数据分析师,我一直在寻找一种能够展示多维数据关系的可视化工具,而Pyecharts桑基图完全满足了我的需求。通过本文的介绍,我深入了解了Pyecharts桑基图的多维视角和绘制艺术,学到了很多实用的技巧。现在,我可以更加直观地展示数据的关系和流向,让我的数据分析报告更加生动有趣。感谢作者的分享,我会将这些知识应用到我的工作中,并向同事们推荐这篇文章!
这篇文章真是太棒了!作为一个数据分析师,我一直在寻找一种能够展示多维数据关系的可视化工具,而Pyecharts桑基图完全满足了我的需求。通过本文的介绍,我深入了解了Pyecharts桑基图的多维视角和绘制艺术,学到了很多实用的技巧。现在,我可以更加直观地展示数据的关系和流向,让我的数据分析报告更加生动有趣。感谢作者的分享,我会将这些知识应用到我的工作中,并向同事们推荐这篇文章!
回复回复点赞举报
推荐阅读
编辑精选文章
换一批
你必须知道的9大Hadoop公司
大数据文摘翻译:超伦,校译:甄艾庄(转载请保留) 如果你有大量的数据,那么Hadoop已然,或者即将应当进入你的视野。 当下最时髦且富有盛名的大数据管理系统原来只用在像谷歌、雅虎这样的互联网大咖,现在已经逐渐渗透到众多企业中。原因主要有以下两点:1)企业也在产生越来越多需要管理的数据,而Hadoop是一个非常棒的平台,特别是它能够合并遗留的旧数据,新数据和非结构化的数据。2)很多的围绕Hadoop提供支持和服务的供应商出现,促使Hadoop更适用于企业; “Hadoop作为一个开源平台自由成长,深入到企业数
大数据文摘
2018/05/21
4.4K0
【盘点】十大最受欢迎的开源大数据技术
导读:大数据已然成为当今最热门的技术之一,正呈爆炸式增长。每天来自全球的新项目如雨后春笋般涌现。幸运地是,开源让越来越多的项目可以直接采用大数据技术,下面就来盘点最受欢迎的十大开源的大数据技术 十大开
钱塘数据
2018/03/01
1.8K0
【盘点】十大最受欢迎的开源大数据技术
从十大技术和十大巨头了解大数据
大数据在各行各业中取得了迅猛发展,许多组织都被迫寻找新的创造性方法来管理和控制如此庞大的数据,当然这么做的目的不只是管理和控制数据,而是要分析和挖掘其中的价值,来促进业务的发展。着眼大数据,过去几年内产生了许多颠覆性技术,比如Hadoop、MongDB、Spark、Impala等,了解这些前沿技术还有助于你更好的把握大数据发展趋势。诚然,想了解一件事物,首先要了解与该事物有关的人。因此,要想了解大数据,光了解技术是远远不够的,本文中大数据领域的十个巨头,将有助于你更深入掌握大数据这个行业的发展形势。
静一
2018/03/16
1.1K0
历数大数据领域不可忽视的十大巨头
Forrester将AWS称为“云霸主”,谈到云计算领域的大数据,那就不得不提到亚马逊。该公司的Hadoop产品被称为EMR(Elastic Map Reduce),AWS解释这款产品采用了Hadoop技术来提供大数据管理服务,但它不是纯开源Hadoop,经过修改后现在被专门用在AWS云上。 Forrester称EMR有很好的市场前景。很多公司基于EMR为客户提供服务,有一些公司将EMR应用于数据查询、建模、集成和管理。而且AWS还在创新,Forrester称未来EMR可以基于工作量的需要自动缩放调整大
小莹莹
2018/04/18
1K0
历数大数据领域不可忽视的十大巨头
全球最“有料”的15家大数据公司
导读:大数据公司是现在最火热的行业之一,目前全球大数据企业主要分为两大阵营:一部分属于单纯以大数据技术为核心的新兴企业,以实力和创新力为市场带来新方案并推动技术发展;另有一些原本打理数据库/数据仓储业务的老牌厂商,他们打算利用自身优势地位冲击大数据领域,将现有安装基础及产品线口碑推广到新一轮技术浪潮当中。 让我们一起来看看今天最有料的十五家大数据企业,其中十家早已名满天下,另外五家则属初来乍到。 10大老牌 1.IBM 根据Wikibon发布的报告,作为2012年大数据业务营收成绩最好的公司IBM过去一年
CSDN技术头条
2018/02/09
8620
开源Hadoop发展迅猛 用户与厂商各取所需
就大数据的核心而言,Hadoop是一个用于有效存储和处理大数据的开源架构。多年来,开源初创公司Cloudera和Hortonworks在Hadoop市场一直占有绝对地位,诸如Oracle、微软以及其他
静一
2018/03/16
6220
开源Hadoop发展迅猛 用户与厂商各取所需
大数据凉凉了
-------------------------------------------------------------------------------------------------
用户1564362
2018/10/23
1.4K0
大数据凉凉了
大数据(生于2006,卒于2019)已死!
由于关注的重心从我们收集数据的方式转向实时处理数据,大数据时代即将终结。大数据现在是支持多云、机器学习和实时分析这几个新时代的业务资产。
钱塘数据
2019/11/27
7700
大数据(生于2006,卒于2019)已死!
大数据(生于2006,卒于2019)已死!
由于关注的重心从我们收集数据的方式转向实时处理数据,大数据时代即将终结。大数据现在是支持多云、机器学习和实时分析这几个新时代的业务资产。
Spark学习技巧
2019/08/06
1.6K0
大数据(生于2006,卒于2019)已死!
销售商与使用者:谁是大数据真赢家?
大数据一词最近几年热度不减,越来越多人谈论它,越来越多的公司开始在其中进行投资。   职业社交网站LinkedIn最近发布的一份针对其3.3亿用户档案分析报告显示,在2014年最热门的25项职业技能中,排名榜首的就是“统计分析和数据挖掘”。考虑到万物互联、云计算、智能设备、机器学习等不断涌现的科技潮流词汇以及由此积累的庞大数据,与大数据紧密相连的数据科学家受到职场热捧也就不难理解了。   从薪酬的角度来看,美国一项调查显示,2014年,数据科学家的平均年薪是12.3万美元,比上一年有大幅上升。C
腾讯研究院
2018/01/31
6000
专访Cloudera首席技术官:大数据创企,别再做底层基础平台了
按要求转载自36kr 作者 | 夜叶 几年前,大数据还只是新兴概念,现在数据早成行业和公司眼里的香饽饽,从底层基础平台,中间层通用技术,到上层行业应用,大数据产业链条日臻完善。 作为马云口中构建未来智能世界三个最主要要素之一,大数据自身是衍伸发挥的生产资料来源,而对数据的存储、计算又是整个大数据生态的基石,底层基础平台主要就解决这个问题。 而论及底层技术Hadoop领域,就得说到明星公司Cloudera,今年4月底已在纽交所上市。 Cloudera是首家将Hadoop商用的公司,以提供开源Hadoop发
大数据文摘
2018/05/25
7050
Cloudera独家回应:Hadoop到底怎么了?
五年前,Gartner 研究总监就曾 发文 说 Hadoop 光环幻灭;到现在,我们看到了更多的质疑文字,认为“Hadoop 气数已尽”。而这次质疑的起因是 Cloudera 和 Hortonworks 的合并,MapR 的裁员。
Fayson
2019/07/17
9110
Cloudera独家回应:Hadoop到底怎么了?
专访宝立明:万流归一,谈Teradata的开放之路
Stephen Brobst是个不折不扣的开源拥护者,不过在他眼中,给开源贡献存在着很多的方式,就比如Teradata通过将平台开放出来,让用户可以便捷地集成自己所需的开源技术。 2014年,Apache Spark无疑是大家讨论最多的开源大数据平台,它通过集成流计算、图计算、机器学习等组件以获得更广泛的使用场景,时下已获得Cloudera、Hortonworks、Intel、Datastax、MapR、Pivotal等众多公司的支持。因此,在Spark飞速发展的当下,Teradata提出的以统一数据架构(
CSDN技术头条
2018/02/09
1.2K0
专访宝立明:万流归一,谈Teradata的开放之路
后Hadoop时代的大数据架构
感谢董飞先生投稿,推荐关注其知乎专栏 【董老师在硅谷 http://zhuanlan.zhihu.com/#/donglaoshi】 提到大数据分析平台,不得不说Hadoop系统,Hadoop到现在也超过10年的历史了,很多东西发生了变化,版本也从0.x进化到目前的2.6版本。我把2012年后定义成后Hadoop平台时代,这不是说不用Hadoop,而是像NoSQL (Not Only SQL)那样,有其他的选型补充。我在知乎上也写过Hadoop的一些入门文章 如何学习Hadoop - 董飞的回答,为了给大家
大数据文摘
2018/05/22
9290
【聚焦】后Hadoop时代的大数据架构
提到大数据分析平台,不得不说Hadoop系统,Hadoop到现在也超过10年的历史了,很多东西发生了变化,版本也从0.x进化到目前的2.6版本。我把2012年后定义成后Hadoop平台时代,这不是说不用Hadoop,而是像NoSQL (Not Only SQL)那样,有其他的选型补充。我在知乎上也写过Hadoop的一些入门文章 如何学习Hadoop - 董飞的回答,为了给大家有个铺垫,简单讲一些相关开源组件。 背景篇 Hadoop: 开源的数据分析平台,解决了大数据(大到一台计算机无法进行存储,一台计算机无
小莹莹
2018/04/23
9730
【聚焦】后Hadoop时代的大数据架构
15种值得你了解的大数据技术
提供大数据解决方案的技术供应商列表似乎是无限的。现在,许多特别流行的大数据解决方案都属于以下15种类别之一,我们一起来看看吧:
加米谷大数据
2020/06/02
1.7K0
15种值得你了解的大数据技术
Hortonworks联合Jethro扩充其数据仓库解决方案
Hadoop做数仓,不是啥子新鲜概念,各家Hadoop厂商都有自己的方案。Hortonworks这两天突然官方宣布与Jethro一起来玩EDW,Fayson也没搞太懂。从Jethro的文档看上去应该很早就支持CDH5.9/5.10和HDP2.3/2.4了。参考:
Fayson
2018/03/29
8540
Hortonworks联合Jethro扩充其数据仓库解决方案
【译文】“开放数据平台”行业协会成立,助力大数据分析!
部分IT供应商在美国成立“开放数据平台(The open data platform, 以下简称ODP)”协会,以促进大数据技术发展。 当下,大数据分析工程似乎在各大IT公司正当其时。科极网拓与《电脑周刊》联合进行的2015年度IT行业支出重点调查表明,与2014年相比,大数据分析与管理越来越受重视。全球30%的受访者表示,他们有2015年实施与大数据有关的项目的计划,这一比例在欧洲为26%,在英国为21%,而2014年,这一比例在全球仅为17%。 大数据分析经销商Hortonworks公司战略副总裁肖恩
CDA数据分析师
2018/02/11
6120
【学习】大数据和Hadoop生态圈,Hadoop发行版和企业级应用
本文转自张子良的博客Hadoop develop,张子良,金融大数据专家,提供大数据方案咨询,技术咨询和企业内训。 第一章 大数据和Hadoop生态圈 本章主要内容: 理解大数据的挑战 了解Hadoop生态圈 了解Hadoop发行版 使用基于Hadoop的企业级应用 你可能听别人说过,我们生活在“大数据”的环境中。技术驱动着当今世界的发展,计算能力飞速增长,电子设备越来越普遍,因特网越来越容易接入,与此同时,比以往任何时候都多的数据正在被传输和收集。 企业正在以惊人的速度产生数据。仅Facebook
小莹莹
2018/04/23
1.1K0
【学习】大数据和Hadoop生态圈,Hadoop发行版和企业级应用
大数据先驱Cloudera拥抱云计算,探索后Hadoop时代的下一代数据平台 | Q推荐
未来十年,企业数据管理模式将如何进化?Cloudera 的答案是 — 企业数据云。 在数据爆炸时代“掘金” 数字正在“吞噬”世界。 过去的十几年里,我们进入了一个数据爆炸、信息过载的时代。 数据规模在以惊人的速度增长。 2006 年,个人用户才刚刚迈入 TB 时代,当年全球共产生了约 180EB(1 EB = 1024 TB)的数据;2012 年,这个数字增长到了 3.7 ZB(1ZB=10 亿 TB)。 据国际权威机构 Statista 统计和预测,2020 年全球数据产生量预计达到 47ZB。而到 20
深度学习与Python
2023/04/01
6460
大数据先驱Cloudera拥抱云计算,探索后Hadoop时代的下一代数据平台 | Q推荐
推荐阅读
相关推荐
你必须知道的9大Hadoop公司
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档