大数据

大数据处理利器:Hadoop具有五大优势

大数据处理利器:Hadoop具有五大优势

现在,如果你没有听说过Hadoop,那么你一定落伍了。作为一个全新的开源项目,Hadoop提供了一中新的方式用来存储和处理器数据。大型的互联网公司,如谷歌、Facebook都使用Hadoop来存储和管理它们庞大的数据集。Hadoop也通过在这些领域的应用证明了...

Hadoop实战
大数据时代你不得不了解的大数据处理工具

大数据时代你不得不了解的大数据处理工具

如今Apache Hadoop已成为大数据行业发展背后的驱动力。Hive和Pig等技术也经常被提到,但是他们都有什么功能,为什么会需要奇怪的名字(如Oozie,ZooKeeper、Flume)。Hadoop带来了廉价的处理大数据(大数据的数据容量通常是10...

Hadoop安装
英特尔放弃自家大数据处理软件Hadoop版本

英特尔放弃自家大数据处理软件Hadoop版本

3月28日消息,据国外媒体报道,科技博客网站VentureBeat获悉,英特尔将宣布停止发行自家开放源代码大数据处理软件Hadoop版本,转而支持快速增长的大数据公司Cloudera的Hadoop版本。知情人士向VentureBeat报料,英特尔旗下投资机...

Hadoop教程
切勿妄谈Hadoop,以及4个数据管道打造实践

切勿妄谈Hadoop,以及4个数据管道打造实践

时至今日,大数据这个概念已充斥了整个IT界,各种“搭载”了大数据技术的产品,各种用于处理大数据工具更如雨后的春笋触目皆是。同时,如果某个产品还没抱上大数据的大腿,如果某个机构还没捣鼓过基于Hadoop、Spark、Impala、Stor...

Hadoop安装
不看不知道:六个超大规模Hadoop部署案例

不看不知道:六个超大规模Hadoop部署案例

虽然Hadoop是眼下热闹非凡的大数据领域最热话题,但它肯定不是可以解决数据中心和数据管理方面所有难题的灵丹妙药。考虑到这一点,我们暂且不想猜测这个平台未来会如何,也不想猜测各种数据密集型解决方案的开源技术未来会如何,而是关注让Hadoop越来越火的实...

Hadoop部署
Hadoop发展历程以及配套项目

Hadoop发展历程以及配套项目

Hadoop发展历程是怎样的呢?Hadoop原本来自于谷歌一款名为MapReduce的编程模型包。谷歌的MapReduce框架可以把一个应用程序分解为许多并行计算指令,跨大量的计算节点运行非常巨大的数据集。使用该框架的一个典型例子就是在网络数据上运行的搜索...

Hadoop部署
Hadoop:不是选配而是发展趋势

Hadoop:不是选配而是发展趋势

就大数据的核心而言,Hadoop是一个用于有效存储和处理大数据的开源架构。多年来,开源初创公司Cloudera和Hortonworks在Hadoop市场一直占有绝对地位,诸如Oracle、微软以及其他一些公司也想在这个市场占有一席之地,但更多是通过与专业的Ha...

Hadoop教程
Hortonworks再获1亿美元融资,Hadoop领域三足鼎立

Hortonworks再获1亿美元融资,Hadoop领域三足鼎立

对于Hadoop领域的人来说,不管是WhatsApp卖了190亿美元,还是91卖了19亿美元,亦或是红极一时的余额宝和微信红包等,都只是茶语饭后的谈资罢了,大家更关心的显然是大数据产业的现状以及Hadoop生态圈的发展情况。本次为大家分享的是Hadoop领域3...

Hadoop安装
腾讯TDW项目:开源的分布式数据仓库

腾讯TDW项目:开源的分布式数据仓库

本期,我们采访的是腾讯TDW开源项目负责人、腾讯高级工程师赵伟。赵伟,腾讯数据平台部高级工程师,腾讯大数据平台分布式数据仓库(TDW)的技术负责人,开源软件爱好者,是腾讯内部Hive、Pig、PostgreSQL、ZFS等开源技术的引入和推广者。目前主要负...

Hadoop实战
Hadoop从业者收入超过Oracle DBA

Hadoop从业者收入超过Oracle DBA

在我们上一次的数据库工程师薪酬调查报告中,Oracle DBA的平均收入是最高的,而这一情况在2013年出现了变化。伴随大数据时代的到来,包括Hadoop、NoSQL相关技术的从业人员收入大部分高于平均水平。根据本次调查显示,Hadoop从业者的平均年收入最高...

Hadoop教程
Hadoop市场将在2020年前保持高速增长

Hadoop市场将在2020年前保持高速增长

根据联合市场调研(Allied Market Research,AMR)的一份最新报告,对Hadoop市场(硬件、软件、服务和HaaS、最终应用以及地理)行业发展趋势预测:2020年,全球的Hadoop市场预计在2013至2020年将以58.2%的复合年增长率...

Hadoop
大数据与Hadoop:并不能简单划等号

大数据与Hadoop:并不能简单划等号

3月14日,IDC宣布近期发布《中国Hadoop MapReduce生态系统分析》报告,报告指出,在中国,Hadoop 应用正在从互联网企业,逐渐拓展到电信,金融,政府,医疗这些传统行业。虽然目前Hadoop应用场景还是以日志存储、查询和非结构化数据处理为主,...

Hadoop安装
六个超大规模Hadoop部署案例

六个超大规模Hadoop部署案例

据估计,到2015年,全世界一半以上的数据将涉及Hadoop--围绕这个开源平台的生态系统日益庞大,这有力地印证了这个惊人的数字。然而,有些人表示,虽然Hadoop是眼下热闹非凡的大数据领域最热话题,但它肯定不是可以解决数据中心和数据管理方面所有难题的灵丹...

Hadoop实战
Hadoop:大数据解决方案的常胜将军

Hadoop:大数据解决方案的常胜将军

架构大数据解决方案的软件工程师们都知道,业务分析有一项技术跨越了SQL数据库、NoSQL数据库,非结构化数据、面向文档数据存储及大型处理。如果你猜到了Hadoop,那你回答正确。Hadoop也是许多巨头公司具有的一个共性,如亚马逊、雅虎、AOL、Netflix...

Hadoop安装
传国内最大Hadoop集群阿里云梯即将下线

传国内最大Hadoop集群阿里云梯即将下线

据阿里巴巴员工罗李在微博上透露:阿里云梯,这个国内最大Hadoop集群,下线已经进入倒计时。此消息一出,引发业界一片哗然。罗李,花名鬼厉,是阿里“云梯”集群的元老级创立者,也是阿里分布式计算团队的第一批员工,长期从事分布式存储和ha...

大数据Hadoop解决方案

大数据Hadoop解决方案

根据最新的Forrest报告,有很多公司都在努力挖掘他们拥有的大量数据,包括结构化、非结构化、半结构化以及二进制数据等,探索对大数据的深入利用。下面是报告结论的其中一点:大多数公司估计他们只分析了已有数据的12%,剩余88%还没有被充分利用。大量的数据...

Hadoop安装
集成GemFire,Hadoop生态圈的又一把火

集成GemFire,Hadoop生态圈的又一把火

ivotal努力整合并改进其母公司买来的大数据技术,以应对大数据企业级应用所面临的挑战。Pivotal是由VMware的Cloud Foundry和EMC的Greenplum等业务分拆并重组而成新公司,其目的是为企业带来重新构建、严格测试过的Hadoop,...

Hadoop教程