Hadoop安装

采用Hadoop的关键 小处开始大数据之旅

作为大数据技术的典范,Hadoop一直为采用大数据的企业祝福并诅咒着。Hadoop功能强大,却非常复杂,这使得很多企业都宁愿等待更容易的东西问世,再推出大数据项目。等待已经结束。Hadoop在稳步前进,来自诸如Hortonworks和Cloudera等厂商...

Hadoop——处理大数据的宠儿

驱动大数据增长的主要因素包括移动设备和社交网络的大幅度增长、以往纸质文件的数字化以及科研数据的增长。“他们的存档文件正在高速增长,因为他们并不清楚哪些需要保存,哪些不需要保存,”EMC旗下的Isilon公司美国首席技术官Rob Pegl...

Hadoop安装 Hadoop

SK电信试水SQL-on-Hadoop开源查询引擎Tajo

一款全新的Hadoop SQL数据库查询引擎Apache Tajo近日赢得了韩国电信运营商SK电信的青睐。SK电信数据科技实验室的高级经理Geun-tae Park表示:在广泛调研当前可用的数据分析技术后,我们发现Apache孵化项目Tajo能够实现在...

Hadoop安装 Hadoop

在Hadoop中保护大数据安全的9个技巧

在启动大数据项目之前要考虑安全问题?考虑要存储什么数据?责任集中?加密静态和动态数据?把密钥与加密数据分开?使用Kerberos网络身份识别协议?使用安全自动化?向Hadoop集群增加记录?节点之间以及节点与应用之间采用安全通信。当企业转变为数据驱动的机器...

Hadoop安装 Hadoop

9位Committer聚首Hadoop中国技术峰会

对于开源技术社区,Committer的作用是非常重要的。Committer能够对某个特定开源软件的某一块源代码进行修改。根据百度百科的解释,Committer机制是指一批对系统和代码非常熟悉的技术专家(Committer),亲自完成核心模块和系统架构的开发,并...

Hadoop安装 Hadoop

部署Hadoop的公司要慎重考虑

近些年,Hadoop和“走向大数据分析引擎”一样,受到颇多赞誉。对很多人来说,Hadoop就意味着大数据技术。但其实开源的分布式处理框架未必能解决所有的大数据问题。这就要求想要部署Hadoop的公司慎重考虑——什...

Hadoop安装 Hadoop

从源代码编译Hadoop

步骤其实很简单,但是文档并不是很详细,导致整个过程不断摸索,整理一下分享给大家。1、下载网址:http://git.apache.org/2、必要软件Maven这个需要注意,不要下载最新3.1.1,而是下载3.0.5,因为3.1.1存在一个bu...

Hadoop数据分析处理技术解析

数据的分析是大数据处理的核心。传统数据分析主要是针对结构化数据,其大致过程为:首先利用数据库存储结构化数据,在此基础上构建数据仓库,根据需要再构建相应立方体并进行联机分析处理。这一过程在处理相对较少的结构化数据时非常高效。但对于大数据而言,...

Hadoop安装 Hadoop

SQL on Hadoop的最新进展及7项相关技术分享

大数据最大的魅力在于通过技术分析和挖掘带来新的商业价值。SQL on Hadoop是非常关键的一个方向。CSDN云计算特别邀请梁堰波撰写这篇文章,对7种最新技术做深度阐述。文章较长,但相信一定有收获。2013年12月5日-6日,以“应用驱动的架构与...

VMware扩展大数据 试图虚拟化Hadoop

VMware宣布,将允许用vSphere来管理Hadoop集群。这样一来,成千上万的VMware企业客户将能够使用他们已经熟悉的软件来控制Hadoop部署。从技术方面说,这提高了该公司在虚拟化基础设施运行Hadoop节点的水平,同时将虚拟化的优势带到了大数据平...

Hadoop安装 Hadoop

用Hadoop,还是不用Hadoop?

Hadoop通常被认定是能够帮助你解决所有问题的唯一方案。 当人们提到“大数据”或是“数据分析”等相关问题的时候,会听到脱口而出的回答:Hadoop!实际上Hadoop被设计和建造出来,是用来解决一系列特定问题的...

Hadoop安装 Hadoop

用Hadoop帮助商业智能实践“全数据”

2013年9月,由亚洲原生 Hadoop 领航者 Etu 知意图缔造的 Etu 知意图 Hadoop 大数据一体机,在《计算机世界》主办的“大数据时代的商业智能”高峰论坛上,获得了主办方颁发的“大数据优秀产品奖”...

Hadoop安装 Hadoop

如何挑选合适的大数据或Hadoop平台?

今年,大数据在很多公司都成为相关话题。虽然没有一个标准的定义来解释何为 “大数据”,但在处理大数据上,Hadoop已经成为事实上的标准。IBM、Oracle、SAP、甚至Microsoft等几乎所有的大型软件提供商都采用了Hadoop。...

Hadoop安装 Hadoop

英特尔为Hadoop添加Lustre支持能力

全世界的厂商已经达成共识:Hadoop在映射化简领域是一款非常优秀的工具,但该软件的进一步发展却受到多种束缚,其中最难跨越的门槛在于对Hadoop分布式文件系统(简称HDFS)的高度依赖。HDFS本身并没问题,但在与Hadoop集成之后则要求用户必须为其构...

White Elephant:开发者必备的Hadoop利器

LinkedIn是全球最大的职业社交网站,从2002年12月创立到2013年初,LinkedIn注册用户已到2亿,平均每秒增加一个新用户,86%的“财富100强企业”正在使用LinkedIn的付费解决方案,270万个公司主页在此安家落户...

Hadoop安装 Hadoop

Hadoop+GPU强强联手的性能探索

Hadoop并行处理可以成倍地提高性能,GPU也日益成为计算任务的重要分担者,Altoros Systems研发团队一直致力于探索Hadoop+GPU的可能性,以及在实际的大规模系统中的实现,这篇文章就是他们的部分研究成果。Hadoop并行处理可以成倍地提...

Hadoop安装 Hadoop

Hadoop:用并行计算求圆周率π

关于圆周率大家再熟悉不过了:我们从课本上学习到早在一千多年前,祖冲之将圆周率计算到3.1415926到3.1415927之间…计算机诞生后,计算圆周率被用来检测计算机的硬件性能,昼夜燃烧cpu看会不会出问题…另外一些人也想看看这个无...

Hadoop安装 Hadoop

Hadoop如何走得更远? - 产品和技术

Hadoop如何走得更远? 发布时间:2012.05.11 12:52来源:赛迪网作者:赛迪网存储技术已经发展和成熟起来,并开始在许多数据中心处于近乎商品的地位。然而,今天的企业面临着存储技术的不断变化带来的诸多问题一个例子是推动大数据分析,一项给大型数据集带...

Hadoop安装 Hadoop