怎么为大数据处理构建高性能Hadoop集群
越来越多的企业开始使用Hadoop来对大数据进行处理分析，但Hadoop集群的整体性能却取决于CPU、内存、网络以及存储之间的性能平衡。而在这篇文章中，我们将探讨如何为H...
Hadoop
Hadoop家族的各个成员作用
这篇文章不提原理，讲讲Hadoop及其周边项目的作用。hadoop这个词已经流行好多年了，一提到大数据就会想到hadoop，那么hadoop的作用是什么呢?官方定义：hadoop是一个开发...
基于HADOOP实现历史数据线上化
在国内银行业尚无Hadoop技术成型案例的情况下，光大银行首个基于Hadoop技术的应用试点项目——历史数据查询项目于2013年10月底成功投产上线，这是Hadoop技...
从问题域出发认识Hadoop生态系统
近些年来Hadoop生态系统发展迅猛，它本身包含的软件越来越多，同时带动了周边系统的繁荣发展。尤其是在分布式计算这一领域，系统繁多纷杂，时不时冒出一个系统，号称自己比...
探索Hadoop周边生态软件和简要工作原理(二)
Sqoop：sqoop在hadoop生态系统中也是应用率比较高的软件，主要是用来做ETL工具，由yadoo研发并提交给Apache。Hadoop整个生态圈里面，大部分的应用都是Yadoo研发的，贡献非...
Hadoop家族产品的一句话经典介绍
使用Hadoop已经有一段时间了，从开始的迷茫，到各种的尝试，到现在组合应用….慢慢地涉及到数据处理的事情，已经离不开hadoop了。Hadoop在大数据领域的成功，更引发...
Hadoop峰会：数据是每一家企业的关键性战略资产
利用数据作为竞争性资产已经迅速成为区分同一垂直行业内部各企业之间成功与失败的重要依据。可以肯定地说，我们将很快看到各个行业所有企业的基础设施堆栈晋升为决...
Hadoop入门自学及对就业的帮助
晚上整理邮箱，找到了一封之前网友的关于hadoop学习的来信以及我的回信，我想应该对初学者会有帮助，就贴出来给大家看看!提问：你好：我是今年年初的时候就像学习hadoop来...
大数据来袭 传统数据库的Hadoop梦想
大数据时代已经来临，并悄悄的影响着我们的生活。根据IDC最近一项研究显示，在Facebook上每20分钟就有100万个新链接被分享，1000万条用户评论被发布。Facebook和其他所...
超越Hadoop的大数据分析之图形处理尺寸
另一个来自Google的重要工具，看起来超越了Hadoop MR——Pregel框架实现了图形计算(Malewicez et al.2010)。在Pregel中的计算是由一系列迭代组成的，被称...
YARN为Hadoop赋予新的能力
近日，Hadoop 2 GA版发布，借助于YARN，Hadoop 2可以创建能在Hadoop中本地工作的数据处理应用。通过将集群资源管理这些关注点从数据处理中分离出来，YARN使得Hadoop能应...
Hadoop：大数据处理最好工具
架构大数据解决方案的软件工程师们都知道，业务分析有一项技术跨越了SQL数据库、NoSQL数据库，非结构化数据、面向文档数据存储及大型处理。如果你猜到了Hadoop，那你回...
完全分布模式Hadoop集群安装配置 （一）
Hadoop集群的部署环境是经过虚拟化之后的四台主机，Master是Hadoop集群的管理节点，重要的hadoop安装配置工作都在它上面，至于它的功能和作用请参考HadoopAPI。...
zookeeper学习笔记一
在zookeeper中实现了一个类似file system系统的数据结构，比如/zookeeper/status。 每个节点都对应于一个znode节点。...
zookeeper的安装基本上可以按照官网，这里主要介绍下zookeeper安装部署一个集群的步骤。...
Zookeeper是hadoop的一个子项目，本文简单分析zookeeper的工作原理，对于如何使用zookeeper不是本文讨论的重点。...RedHadoop 构建更完善的Hadoop分布式操作系统
RedHadoop正在构建一个更完善的Hadoop分布式操作系统。会针对各个垂直应用领域做出持续优化比如 Data Storage,Data HouseWare,DataBase,RealTime,Data Mining,Da...
Hadoop集群与HDFS在容灾建设中的优势
Cloudera与MasterCard的合作项目，借助HDFS和Hadoop集群以及Apache Sentry，Cloudera实现了在线与离线的所有数据与元数据的保护。...
