Hadoop部署

Hadoop的虚拟化之恋：应对大数据挑战

高速增长的数据量和日益增加的竞争压力，让越来越多的企业开始思考如何挖掘这些数据的价值。传统的BI系统、数据仓库和数据库系统都不能很好地处理这些数据。原因包括：1.数据量太大，传统数据库不能有效存储并维持可以接受的性能;2.新产生的数据往往是非结构...

Hadoop部署 Hadoop

数据仓库与Hadoop需分工合作

大数据热引发了人们对Hadoop的极大兴趣，同时也引来一些误解，认为既然Hadoop能帮助解决数据的处理和分析问题，它就可以替代传统的数据仓库。“数据仓库(数据库)与Hadoop(MapReduce)其实是两类有着很大区别的技术，这两者之间不是...

Hadoop部署 Hadoop

hadoop配置、运行错误总结

新手搞hadoop最头疼各种各样的问题了，我把自己遇到的问题以及解决办法大致整理一下先，希望对你们有所帮助。一、hadoop集群在namenode格式化(bin/hadoop namenode -format)后重启集群会出现如下 (问题非常明显，基本无疑...

Hadoop部署 Hadoop

基于HADOOP实现历史数据线上化

在国内银行业尚无Hadoop技术成型案例的情况下，光大银行首个基于Hadoop技术的应用试点项目——历史数据查询项目于2013年10月底成功投产上线，这是Hadoop技术在银行系统应用上的一个重要里程碑。从硅谷到北京，从中关村到金融...

Hadoop部署 Hadoop

AIX下安装Hadoop

想知道Hadoop在Aix下的安装是否会有什么不同，于是心血来潮的安装了一遍，过程记录如下：1.在Aix上安装解压缩软件，安装Java等，这里就不说了。2.下载Hadoop0.21.0版本，并解压至特定目录下，这里解压到 /home/cqq/hadoop-0.21.0。...

Hadoop部署 aix Hadoop

hadoop深入研究:codec

codec其实就是coder和decoder两个单词的词头组成的缩略词。使用CompressionCodes解压缩 CompressionCodec有两个方法可以方便的压缩和解压。 压缩：通过createOutputStream(OutputStream out)方法获得CompressionOutputStream对象...

Hadoop部署 codec Hadoop

“数据银行”与“云存储”

数据不仅代表着生产力，还将成为重要的资产，或许在将来，我们留给下一代的资产，不是银行里有多少存款，而是信息资产；也许10年、15年之后，会有国家的数据银行，相对今天的财富资产，里面保存的是我们的信息资产。...

Hadoop部署 云存储 数据银行 云存储

Pivotal为Hadoop提供内存数据处理能力

在Pivotal HD Enterprise中，Pivotal GemFire XD内存数据服务与Pivotal HAWQ搜索引擎整合，为Hadoop增加了SQL表达能力，利用Hadoop作为公共存储基础，为建立整合OLTP和OLAP的闭环分析解决方案提供了业界首款生产质量的平台。...

Hadoop部署 Pivotal Hadoop

hadoop是什么？怎么用hadoop？

hadoop是什么?(1)Hadoop是一个开源的框架，可编写和运行分布式应用处理大规模数据，是专为离线和大规模数据分析而设计的，并不适合那种对几个记录随机读写的在线事务处理模式。Hadoop=HDFS(文件系统，数据存储技术相关)+ Mapreduc...

Hadoop部署 Hadoop