Hunk助力全球组织实现便捷Hadoop分析(1)
2014年5月7日--日前，领先的实时运维智能软件供应商Splunk Inc.（NASDAQ：SPLK）宣布推出面向Hadoop与NoSQL Data Stores的6.1版HunkTM: Splunk? Analytics for Hadoop and No...
Hadoop部署
Hadoop不是万能的 要明确场景扬长避短
叶琪表示，Hadoop不是万能的，不能解决所有的大数据需求，自身还有安全、实时性、SQL能力等诸多缺陷，一定明确需求和使用场景，用其长弃其短。在培训中他会分享Haodop系统的规划设计、建设、运维在电信行业的实施。-什么原因吸引你钻研Hadoop技术？...
浅谈OpenStack的数据中心级应用
程辉是OpenStack在中国最早期的推广者和实践者，UnitedStack的创始人，他将在“云计算核心技术架构论坛”深入讲解OpenStack如何构建云计算数据中心，同时也带来团队过去一年来在OpenStack产品化过程中的经验和体会...
Hadoop平台上Oozie调度系统的安装配置
OOZIE是Hadoop平台上的开源调度工具，在项目中使用OOZIE将近一年时间了，OOZIE的安装配置还是挺复杂的。为了使用起来方便顺手，需要进行很多配置。下面整理了一下OOZIE安装配置的步骤，供使用Hadoop和OOZIE的童鞋们参考，也方便自己查看。...
基于Hadoop的大数据企业前十大集合
超人气Hadoop初创公司前两名这已经不再是什么秘密了，全球的数据正在以几何数字增长，借助这股数据浪潮在全球范围内迅速成长起来一大批Hadoop的初创型公司。作为Apache的一个开源分支Hadoop几乎已经成为了大数据的代言词。据Gartner估计，目前...
角逐Hadoop市场，Cloudera与Hortonworks竞争白热化
近日，Hortonworks与数据应用平台开发商Concurrent正式建立了同盟关系，而作为Hortonworks强力竞争对手的Cloudera，为了争夺更多的Hadoop市场份额也开展了一系列计划，面对未来8亿1300万美元的市场，双方致力于在渠道上进行扩...
王健宗：革命Hadoop Spark带来百亿市场价值
Spark作为一个通用的并行计算框架，已经成为继Hadoop之后又一大热门开源项目，逐渐获得很多企业的支持。...
Java线程池管理及分布式Hadoop调度框架搭建
多线程是程序员面试时常常会面对的问题，对多线程概念的掌握和理解水平，也常常被用来衡量一个人的编程实力。不错，普通的多线程已经不容易了，那么当多线程碰到“大象”又会产生什么样的火花？这里我们为大家分享上海创行科技技术总监严澜的博文&m...
AMD数据中心大改造：90%虚拟化，用Hadoop替代Oracle
行走在这幢几乎空置、洞穴样的大楼里，它看上去依旧像货车运输仓库一样，直到AMD公司在两年多前接手并将它改建成一个数据中心。尽管这幢面积达153000平方英尺的大楼看上去更像是一个闲置的仓库，Dominguez和Bynum看到的却一个满是数据大厅的空间，芯片...
从理论到实践的剖析,一网打尽13款开源Java大数据处理工具
什么是大数据?你可能会问; 更重要的是为什么它是在几乎所有业务领域的最新趋势?由于事实上“大数据”是一个非常简单的术语 - 它正是它说 - 一个非常大的数据集。有多大?确切的答案是“一样大，你能想象”!这个数据集...
Hadoop完全分布式模式安装步骤
Hadoop模式介绍单机模式：安装简单，几乎不用作任何配置，但仅限于调试用途伪分布模式：在单节点上同时启动namenode、datanode、jobtracker、tasktracker、secondary namenode等5个进程，模拟分布式运行的...
MapReduce实现推荐系统
1.开发环境：Windows 2008 64bitJava 1.6.0_30MyEclipse 6.5环境部署见：http://www.linuxidc.com/Linux/2014-02/96528.htm2.Hadoop集群环境：O...
Hadoop完全分布式环境搭建
一. 准备工作实验环境：Vmware虚拟出的3台主机，系统为CentOS_6.4_i386用到的软件：Hadoop-1.2.1-1.i386.rpm，jdk-7u9-linux-i586.rpm主机规划：IP地址 主机名...
一个Hadoop难以查找的错误
一个Hadoop难以查找的错误This script is Deprecated. Instead use start-dfs.sh and start-yarn.shStarting namenodes on [Master132.Hadoop]...
Hadoop安装遇到的各种异常及解决办法
Hadoop安装遇到的各种异常及解决办法，在hdfs-site.xml配置文件中，配置了dfs.namenode.name.dir，在master中,该配置的目录下有个current文件夹，里面有个VERSION文件,内容如下。...
从火种到核心，浅析Hadoop大数据用户的演变
在Hadoop发展的8年时间里，我们看到一种“使用浪潮”一代又一代用户在相同的时间和类似的环境下使用Hadoop。每一个在数据处理时使用了Hadoop的用户，都面临着类似的挑战，为了让一切正常运转，要么被迫协同工作，要么干脆隔离。接下来...
Teradata：Hadoop虽大有裨益 开源市场仍欠稳
一些金融分析师们对Teradata公司在IT市场上的持续发展能力提出了质疑。虽然这部分客户确实将Hadoop提上了议事日程，但如果拥有数十年历史的数据仓库供应商都认为难度很大、客户们往往只会选择放弃。“更重要的是破除炒作带来的误解而非在现实层面...
Hadoop集群环境下的网络架构的设计与优化
大数据时代，研究大数据的IT 厂商把研究重心放在优化大数据系统软件架构、优化业务逻辑、优化数据分析算法、优化节点性能等方向，而忽略了大数据环境基础设置中网络环节的评估和优化。本文介绍了思科公司在Hadoop 集群环境下的网络架构设计与优化经验。大数据...
Hadoop虽然强大，但不是万能的
在下面这几种场景就不适合使用Hadoop：1、低延迟的数据访问Hadoop并不适用于需要实时查询和低延迟的数据访问。数据库通过索引记录可以降低延迟和快速响应，这一点单纯的用Hadoop是没有办法代替的。但是如果你真的想要取代一个实时数据库，可以尝试一下...
AWS领跑云市场 开源数据库各显神通
亚马逊领跑云市场 微软大打亲和牌这周对于亚马逊来说，应该是“悲喜交加”的一周。首先，AWS在中国的首次市场培训活动在北京拉开帷幕，来自全国各地的近400参会者让会场座无虚席，开了“AWS中国行”的好兆头。...
优酷土豆Hadoop 平台开放之路（1）
优酷土豆Hadoop 平台开放之路(1)傅杰背景早在2011 年之前，只有优酷网数据团队在使用Hadoop。两年间随着Hadoop 技术的推广以及大数据的影响，越来越多的领域都在使用Hadoop，公司的其他团队也在逐步引入Hadoop 技术。201...
Hortonworks为Hadoop发行版新增企业级功能
在近日结束的Hadoop欧洲地区峰会上，Hortonworks公布了Hortonworks Data Platform （HDP）2.1版本。这一Hadoop发行版的升级版本新增了数据治理、安全、流处理和搜索等新企业功能，代表着针对交互式SQL查询的Sting...
Hadoop基本操作命令大全
启动Hadoopstart-all.sh关闭HADOOPstop-all.sh查看文件列表查看hdfs中/user/admin/aaron目录下的文件。hadoop fs -ls /user/admin/aaron列出hdfs中/u...
联网汽车、BI与Hadoop
福特汽车公司一直走在汽车移动化的前端。这一汽车制造商力图打造最智能化的联网汽车，并把汽车移动化带到一个全新的高度。“我们应该如何把客户在移动设备上得到的体验移植到我们的汽车上？” Jim Buczkowski，福特汽车公司电子电气系统总...
