大数据

微软即将开源REEF大数据框架

微软即将开源REEF大数据框架

微软开发出一套名为REEF(即可保留评估执行框架的简称)的大数据框架,并有意在一个月之内将其推向开源。REEF在设计上以下一代Hadoop资源管理器YARN为运行基础,尤其适合完成机器学习类任务。微软公司技术研究员兼信息服务部门CTO Raghu Rama...

Hadoop教程
Hadoop DataNode不能正常工作的原因

Hadoop DataNode不能正常工作的原因

在把Hadoop环境搭建成功,并且也Hadoop的各个组件都正常工作。在重启过几次Hadoop后发现DataNode不能正常工作,打开Hadoop 的后台http://localhost:50030和http://localhost:50070发现Lives...

Hadoop
IBM大数据成“未来新石油”

IBM大数据成“未来新石油”

IBM认为,大数据将成为对于企业而言至关重要的“未来新石油”,成为企业竞争优势的基础,改变企业决策、价值创造和价值实现的方式。记者调查获悉,致力大数据研究和应用及实践,已经成为了很多IT和通信企业的方向,更有行业弄潮儿率先发展相关产业,走在了行...

大数据 IBM大数据
大数据合作竞争 中关村硅谷演新双城记

大数据合作竞争 中关村硅谷演新双城记

随时代发展中关村纷纷建立起云计算、大数据相关产业优势资源整合联盟(中关村云计算产业基地、中关村云计算产业联盟中关村大数据日),不仅突出以中关村为代表的中国本土在迎接第三次IT技术革命浪潮中的优势和实力,也强调了本地区资源在新形势下的技术创新和...

HDFS元数据解析

HDFS元数据解析

1、元数据(Metadata):维护HDFS文件系统中文件和目录的信息,分为内存元数据和元数据文件两种。NameNode维护整个元数据。HDFS实现时,没有采用定期导出元数据的方法,而是采用元数据镜像文件(FSImage)+日子文件(edits)的备份机制。2...

Hadoop实战 HDFS
lucene/solr的缺点

lucene/solr的缺点

lucene/solr的缺点 solrlucenehadoop 1) http 请求做了cache,有时候会出现新数据不可见,cache滞后的问题。—cache优化下也不是问题2) admin...

Hadoop部署
IBM发布“大数据”调研白皮书

IBM发布“大数据”调研白皮书

IBM宣布在全球发布针对“大数据”的调研白皮书《分析:大数据在现实世界中的应用》,大数据白皮书下载,阐述了当今组织对“大数据”的观点,揭示了这些组织着手实践 “大数据”的方式,同时也反映了这些组织利用“大数据”服务自身业务的进展。...

谷歌Google Cloud SQL完全试用指南

谷歌Google Cloud SQL完全试用指南

一切都会因为Google Cloud SQL的推出而有所好转,介绍了申请步骤,经过差不多三天的等待后,申请通过,之后我尝试了建立Google Cloud SQL数据库,并往其中导入数据。...

Google Cloud google