首页 > 关键词 > Hadoop最新资讯
Hadoop

Hadoop

Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(high throughput)来访问应用程序的数据,适合那些有着超大数据集(large data set)的应用程序。HDFS放宽了(relax)POSIX的要求,可以以流的形式访问(streaming access)文件系统中的数据。Hadoop的框架最核心的设计就是:HDFS和MapReduce。HDFS为海量的数据提供了存储,则MapReduce为海量的数据提供了计算。

与“Hadoop”的相关热搜词:

相关“Hadoop” 的资讯14篇

  • 国内首家!腾讯主导Apache Hadoop新版本发布

    近日,腾讯主导的Apache Hadoop2.8. 4 最新版本发布,为国内科技公司在国际开源领域的探索迈出重要一步。2006 年Apache Hadoop发布, 2008 年Hadoop成为Apache顶级项目。在那时,中国移动、百度、淘宝等都已经开始使用Hadoop技术。Hadoop现在早已成为Apache软件基金会的金牌项目之一。不仅如此,它还孕育了包括HBase、Hive、ZooKeeper等一系列知名Apache顶级项目,它们一开始都是以Apache Hadoop子项目的形式在社区运作、为开发者?

  • 泰一指尚大数据管理平台通过中国信通院Hadoop平台性能评测

    近日,泰一指尚DMP数据聚合与管理服务平台以优异的成绩通过数据中心联盟组织的大数据产品能力认证中的Hadoop平台性能评测,这是泰一指尚大数据平台继通过基础能力评测后通过性能评测,代表着泰一指尚的大数据技术水平再次得到官方认可。大数据产品能力认证是由数据中心联盟组织,在工业和信息化部指导下,面向大数据平台产品的评估认证活动,是国内起步最早、覆盖最广、技术水平最高、影响最大的大数据评测体系。大数据产品能力认?

  • MongoDB数据库勒索风波续:下一个目标是Hadoop和CouchDB

    一波未平一波又起,当MongoDB勒索风波已导致尸横遍野,勒索者似乎又找到了新的攻击目标。

  • SAP收购云版Hadoop软件开发商Altiscale

    网易科技讯8月25日消息,据VentureBeat报道,消息人士称,德国企业软件公司SAP收购了基于云的Hadoop软件开发商Altiscale,协议金额超过1.25亿美元。Hadoop是存储、处理和分析大量不同数据的开源软件。协议预计在几周后宣布。消息人士称,Altiscale的投资者将获得3-4倍的现金回报。该公司通过风投融资至少4200万美元,其中在2014年12月就融资了3000万美元,投资者包括红杉资本等。SAP在采取行动加强云软件组合,此协议将使SAP成为H

    SAP
  • Hadoop 2013:最受关注的13款大数据产品

    2013年6月26、27日两天,在圣何塞举行的Hadoop Summit 2013,不仅是Hadoop生态圈的盛宴,也是各路玩家的战场。有超过60家大数据公司参与其中,既包括像英特尔和Salesforce.com这样的知名厂商,也有像Sqrrl和Platfora这样成立没有多久的初创公司。以下是这次峰会上展示的13款全新的或者增强的大数据产品。

  • Hadoop 中 IPC 的源码分析

    IPC模块,也就是进程间通信模块,如果是在不同的机器上,那就可以理解为 RPC 了,也就是远程调用。事实上, hadoop 中的 IPC 也就是基于 RPC 实现的。

  • 2013年Hadoop实时查询将成现实

    2013年Hadoop实时查询将成现实,Cloudera公司的两个新项目:Impala 和 Trevni,将有助在2013年实现Hadoop实时查询。

  • 如何让Hadoop运行得更快一些

    在数据处理方面,我们发现数据输入速度一般要比的数据处理速度快很多,这种现象在大数据领域尤为明显。随着数据不断膨胀,相应的响应时间自然要有所增加,数据处理的复杂度也在不断提高。作为一个开发者,我们自然非常关注系统的运行速度问题。在云计算领域,一个小技巧也许能带来系统性能的大幅度提升。对于Hadoop来说,如何提升它的速度呢?来看看下文。

  • Hadoop并非完美:8个代替HDFS的绝佳方案

    HDFS(Hadoop Distributed File System)是Hadoop项目的核心子项目,是分布式计算中数据存储管理的基础,坦白说HDFS是一个不错的分布式文件系统,它有很多的优点,但也存在有一些缺点,包括:不适合低延迟数据访问、无法高效存储大量小文件、不支持多用户写入及任意修改文件。

  • IT企业利用云计算平台Hadoop的10种方式

    如果你是世界上广大Hadoop用户的一员,你肯定知道Google曾经靠着分布式计算技术(Hadoop),在搜索引擎和广告方面取得了举世瞩目的成就。现在的Hadoop不仅是当年的老二Yahoo的专用产品了,从Hadoop长长的用户名单中,可以看到Facebook, 可以看到Linkedin,可以看到Amazon,可以看到EMC, eBay,Tweeter,IBM, Microsoft, Apple, HP…。 国内的公司有淘宝、百度等等。

  • 张晨:Hadoop开源是移动开发产业又一次机遇

    雅虎全球副总裁、董事、雅虎北京全球研发中心总裁张晨在演讲中表示,在终端下载软件24小时以内有60%意识被忽略或者放弃。而及时互动通知以及巧妙升级等手段,能显著增加用户的忠诚度。

  • Hadoop必将风靡2012年的六个理由

    毫无疑问,Hadoop已经赢得了大量投资者和IT媒体的青睐,但却很少看到任何的实际产出。即将过去的2011是风暴来袭前的准备阶段,为很多新公司新用 户建立了一个海量数据的分析平台。就连微软这样的互联网巨头都已放弃其他平台而选择Hadoop,看来Hadoop风暴来袭已指日可待。

  • 雅虎剥离Hadoop开源软件 与风投注册独立公司

    北京时间6月29日消息,据国外媒体报道,有关雅虎剥离Apache Hadoop软件业务的消息最终有了明确下文。雅虎和风险投资商标杆资本公司(Benchmark Capital)将成立一个合资公司,软件业务将转入这家独立公司。

  • 雅虎采用开源搜索软件Hadoop 对抗谷歌

    日前,雅虎紧随谷歌步伐,再次调整搜索引擎,推出Hadoop服务。Hadoop可以处理大规模的分布式运算任务,它是基于谷歌MapReduce的一个开源软件和文件系统。其通过搜索引擎可以实现所有链接。