大数据

开源Hadoop发展迅猛 用户与厂商各取所需

开源Hadoop发展迅猛 用户与厂商各取所需

就大数据的核心而言,Hadoop是一个用于有效存储和处理大数据的开源架构。多年来,开源初创公司Cloudera和Hortonworks在 Hadoop市场一直占有绝对地位,诸如Oracle、微软以及其他一些公司也想在这个市场占有一席之地,但更多是通过与专业的H...

Hadoop安装
Hadoop的核心思想

Hadoop的核心思想

Hadoop包括两大核心,分布式存储系统和分布式计算系统。1.1.1.1. 分布式存储为什么数据需要存储在分布式的系统中哪,难道单一的计算机存储不了吗,难道现在的几个TB的硬盘装不下这些数据吗?事实上,确实装不下。比如,很多的电信通话记录就存储在很多台...

Hadoop安装
hadoop权威指南——IBM与AWS关键看啥?

hadoop权威指南——IBM与AWS关键看啥?

Hadoop:不是选配而是发展趋势就大数据的核心而言,Hadoop是一个用于有效存储和处理大数据的开源架构。多年来,开源初创公司Cloudera和Hortonworks在Hadoop市场一直占有绝对地位,诸如Oracle、微软以及其他一些公司也想在这个市场...

Hadoop安装 AWS
联网汽车、BI与Hadoop

联网汽车、BI与Hadoop

福特汽车公司一直走在汽车移动化的前端。这一汽车制造商力图打造最智能化的联网汽车,并把汽车移动化带到一个全新的高度。“我们应该如何把客户在移动设备上得到的体验移植到我们的汽车上?” Jim Buczkowski,福特汽车公司电子电气系统总...

Hadoop部署
大数据处理利器:Hadoop具有五大优势

大数据处理利器:Hadoop具有五大优势

现在,如果你没有听说过Hadoop,那么你一定落伍了。作为一个全新的开源项目,Hadoop提供了一中新的方式用来存储和处理器数据。大型的互联网公司,如谷歌、Facebook都使用Hadoop来存储和管理它们庞大的数据集。Hadoop也通过在这些领域的应用证明了...

Hadoop实战
大数据时代你不得不了解的大数据处理工具

大数据时代你不得不了解的大数据处理工具

如今Apache Hadoop已成为大数据行业发展背后的驱动力。Hive和Pig等技术也经常被提到,但是他们都有什么功能,为什么会需要奇怪的名字(如Oozie,ZooKeeper、Flume)。Hadoop带来了廉价的处理大数据(大数据的数据容量通常是10...

Hadoop安装
英特尔放弃自家大数据处理软件Hadoop版本

英特尔放弃自家大数据处理软件Hadoop版本

3月28日消息,据国外媒体报道,科技博客网站VentureBeat获悉,英特尔将宣布停止发行自家开放源代码大数据处理软件Hadoop版本,转而支持快速增长的大数据公司Cloudera的Hadoop版本。知情人士向VentureBeat报料,英特尔旗下投资机...

Hadoop教程
切勿妄谈Hadoop,以及4个数据管道打造实践

切勿妄谈Hadoop,以及4个数据管道打造实践

时至今日,大数据这个概念已充斥了整个IT界,各种“搭载”了大数据技术的产品,各种用于处理大数据工具更如雨后的春笋触目皆是。同时,如果某个产品还没抱上大数据的大腿,如果某个机构还没捣鼓过基于Hadoop、Spark、Impala、Stor...

Hadoop安装
不看不知道:六个超大规模Hadoop部署案例

不看不知道:六个超大规模Hadoop部署案例

虽然Hadoop是眼下热闹非凡的大数据领域最热话题,但它肯定不是可以解决数据中心和数据管理方面所有难题的灵丹妙药。考虑到这一点,我们暂且不想猜测这个平台未来会如何,也不想猜测各种数据密集型解决方案的开源技术未来会如何,而是关注让Hadoop越来越火的实...

Hadoop部署
Hadoop发展历程以及配套项目

Hadoop发展历程以及配套项目

Hadoop发展历程是怎样的呢?Hadoop原本来自于谷歌一款名为MapReduce的编程模型包。谷歌的MapReduce框架可以把一个应用程序分解为许多并行计算指令,跨大量的计算节点运行非常巨大的数据集。使用该框架的一个典型例子就是在网络数据上运行的搜索...

Hadoop部署
Hadoop:不是选配而是发展趋势

Hadoop:不是选配而是发展趋势

就大数据的核心而言,Hadoop是一个用于有效存储和处理大数据的开源架构。多年来,开源初创公司Cloudera和Hortonworks在Hadoop市场一直占有绝对地位,诸如Oracle、微软以及其他一些公司也想在这个市场占有一席之地,但更多是通过与专业的Ha...

Hadoop教程
Hortonworks再获1亿美元融资,Hadoop领域三足鼎立

Hortonworks再获1亿美元融资,Hadoop领域三足鼎立

对于Hadoop领域的人来说,不管是WhatsApp卖了190亿美元,还是91卖了19亿美元,亦或是红极一时的余额宝和微信红包等,都只是茶语饭后的谈资罢了,大家更关心的显然是大数据产业的现状以及Hadoop生态圈的发展情况。本次为大家分享的是Hadoop领域3...

Hadoop安装
腾讯TDW项目:开源的分布式数据仓库

腾讯TDW项目:开源的分布式数据仓库

本期,我们采访的是腾讯TDW开源项目负责人、腾讯高级工程师赵伟。赵伟,腾讯数据平台部高级工程师,腾讯大数据平台分布式数据仓库(TDW)的技术负责人,开源软件爱好者,是腾讯内部Hive、Pig、PostgreSQL、ZFS等开源技术的引入和推广者。目前主要负...

Hadoop实战
Hadoop从业者收入超过Oracle DBA

Hadoop从业者收入超过Oracle DBA

在我们上一次的数据库工程师薪酬调查报告中,Oracle DBA的平均收入是最高的,而这一情况在2013年出现了变化。伴随大数据时代的到来,包括Hadoop、NoSQL相关技术的从业人员收入大部分高于平均水平。根据本次调查显示,Hadoop从业者的平均年收入最高...

Hadoop教程
Hadoop市场将在2020年前保持高速增长

Hadoop市场将在2020年前保持高速增长

根据联合市场调研(Allied Market Research,AMR)的一份最新报告,对Hadoop市场(硬件、软件、服务和HaaS、最终应用以及地理)行业发展趋势预测:2020年,全球的Hadoop市场预计在2013至2020年将以58.2%的复合年增长率...

Hadoop
大数据与Hadoop:并不能简单划等号

大数据与Hadoop:并不能简单划等号

3月14日,IDC宣布近期发布《中国Hadoop MapReduce生态系统分析》报告,报告指出,在中国,Hadoop 应用正在从互联网企业,逐渐拓展到电信,金融,政府,医疗这些传统行业。虽然目前Hadoop应用场景还是以日志存储、查询和非结构化数据处理为主,...

Hadoop安装