读者QQ群②:190771709,投稿请发dashuju36@qq.com
我要投稿

标签:Hadoop

hadoop生态系统的详细介绍

小数点   2017-05-15   Hadoop

1、Hadoop生态系统概况 Hadoop是一个能够对大量数据进行分布式处理的软件框架。具有可靠、高效、可伸缩的特点。 Hadoop的核心是HDFS和MapReduce,hadoop2.0还包括YARN。 下图为hadoop的生态...

阅读全文

零基础搭建Hadoop大数据处理-初识

招聘办女秘书   2017-05-03   Hadoop

文|欢醉 在互联网的世界中数据都是以TB、PB的数量级来增加的,特别是像BAT光每天的日志文件一个盘都不够,更何况是还要基于这些数据进行分析挖掘,更甚者还要实时进行数据分析,学习,如双...

阅读全文

Hadoop没有消亡,它是大数据的未来

小数点   2017-05-03   Hadoop

作者:数据之王 人认为 Hadoop 正在失败,但硅谷数据管理公司 Hortonworks 的总经理 Vamsi K. Chemitiganti 并不这么看,为了反驳此前一篇文章《为什么 Hadoop 正在消亡?(Why Hadoop is F...

阅读全文

Spark:超越Hadoop MapReduce

数据有意思   2017-04-19   Spark

引言:和 Hadoop 一样,Spark 提供了一个 Map/Reduce API(分布式计算)和分布式存储。二者主要的不同点是,Spark 在集群的内存中保存数据,而 Hadoop 在集群的磁盘中存储数据。 大数据对一...

阅读全文

分布式计算开源框架Hadoop入门实践(二)

雪姬   2017-04-18   Hadoop

作者:岑文初 其实参看Hadoop官方文档已经能够很容易配置分布式框架运行环境了,不过这里既然写了就再多写一点,同时有一些细节需要注意的也说明一下,其实也就是这些细节会让人摸索半天。H...

阅读全文

Hadoop常见错误

小数点   2017-04-16   干货教程

常见问题及处理 mysql版本,必须是MYSQL5.1。 查询办法mysqladmin version 在建立hive数据库的时候,最好是:create database hive; oozie的数据库,同样:create database oozie; hadoop...

阅读全文

大数据道场(HDP SandBox) 初探

数据有意思   2017-04-12   Hadoop

文|半吊子全栈工匠 这里的大数据道场是以HDP sandbox 为基础的,安装好了virtual box,导入了sandbox镜像之后,启动虚拟机,来看看我们的大数据道场吧。 访问方式 通过SSH的终端访问是不二...

阅读全文

2017数据库大趋势 PostgreSQL最受关注

大象会跳舞   2017-04-02   数据库

国外知名 IT 技术媒体 Jaxenter 进行了数据库观点调查,对开发者眼中数据库领域最热门的话题、最热门的数据存储以及处理工具进行统计汇总。调研的目标,是观察 2017 数据库大趋势。Jaxenter...

阅读全文

留一份备用 2016 年 NoSQL 介绍

雪姬   2017-03-28   NoSQL

在万维网的早期,看到一张道路挖掘工人的动画GIF以及标题“正在建设中”是很常见的。 这是未完成的网站,相当于要访客原谅这些混乱。 随着网络的成熟,那些“正在建设中”的GIF消失了。 然而,...

阅读全文

IT趋势与数字商务

诺蓝   2017-03-28   趋势观察

当前的IT 趋势可以归结为社交网络、移动技术、大数据、云计算和物联网五大技术,这些技术并不是独立的,而是为了商业创新而存在。数字商务是这个时代的新型商业模式,为了获得智能手机用户...

阅读全文