Hadoop 三大发行版本
Hadoop三大发行版本：Apache、Cloudera、Hortonworks。
Apache版本最原始（最基础）的版本，对于入门学习最好。
Cloudera在大型互联网企业中用的较多。
Hortonworks文档较好。
1. Apache Hadoop
官网地址：http://hadoop.apache.org/releases.html
下载地址：https://archive.apache.org/dist/hadoop/common/
2. Cloudera Hadoop
官网地址：https://www.cloudera.com/downloads/cdh/5-10-0.html
下载地址：http://archive-primary.cloudera.com/cdh5/cdh/5/
（1）2008年成立的Cloudera是最早将Hadoop商用的公司，为合作伙伴提供Hadoop的商用解决方案，主要是包括支持、咨询服务、培训。
（2）2009年Hadoop的创始人Doug Cutting也加盟Cloudera公司。Cloudera产品主要为CDH，Cloudera Manager，Cloudera Support
（3）CDH是Cloudera的Hadoop发行版，完全开源，比Apache Hadoop在兼容性，安全性，稳定性上有所增强。
（4）Cloudera Manager是集群的软件分发及管理监控平台，可以在几个小时内部署好一个Hadoop集群，并对集群的节点及服务进行实时监控。Cloudera Support即是对Hadoop的技术支持。
（5）Cloudera的标价为每年每个节点4000美元。Cloudera开发并贡献了可实时处理大数据的Impala项目。
3. Hortonworks Hadoop
官网地址：https://hortonworks.com/products/data-center/hdp/
下载地址：https://hortonworks.com/downloads/#data-platform
（1）2011年成立的Hortonworks是雅虎与硅谷风投公司Benchmark Capital合资组建。
（2）公司成立之初就吸纳了大约25名至30名专门研究Hadoop的雅虎工程师，上述工程师均在2005年开始协助雅虎开发Hadoop，贡献了Hadoop80%的代码。
（3）雅虎工程副总裁、雅虎Hadoop开发团队负责人Eric Baldeschwieler出任Hortonworks的首席执行官。
（4）Hortonworks的主打产品是Hortonworks Data Platform（HDP），也同样是100%开源的产品，HDP除常见的项目外还包括了Ambari，一款开源的安装和管理系统。
（5）HCatalog，一个元数据管理系统，HCatalog现已集成到Facebook开源的Hive中。Hortonworks的Stinger开创性的极大的优化了Hive项目。Hortonworks为入门提供了一个非常好的，易于使用的沙盒。
（6）Hortonworks开发了很多增强特性并提交至核心主干，这使得Apache Hadoop能够在包括Window Server和Windows Azure在内的Microsoft Windows平台上本地运行。定价以集群为基础，每10个节点每年为12500美元。
相关文章：
MongoDB主动撤回SSPL的开源许可申请
2018年10月，MongoDB将其开源协议更换为SSPL，虽然在当时引起了很大的争议，但是MongoDB始终坚信SSPL符合符合开源计划的批准标准，并向Open Source Initiative （以下简称OSI）提交了申请。不过，近日…
MATLAB【八】———— matlab 读取单个（多个）文件夹中所有图像
0.matlab 移动（复制）文件到另一个文件夹 sourcePath .\Square_train; targetPath .\Square_test; fileList dir(sourcePath); for k 3 :5: length(fileList) movefile([sourcePath,\,fileList(k).name],targetPath); end %copyfile([sourcePat…
JAVA IO学习
2019独角兽企业重金招聘Python工程师标准>>> 很多初学者接触IO时，总是感觉东西太多，杂乱的分不清楚。其实里面用到了装饰器模式封装，把里面的接口梳理一下之后，就会觉得其实蛮清晰的 相关的接口和类 接口或类描述Input…
Java面向对象三大特征 之 多态性
1、理解多态性：可以理解为一个事物的多种形态 2、对象的多态性：父类的引用指向子类的对象（子类的对象赋给父类的引用） 3、多态的使用：虚拟方法的调用 子类中定义了与父类同名同参数的方法（重写ÿ…
Bootstrap3基础 btn-group-vertical 按钮组（横着、竖着排列）
内容参数OS Windows 10 x64 browser Firefox 65.0.2 framework Bootstrap 3.3.7 editor Visual Studio Code 1.32.1 typesetting Markdowncode <!DOCTYPE html> <html lang"zh-CN"><head><meta charset&quo…
ISP【二】————camera ir图
1. 加串解串芯片作用？ A: 加串和解串是成对出现的，串行器在模组内，将并行信号转换为串行信号，然后用一根线可以实现远距离传输。sensor输出的raw data如果不加串，需要８根线传输，很难传输很远&a…
Hadoop运行模式 之 本地运行模式
Hadoop的运行模式包括：本地模式、伪分布式模式以及完全分布式模式 Hadoop官网地址：https://hadoop.apache.org/ 本次使用的Hadoop的版本是2.7.2 官网文档：https://hadoop.apache.org/docs/r2.7.2/hadoop-project-dist/hadoop-common/Single…
一些使用Vim的小技巧
7.增加注释（一个操作应用在多行）比如需要增加#或者是//这种注释：Ctrl v 定位到开始行，然后选定需要的行，然后执行 I命令，然后输入 # 或 //，然后按 Esc键两次，即可把注释操作应用到所…
SpringBoot注解大全 转
2019年3月17日22:30:10 一、注解(annotations)列表 SpringBootApplication：包含了ComponentScan、Configuration和EnableAutoConfiguration注解。其中ComponentScan让spring Boot扫描到Configuration类并把它加入到程序上下文。 Configuration 等同于spring的XML配置…
MATLAB【九】————ICP算法实现
1.ICP推导与求解 https://zhuanlan.zhihu.com/p/35893884 2.算法实现： % 程序说明：输入data_source和data_target两个点云，找寻将data_source映射到data_targe的旋转和平移参数 clear; close all; clc; %% 参数配置 kd 1; inlier_ratio …
Centos 7环境下源码安装PostgreSQL数据库
马上就要去实习了，工作内容是搞数据仓库方面的，用的是postgresql关系型数据库，于是自己先来了解下这种数据的用法，之后说说这个数据库和MySQL的关系和区别。 1.Postgresql简介 看了下官网上的介绍，全球最高级的开源关系…
Oracle job procedure 存储过程定时任务
Oracle job procedure 存储过程定时任务 oracle job有定时执行的功能，可以在指定的时间点或每天的某个时间点自行执行任务。 一、查询系统中的job，可以查询视图 --相关视图 select * from dba_jobs; select * from all_jobs; select * from user_jobs; -…
Hadoop运行模式 之 伪分布式运行模式
什么是伪分布式模式？它与本地运行模式以及完全分布式模式有什么区别？ 伪分布式的配置信息，完全是按照完全分布式的模式去搭建的，但是它只有一台服务器，可以用于学习和测试，真正的开发中不可以使用。 目录…
【C++】【一】结构体数组
demo7:函数份文件编写 swap.h #include <iostream> using namespace std;//函数的声明 void swap(int a, int b); swap.cpp #include "swap.h"//函数的定义 void swap(int a, int b) {int temp a;a b;b temp;cout << "a " << a …
Message、Handler、Message Queue、Looper之间的关系
2019独角兽企业重金招聘Python工程师标准>>> 在单线程模型下，为了解决线程通信问题，Android设计了一个通信机制。Message Queue(消息队列)， 线程间的通信可以通过Message Queue、Handler和Looper进行信息交换。下面将对它们进行逐…
在linux中只将“桌面”修改成“Desktop”而系统仍然使用中文
在安装好centos系统以后，它的Desktop，Downloads等文件夹都是中文的，桌面，下载等，这样在使用cd命令时特别不方便 解决方法一：下载一个中文输入法，安装 解决方法二： 修改il8n文件&a…
Zabbix 3.0 从入门到精通(zabbix使用详解)
第1章 zabbix监控 1.1 为什么要监控 在需要的时刻，提前提醒我们服务器出问题了 当出问题之后，可以找到问题的根源 网站/服务器 的可用性 1.1.1 网站可用性 在软件系统的高可靠性（也称为可用性，英文描述为HA，High Avail…
MacBook如何用Parallels Desktop安装windows7/8
虽然MacBook真的很好用，不过在天朝的国情下，有很多软件还是仅支持IE和windows系统下才有。所以有必要为自己的MacBook装一个windows版本的系统，之前试过用Boot Camp来建立分区和安装win7，之后自己又用Parallels Desktop安装过win8…
在IDEA 中为Maven 配置阿里云镜像源
打开IntelliJ IDEA->Settings ->Build, Execution, Deployment -> Build Tools > Maven 注意要勾选上override 自己创建一个settings.xml文件， 内容如下 <settings xmlns"http://maven.apache.org/SETTINGS/1.0.0"xmlns:xsi"http:/…
【匹配算法】渐进一致采样 PROSAC(PROgressive SAmple Consensus)
方法简介 渐进一致采样法1 (PROSAC) 是对经典的 RANSAC2 中采样的一种优化。相比经典的 RANSAC 方法均匀地从整个集合中采样，PROSAC 方法是从不断增大的最佳对应点集合中进行采样的。所以这种方法可以节省计算量，提高运行速度。 论文：https:…
阿里巴巴开源的 Blink 实时计算框架真香
Blink 开源了有一段时间了，竟然没发现有人写相关的博客，其实我已经在我的知识星球里开始写了，今天来看看 Blink 为什么香？ 我们先看看 Blink 黑色版本： 对比下 Flink 版本你就知道黑色版本多好看了。 你上传 jar 包的时…
【地图API】收货地址详解2
上次讲解的方法是： 在地图中心点添加一个标注，每次拖动地图就获取地图中心点，再把标注的位置设置为地图中心点。可参考教程：http://www.cnblogs.com/milkmap/p/6126424.html 可能有开发者觉得，这个算法会有“延时”&am…
MATLAB【十三】————仿真函数记录以及matlab变成小结
part one：matlab 编程小结。 1.char 与string的区别，char使用的单引号 ‘’ ，string使用的是双引号“”。 2.一般标题中的输出一定要通过 num2str 处理，画图具体的图像细节参考：https://blog.csdn.net/Darlingqiang/ar…
IDEA HDFS客户端准备
在此之前：先进行在IDEA 中为Maven 配置阿里云镜像源 1、将资料包中的压缩包解压到一个没有中文的目录下 2、配置HADOOP_HOME环境变量 3、配置Path环境变量 4、创建一个Maven工程HDFSClientDemo 5、在pom.xml中添加依赖 <dependencies><dependency><g…
12 Java面向对象之多态
JavaSE 基础之十二12 Java面向对象之多态 ① 多态的概念及分类 多态的概念：对象的多种表现形式和能力多态的分类 1. 静态多态：在编译期间，程序就能决定调用哪个方法。方法的重载就表现出了静态多态。 2. 动态多态：在程序运行…
MATLAB【十四】————遍历三层文件夹操作
文件夹遍历 clear; clc; close all;%% crop the im into 256*256 num 0; %% num1 内缩3个像素 num 2 内缩6个像素 load(qualitydata1.mat) load(qualitydata2.mat)[data1_m,data1_n] size(qualitydata1); [data2_m,data2_n] size(qualitydata2);%% read image_name …
LoadRunner监控Linux
有的linux机器上安装rpc后会保存如下： test -z "/usr/local/sbin" || mkdir -p -- . "/usr/local/sbin"/bin/install -c rpc.rstatd /usr/local/sbin/rpc.rstatd make[2]: Nothing to be done for install-data-am. make[2]: Leaving directory…
scala while循环中断
Scala内置控制结构特地去掉了break和continue，是为了更好的适应函数化编程，推荐使用函数式的风格解决break和contine的功能，而不是一个关键字。 如何实现continue的效果 Scala内置控制结构特地也去掉了continue，是为了更好的适应…
05-04-查看补丁更新报告
《系统工程师实战培训》 -05-部署补丁管理服务器 -04-查看补丁更新报告 作者：学 无 止 境QQ交流群：454544014///安装报表工具（在100-Admin01上面安装如下工具，方便查看WSUS更新补丁报告!）Microsoft System CLR Types f…
ISP【三】———— raw读取、不同格式图片差异
part zero: 如何处理.raw格式数据，读取和转化 matlab读取raw图 （mark读取图片尺寸和位数均可设置，图片尺寸M,N，图片数据类型8bit,16bit改成uint16） clear; clc; close all; % % rotpath imread(D:\matlab\ncc_ive…