Hadoop集群搭建（二：集群主机间免密登录配置）
实验目的及要求：
- 静态网络地址配置；
- 主机名的配置；
- 防火墙的配置，使平台相关软件的常用端口能够远程正常访问；
- 主机地址映射的配置，使所有主机能够通过主机名相互正常访问；
- 免密码登录的配置，使所有主节点能够免密码登录集群中所有其他节点，多个主节点之间能够相互免密码登录到对方，同事主节点能够免密码登录自身；
实验环境：
- VMware Workstations 14虚拟机；
- Linux CentOS 7操作系统五台；
实验内容：
1、网络环境配置五台主机分别配置静态IP地址为
cluster-01 192.168.10.111
cluster-02 192.168.10.112
cluster-03 192.168.10.113
cluster-04 192.168.10.114
cluster-05 192.168.10.115
#cd /etc/syscofig/network-scripts
#vim ifcfg-ens33
IPADDR=192.168.10.xxx //设置IP地址（添加）
NETMASK=255.255.255.0 //设置子网掩码（添加）
GATEWAY=192.168.19.1 //设置网关（添加）
BOOTPROTO=static //启用静态IP地址（修改）
ONBOOT=yes //开启自启用网络连接（修改）
(esc,:wq) //保存退出
2、各主机间互拼验证（使用cluster-01分别拼其他四台主机的IP地址）
3、防火墙配置
方法1：配置防火墙策略
命令：#Firewall-cmd –zone=public –add-port=端口号/tcp –permanent
#firewall-cmd –reload
注：由于各软件见端口号复杂且冲突，则不选择此方案；
方法2：关闭防火墙
命令：#systemctl stop firewalld.service //关闭防火墙
#systemctl disable firewalld.service //禁止防火墙服务的开机自动启动
#systemctl status firewalld.service //验证是否关闭
3.1、cluster-01 192.168.10.111
3.2、cluster-02 192.168.10.112
3.3、cluster-03 192.168.10.113
3.4、cluster-04 192.168.10.114
3.5、cluster-05 192.168.10.115
4、主机地址映射
命令：#cd /etc/
#vim hosts
进入vim编辑器在末尾添加剂群中所有主机的IP地址与主机名的映射关系
192.168.10.111 Cluster-01
192.168.10.112 Cluster-02
192.168.10.113 Cluster-03
192.168.10.114 Cluster-04
192.168.10.115 Cluster-05
将配置文件“hosts”发送给集群中所有的主机，发送目标用户为“root”用户，发送目标路径为“/etc”，
命令：
#scp -r /etc/hosts root@192.168.10.112:/etc
#scp -r /etc/hosts root@192.168.10.113:/etc
#scp -r /etc/hosts root@192.168.10.114:/etc
#scp -r /etc/hosts root@192.168.10.115:/etc
4.1、在Cluster-02主机中查看“hosts”文件是否发送过来
4.2、在Cluster-03主机中查看“hosts”文件是否发送过来
4.3、在Cluster-04主机中查看“hosts”文件是否发送过来
4.4、在Cluster-05主机中查看“hosts”文件是否发送过来
5、每台集群主机中用户创建及免密码登录配置
第一步：新建一个集群统一用户admin，并创建密码admin。
命令：
#useradd admin //创建新用户admin
#passwd amdin //给用户admin设置密码
第二步：免密码登录设置。
命令：$ssh-keygen -t rsa //生成本机系统当前登录用户的公钥和私钥文件
$l. //显示~目录下隐藏的文件
$cd .ssh //进入.ssh目录
$ls //显示目标列表，这里可以看到id_rsa.pub公钥文件
$ssh-copy-id -i ~/.ssh/id_rsa.pub admin@Cluster-02
//将公钥文件拷贝给需要进行免密码登录的目标主机和目标用户，包括本机
把本机的公钥追到目标主机的.ssh/authorized keys里
第三步：验证免密码登录
命令：#ssh admin@Cluster-02
#ssh admin@Cluster-03
#ssh admin@Cluster-04
#ssh admin@Cluster-05
//如果没有提示让你输入Cluster-02的admin用户的密码，则说明配置正确
出现的问题与解决方案：
问题：
- 登录进admin用户后输入命令$ssh-keygen -t rsa ，后进入显示~目录下隐藏文件，无文件；
- 防火墙配置允许各端口通过，操作过程复杂；
解决方案：
- 登入admin用户后应该进入#cd /home/admin 目录，在此目录下有文件.ssh；
- 直接关闭防火墙；
相关文章：
你真的会用 CocoaPods 吗？
CocoaPods 可以说是 iOS 开发应用最广泛的包管理工具，本篇文章主要介绍 CocoaPods 的第三方库是怎样从网络集成到我们本地的项目当中，也是制作私有库、开源库和 iOS 项目组件化的一个知识铺垫。 让我们从一张图片开始： CocoaPods 工作流程 …
【spring 5】AOP：spring中对于AOP的的实现
在前两篇博客中，介绍了AOP实现的基础：静态代理和动态代理，这篇博客介绍spring中AOP的实现。 一、采用Annotation方式 首先引入jar包：aspectjrt.jar && aspectweaver.jar applicationContext配置文件： <span…
通过BeanShell获取UUID并将参数传递给Jmeter
有些HTTPS请求报文的报文体中包含由客户端生成的UUID，在用Jmeter做接口自动化测试的时候，因为越过了客户端，直接向服务器端发送报文，所以，需要在Jmeter中通过beanshell获取UUID，并能将参数传递给Jmeter&…
Hadoop集群搭建（四：Zookeeper环境安装）
实验 目的 要求 目的： 1、掌握在完全分布模式的整合平台中Zookeeper的完全分布模式的安装 要求： 完成Zookeeper的完全分布农事的安装；Zookeeper服务能够正常启动和连接；Zookeeper控制台能够正常进入；Zookeeper控制台命…
史上第二走心的 iOS11-Drag Drop 教程
原文链接：www.jianshu.com只需完成个人实名注册，即可获得腾讯云免费套餐！云服务器CVM、云数据库 MYSQL、文件存储 CFS.....应有尽有！https://cloud.tencent.com/act/free 话不多说，先上效果图 普通view拖拽效果 TableV…
指针的各式定义
1，一个整形数： int a; 2，一个指向整形数的指针： int *a; 3，一个指向指针的指针，它指向的指针指向一个整形数： int **a; 4，一个有10个整形数的数组： int a[10]; 5&#…
AS 400 常用命令
转自：http://blog.chinaunix.net/uid-22375044-id-3049793.html 一、命令技巧 命令构成： CRT* (Creat) 创建 WRK* (Work With) 操作 RMV* (Remove) 去除 DSP* (Display) 显示 ADD* (Add) 添加 CHG* (Change) 改变 DLT* (Delete) 删除 CFG* (Config) 配置…
Hadoop集群搭建（五：Hadoop HA集群模式的安装）
实验 目的 要求 目的： 1、Hadoop的高可用完全分布模式的安装和验证 要求： 完成Hadoop的高可用完全分布模式的安装；Hadoop的相关服务进程能够正常的启动；HDFS能够正常的使用；MapReduce示例程序能够正常运行；…
iOS开发业界毒瘤 Hook
原文地址 为什么有这篇博文 不知道何时开始iOS面试开始流行起来询问什么是 Runtime，于是 iOSer 一听 Runtime 总是就提起 MethodSwizzling，开口闭口就是黑科技。但其实如果读者留意过C语言的 Hook 原理其实会发现所谓的钩子都是框架或者语言的设计者预留…
常用rsync命令操作梳理
作为一个运维工程师，经常可能会面对几十台、几百台甚至上千台服务器，除了批量操作外，环境同步、数据同步也是必不可少的技能。说到“同步”，不得不提的利器就是rsync。rsync不但可以在本机进行文件同步，也可以作为远程…
Word英文字符间距太大 中英文输入切换都不行
在Word中输入文字时会遇到这样的情况，就是说中文字符的间距是正常的，但是英文字符间的间距却不正常，总是太宽了，如图： 。 而且这时切换中英文输入都没用，Word的字体设置也正常。后来上网查了下，…
Hadoop集群搭建（六：HBase的安装配置）
实验 目的 要求 目的： 1、HBase的高可用完全分布模式的安装和验证 要求： 完成HBase的高可用完全分布模式的安装；HBase的相关服务进程能够正常的启动；HBase控制台能够正常使用；表创建、数据查询等数据库操作能够正常…
架构师的第一阶段：准备做（Pre-Architecture）
上节说到，做任何事情都可以分为三个阶段：准备做、做、做好。本文，就将进入第一个阶段，准备做阶段。 Pre-Architecture：准备架构 准备架构阶段，最最重要的是弄清楚要做什么东西，即掌握用户需求。…
iOS动画系列之八：使用CAShapeLayer绘画动态流量图
这篇文章通过使用CAShapeLayer和UIBezierPath来画出一个动态显示剩余流量的小动画。 最终实现的效果如下： Paste_Image.png 动态效果图： shapeLayerAni.gif 1. CAShapeLayer 实际中，能够用CALayer完成的任务是比较少的，如果使用这…
hiho_1139_二分+bfs搜索
题目 给定N个点和M条边，从点1出发，到达点T。寻找路径上边的个数小于等于K的路径，求出所有满足条件的路径中最长边长度的最小值。 题目链接:二分 最小化最大值，考虑采用二分搜索。对所有的边长进行排序，二分&#x…
Hadoop集群搭建（七：MySQL的安装配置）
实验 目的 要求 目的： 1、掌握MySQL在集群平台中的安装 要求： 完成MySQL的集群版的安装；MySQL集群的相关服务进程能够正常启动；MySQL集群的SQL服务能够作为系统服务开机自动启动；MySQL客户端能够远程连接MySQL集群的…
如何在VMware虚拟机上安装Linux操作系统（Ubuntu）
作为初学者想变为计算机大牛非一朝一夕，但掌握基本的计算机操作和常识却也不是多么难的事情。所以作为一名工科男，为了把握住接近女神的机会，也为了避免当白痴，学会装系统吧！of course为避免把自己的电脑作为牺牲品&am…
cf #363 b
B. One Bombtime limit per test1 secondmemory limit per test256 megabytesinputstandard inputoutputstandard outputYou are given a description of a depot. It is a rectangular checkered field of n m size. Each cell in a field can be empty (".") or…
swift-video-generator：图片加音频生成视频及多视频合并库及演示
阅读 80收藏 92017-11-07原文链接：github.com腾讯云学生优惠套餐，985高校学习云计算的主力机型，2G2核，1M带宽系统盘（Linux 50G/Windows 50G）免费赠送50GB对象存储空间还有.cn域名一年使用权！不要…
Hadoop集群搭建（八：Hive的安装配置）
实验 目的 要求 目的： （1）掌握数据仓库工具Hive的安装和配置； 要求： 完成Hive工具的安装和配置；Hive工具能够正常启动运行；Hive控制台命令能够正常使用；能够正常操作数据库、表、…
iOS 富文本编辑工厂, 让书写更简便.
由于最近常用富文本, 在编辑一个富文本时需要操作很多的属性, 书写起来很不方便. 所以我将这些相关属性整理并使用链式方式将它简化了一下. 效果请看下面Demo. 项目工程 实现很简单, 我嘴太笨, 这里就不介绍了, 如有兴趣直接看源码吧. 同时可以通过cocoapods来使用它. pod SJAt…
ORACLE 数据的逻辑组成
数据块（block）Oracle数据块（Data Block）是一组连续的操作系统块。分配数据库块大小是在Oracle数据库创建时设置的，数据块是Oracle读写的基本单位。数据块的大小一般是操作系统块大小的整数倍，这样可以避免不…
Java 的zip压缩和解压缩
Java 的zip压缩和解压缩好久没有来这写东西了，今天中秋节，有个东西想拿出来分享，一来是工作中遇到的问题，一来是和csdn问候一下，下面就分享一个Java中的zip压缩技术，代码实现比较简单,代码如下：…
Hadoop集群搭建（九：各服务的启动）
1、查看Zookeeper服务状态，若集群中只有一个"leader"节点， 其余的均为"follower"节点，则集群的工作状态正常 $zkServer.sh status 2、在集群中所有主机上使用此命令，启动Zookeeper服务 $zkServer.sh start…
iOS 后台下载及管理库
说起下载第一个想起的就是ASI。一年前接手的新项目是核心功能是视频相关业务，在修改和解决视频下载相关的问题的时候让我体会到了ASI的下载的强大。后来新需求需要视频后台下载，使用NSURLSession的时候，更加深刻的体会到了ASI的强大好用。后来…
（转） 使用Speech SDK 5.1文字转音频
下载地址： http://www.microsoft.com/en-us/download/details.aspx?id10121 SeppchSDK51.exe 语音合成引擎 SpeechSDK51LangPack.exe 支持日语和简体中文需要这个支持。 SpeechSDK51MSM.exe 如果要将引擎作为产品的一部分发布需要这个。 Sp5TTintXP.exe XP下Mike和…
IE8下面的line-height的bug
当line-height小于正常值时，超出的部分将被剪裁掉转载于:https://www.cnblogs.com/jsingleegg/p/js_ie8.html
Hadoop集群的基本操作（一：HDFS操作及MapReduce程序练习）
实验 目的 要求 目的： 理解HDFS在Hadoop体系结构中的角色；熟练使用HDFS操作常用的Shell命令；了解Hadoop集群MapReduce程序的简单使用；（上传WordCount的jar执行程序；使用WordCount进行MapReduce计算&#x…
iOS实现动态区域裁剪图片
阅读 249收藏 322017-11-29原文链接：github.com想自己动手搭建一个 Discuz 论坛？试试腾讯云上实验室吧https://cloud.tencent.com/developer/labs 裁剪图片功能在很多上传图片的场景里都需要用到，一方面应用服务器可能对图片的尺寸大小有限制…
每天CookBook之JavaScript-062
鼠标进入事件鼠标离开事件<!DOCTYPE html> <html lang"en"> <head><meta charset"UTF-8"><title>062</title> </head> <body> <div><img src"001" alt"001"><img src…