Tag - CentOS

CentOS rsync    2017-07-19 22:22:46    8
一、安装rsync(server和client)
    yum install rsync
二、服务器配置rsync
修改配置:
    # vi /etc/xinetd.d/rsync
把原来的disable ,YES改成NO
 

 
3、配置/etc/rsyncd.conf(需要手动生成)
# vi /etc/rsyncd.conf
 

log file = /usr/local/rsync/var/rsyncd.log  //日志文件

pid file = /usr/local/rsync/var/rsyncd.pid  //pid文件路径

lock file = /usr/local/rsync/var/rsyncd.lock //指定lock文件

secrets file = /usr/local/rsync/etc/rsyncd.pas  //指定用户密码对文件

motd file = /usr/local/rsync/etc/rsyncd.motd  //指定欢迎消息文件

read only = no  //是否只读(若从客户端同步到服务器必须设置为NO)

hosts allow = 192.168.0.0/16,192.168.10.0/24  //允许的IP段

list = yes  //是否允许列表

uid = nobody  //rsync以什么用户身份启动

gid = nobody  //rsync以什么用户组身份启动

use chroot = no  //

max connections = 4  //最大连接数

[bak]  //模块

path = /bak  //模块目录

comment = www bak  //描述信息,可以任意填写

auth users = bak  //认证的用户,服务器必须存在这个系统用户

(保存退出)

-----------以下为rsyncd.conf配置文件内容,rsync配置直接拷贝-------

log file = /var/rsyncd.log
pid file = /var/rsyncd.pid
lock file = /var/rsyncd.lock
secrets file = /etc/rsyncd.pas
motd file = /etc/rsyncd.motd
read only = no
hosts allow = 192.168.0.0/16,192
CentOS SSH linux    2017-07-19 22:21:34    6
预先配置:
    master:192.168.10.128
    slave:192.168.10.135
    修改方式    
    # vi /etc/sysconfig/network
    将HOSTNAME修改为master或者slave

1、创建新用户(两台机器,root用户)
    # useradd hadoop
2、设置密码(两台机器,root用户)
    # passwd hadoop

4、修改ssh的配置文件(两台机器,root用户)
    # vi /etc/ssh/sshd_config
    将如下代码注释掉
RSAAuthentication yes
PubkeyAuthentication yes
AuthorizedKeysFile      .ssh/authorized_keys
5、重启ssh服务(两台机器,root用户)
    # service sshd restart
6、设置无密码登陆(用hadoop用户)
    # cd /home/hadoop
    # ssh-keygen -t rsa
    一直回车
    进入.ssh目录(虚拟目录)
    # cd .ssh/
    # cp id_rsa.pub authorized_keys
    # chmod 600 authorized_keys
   
7、从master机器上copy文件到slave机器上(192.168.10.135是我要连接的机器),用root用户
     # scp id_rsa.pub root@192.168.10.135:/home/hadoop/
    
8、在要被连接机器(slave)上执行
    # cd /home/hadoop/

    # cat id_rsa.pub >> .ssh/authorized_keys 


9、在master机器上使用hadoop用户登陆
    # ssh slave



 

by 刘迎光@萤火虫工作室 
OpenBI交流群:495266201 
MicroService 微服务交流群:217722918 
mail: liuyg#liuyingguang.cn 
博主首页(==防止爬虫==):http://blog.liuyingguang.cn

Hadoop CentOS    2017-07-19 22:20:35    6

一、安装jdk

    1、下载bin包,自行下载,上传到CentOS6.5中,
    2、安装bin包,
        # chmod 755 jdk-6u27-linux-x64-rpm.bin
        # ./jdk-6u27-linux-x64-rpm.bin
    3、配置环境变量
        # vi /etc/profile
        添加如下
export JAVA_HOME=/usr/java/jdk1.6.0_27
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export path=$PATH:$JAVA_HOME/bin

        使配置生效

        # source /etc/profiles

二、配置SSH免密码登录
    参考文章:http://blog.csdn.net/gsying1474/article/details/49468727


三、安装Hadoop
    下载地址:https://dist.apache.org/repos/dist/release/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz
    解压hadoop(tar xvf hadoop-1.2.1.tar.gz)
    1、环境hadoop变量配置
vi hadoop-env.sh
添加如下内容
export JAVA_HOME=/usr/java/jdk1.6.0_27/

    2、配置conf/core-site.xml文件,Hadoop的核心文件,配置的是HDFS的地址和端口号
<configuration>
        <property>
                <name>fs.default.name</name>
                <value>hdfs://localhost:9000</value>
        </property>
</configuration>
    3、配置conf/hdfs-site.xml,Hadoop中的HDFS的配置,配置的备份方式默认是3,在单机版的Hadoop中,需要设置为1
<configuration>
        <property>
   
CentOS pem xshell linux    2017-07-19 22:17:37    7
1、需要用pem文件连接到centos系统中,
    xshell 使用pem文件登录:http://blog.csdn.net/gsying1474/article/details/50158817

2、修改root密码
    sudo passwd root

然后输入两次密码


3、修改centos登录方式为密码登录
    打开配置文件 /etc/ssh/sshd_config (ubuntu 为/etc/ssh/sshd-config),设置如下几个参数:
PermitRootLogin yes
PubkeyAuthentication no (也可用#号注释)
PasswordAuthentication yes
4、重启sshd服务
    /etc/init.d/sshd restart
 
 
 

 

by 刘迎光@萤火虫工作室 
OpenBI交流群:495266201 
MicroService 微服务交流群:217722918 
mail: liuyg#liuyingguang.cn 
博主首页(==防止爬虫==):http://blog.liuyingguang.cn

VMware disk CentOS    2017-07-19 20:28:09    5
一大早启动虚机就出现问题了,没遇到过,郁闷中。。。
人家提示都说,不可恢复错误,晕眩中。。。
可是不甘心就这么算了,死马当活马医吧,折腾起来。。。
以前遇到过“VMware非正常关闭,导致无法获取虚拟机所有权的解决办法”,尝试,失败。。。继续想办法,删除了与自己认为无关的所有文件,然后启动,经过一系列操作,虚机居然活了(还好没有被VM提示的不可恢复错误给吓到),赶紧记录下,以供小伙伴们参考

环境分析:
1、VMware版本是12
2、虚机版本是CentOS6.5
3、虚机内部装有mysql及nexus等软件
错误截图:
问题分析:
分析不出问题来,估计是VM的程序错误,可是没办法使用程序恢复

解决办法:
1、首先删除虚机存储目录下的所有文件夹,很多事lck结尾的。
2、删除后缀为nvram的文件
3、如果有图标为挂起的文件,也一并删除

然后启动虚机,如果正常启动,那么当然不错,但是我的虚机却出现了其他问题,如下图(忘记截图,网上找图)

1、网上有相关的解决方案,不过我没有按照那些解决方案去做,有兴趣的朋友可以试下,不过做之前建议做好相关备份:http://lovesoo.org/linux-boot-error-unexpected-inconsistency-solution.html
2、我的做法:输入root用户密码,回车,然后输入“fsck -y”即可,由于我的磁盘部分文件找不到,所以中途VMware可能会弹出磁盘文件找不到的错,点击继续即可(虽然我的文件其实是在的,可不止为啥报找不到)


 

by 刘迎光@萤火虫工作室 
OpenBI交流群:495266201 
MicroService 微服务交流群:217722918 
mail: liuyg#liuyingguang.cn 
博主首页(==防止爬虫==):http://blog.liuyingguang.cn

3/3