Linux 架构篇知识心得06

本文主要是介绍Linux 架构篇知识心得06，对大家解决编程问题具有一定的参考价值，需要的程序猿们随着小编来一起学习吧！

NFS 服务案例

一、NFS配置详解

[root@nfs ~]# cat /etc/exports
/data 172.16.1.0/24(rw,sync,all_squash)

NFS共享参数	参数作用
rw	读写权限 (常用)
ro	只读权限 (不常用)
root_squash	当NFS客户端以root管理员访问时，映射为NFS服务器的匿名用户 (不常用)
no_root_squash	当NFS客户端以root管理员访问时，映射为NFS服务器的root管理员 (不常用)
all_squash	无论NFS客户端使用什么账户访问，均映射为NFS服务器的匿名用户 (常用)
no_all_squash	无论NFS客户端使用什么账户访问，都不进行压缩 (不常用)
sync	同时将数据写入到内存与硬盘中，保证不丢失数据 (常用)
async	优先将数据保存到内存，然后再写入硬盘；这样效率更高，但可能会丢失数据 (不常用)
anonuid	配置all_squash使用,指定NFS的用户UID,必须存在系统 (常用)
anongid	配置all_squash使用,指定NFS的用户UID,必须存在系统 (常用

二、NFS案例

1)环境准备

主机	IP	身份
web01	192.168.100.7	NFS客户端
web02	192.168.100.8	NFS客户端
nfs	172.16.1.31	NFS服务端

2)web端安装http和php

[root@web01 ~]# yum install -y httpd php
[root@web02 ~]# yum install -y httpd php

3)上传代码

[root@web01 ~]# rz
[root@web01 ~]# ll
-rw-r--r--  1 root root    26995 Aug 23 10:35 kaoshi.zip
#也可以直接将压缩包拖到web01 & web02 内完成上传代码

4)解压代码

#找到httpd服务的站点目录
[root@web01 ~]# rpm -ql httpd | grep html
/var/www/html
 
#解压代码至站点目录
[root@web01 ~]# unzip kaoshi.zip -d /var/www/html/

5)启动httpd并检查是否开启成功

[root@web01 ~]# systemctl start httpd
 
#查看启动
[root@web01 ~]# netstat -lntp | grep 80
tcp6       0      0 :::80                   :::*                    LISTEN      7530/httpd         
 
[root@web01 ~]# ps -ef | grep httpd
root       7530      1  0 10:39 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
apache     7531   7530  0 10:39 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
apache     7532   7530  0 10:39 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
apache     7533   7530  0 10:39 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
apache     7534   7530  0 10:39 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
apache     7535   7530  0 10:39 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
root       7543   7262  0 10:40 pts/0    00:00:00 grep --color=auto httpd

6)访问页面测试

a) 访问

http://10.0.0.7/index.html
http://10.0.0.8/index.html
# 访问的是域名后面的index.html页面

···

输入内容：www.baidu.com
浏览器真正访问的是：http://www.baidu.com:80/index.html
 			    网络协议      IP      端口 访问的内容
网页输入：192.168.100.7
浏览器真正访问的是：http://172.16.1.7:80//var/www/html/index.html

···

b) 测试上传作业

c) 上传文件失败

#显示上传文件成功，但是服务器上没有文件
[root@web01 html]# ll /var/www/html/upload
ls: cannot access /var/www/html/upload: No such file or directory

#为什么找这个文件，因为代码里写的上传文件地址就是这个目录
#原因：代码不严谨，没有判断目录权限，目录权限不足，导致上传失败
#授权
[root@web01 html]# chown -R apache.apache /var/www/html/
 
#重新上传成功

d) 测试（没有挂载的情况下）

在10.0.0.7服务器上传 1_bg.jpg
在10.0.0.8服务器上传 2_bg.jpg
 
#访问
http://10.0.0.7/upload/1_bg.jpg         访问成功
http://10.0.0.8/upload/1_bg.jpg         访问失败
http://10.0.0.8/upload/2_bg.jpg         访问成功
http://10.0.0.7/upload/2_bg.jpg         访问失败
 
#在没有挂载的情况下，文件无法实现共享，在哪台机器上传就只能在哪台机器访问

7)挂载

a) web端挂载目录

1.先同步多台web的文件
[root@web01 html]# rsync -avz upload/ 172.16.1.31:/data/web
[root@web02 html]# rsync -avz upload/ 172.16.1.31:/data/web
 
2.找到需要挂载的目录
/var/www/html/upload
 
3.挂载
[root@web01 html]# mount -t nfs 172.16.1.31:/data/web /var/www/html/upload
[root@web02 html]# mount -t nfs 172.16.1.31:/data/web /var/www/html/upload

b) 再次访问测试（挂载后）

#访问
http://10.0.0.7/upload/1_bg.jpg         访问成功
http://10.0.0.8/upload/1_bg.jpg         访问成功
http://10.0.0.8/upload/2_bg.jpg         访问成功
http://10.0.0.7/upload/2_bg.jpg         访问成功

三、用户统一

1）服务器创建统一用户

[root@web01 ~]# groupadd www -g 666
[root@web01 ~]# useradd www -u 666 -g 666-r -M -s /sbin/nologin 
 
[root@web02 ~]# groupadd www -g 666
[root@web02 ~]# useradd www -u 666 -g 666 -r -M -s /sbin/nologin 
 
[root@nfs ~]# groupadd www -g 666
[root@nfs ~]# useradd www -u 666 -g 666 -r -M -s /sbin/nologin 
 
[root@rsync ~]# groupadd www -g 666
[root@rsync ~]# useradd www -u 666 -g 666 -r -M -s /sbin/nologin

2) 需要修改用户的服务

httpd
nfs
rsync

3）修改httpd的用户

#找到配置文件
[root@web01 ~]# rpm -qc httpd
/etc/httpd/conf/httpd.conf
 
#修改配置文件
[root@web01 ~]# vim /etc/httpd/conf/httpd.conf
User www
Group www
 
#重启服务
[root@web01 ~]# systemctl restart httpd
 
#确认启动用户
[root@web01 ~]# ps -ef | grep httpd
root       7768      1  1 11:49 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
www        7769   7768  0 11:49 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
www        7770   7768  0 11:49 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
www        7771   7768  0 11:49 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
www        7772   7768  0 11:49 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND
www        7773   7768  0 11:49 ?        00:00:00 /usr/sbin/httpd -DFOREGROUND

4) 修改nfs服务的用户

[root@nfs ~]# vim /etc/exports
/data 172.16.1.0/24(rw,sync,all_squash,anonuid=666,anongid=666)
 
#授权/data目录
[root@nfs ~]# chown -R www.www /data/
 
#重启服务
[root@nfs ~]# systemctl restart nfs
 
#验证启动用户
[root@nfs ~]# cat /var/lib/nfs/etab 
/data   172.16.1.0/24(rw,sync,wdelay,hide,nocrossmnt,secure,root_squash,all_squash,no_subtree_check,secure_locks,acl,no_pnfs,anonuid=666,anongid=666,sec=sys,rw,secure,root_squash,all_squash)

5) 修改rsync用户

#修改配置
[root@rsync ~]# vim /etc/rsyncd.conf
uid = www
gid = www
 
#重启服务
[root@rsync ~]# systemctl restart rsyncd
 
#目录重新授权
[root@rsync ~]# chown -R www.www /backup/

6) 测试架构

1.两台web服务器
2.一台nfs服务器挂载web服务器的文件目录
3.一台rsync服务器实时同步nfs挂载目录下的内容

四、NFS小结

a.NFS存储优点：
    1.NFS文件系统简单易用、方便部署、数据可靠、服务稳定、满足中小企业需求
    2.NFS文件系统内存放的数据都在文件系统之上，所有数据都是能看得见
b.NFS存储局限：
    1.存在单点故障, 如果构建高可用维护麻烦  web -> nfs -> backup
    2.NFS数据明文, 并不对数据做任何校验
    3.客户端挂载NFS服务没有密码验证, 安全性一般(内网使用)
c.NFS应用建议:
    1.生产场景应将静态数据尽可能往前端推, 减少后端存储压力
    2.必须将存储里的静态资源通过CDN缓存 jpg\png\mp4\avi\css\js
    3.如果没有缓存或架构本身历史遗留问题太大, 在多存储也无用

五、故障切换

六、sersync 服务

1）什么是实时同步

实时同步是一种只要当前目录发生变化则会触发一个事件，事件触发后会将变化的目录同步至远程服务器。

2)为什么要使用实时同步

保证数据的连续性, 减少人力维护成本,解决nfs单点故障

3) 实时同步原理

利用inotify通知接口，监控本地目录变化，只要监控目标发生变化，就触发事件，执行相应操作。

4) 实时同步工具的选择

sersync + RSYNC(√)、inotify + rsync
 
	Inotify是一个通知接口，用来监控文件系统的各种变化，如果文件存取，删除，移动。可以非常方便地实现文件异动告警，增量备份，并针对目录或文件的变化及时作出响应。rsync + inotify 可以做到实时同步。 
	sersync是国人基于rsync+inotify-tools开发的工具，不仅保留了优点同时还强化了实时监控，文件过滤，简化配置等功能，帮助用户提高运行效率，节省时间和网络资源。 
	sersync项目地址：https://github.com/wsgzao/sersync

5）安装sersync

角色	IP
nfs	172.16.1.31	nfs/sersync
rsync	172.16.1.21	rsync-server

a 安装依赖环境

[root@nfs ~]# yum install -y inotify-tools rsync

b 上传或下载sersync包

[root@nfs ~]# rz sersync2.5.4_64bit_binary_stable_final.tar.gz
[root@nfs ~]# wget http://down.whsir.com/downloads/sersync2.5.4_64bit_binary_stable_final.tar.gz

c 解压安装

[root@nfs ~]# tar xf sersync2.5.4_64bit_binary_stable_final.tar.gz

d 移动目录并改名

[root@nfs ~]# mv GNU-Linux-x86 /usr/local/sersync

e 配置sersync

# 备份配置文件
[root@nfs ~]cp /usr/local/sersyncconfxml.xml /usr/local/sersyncconfxml0.xml 
# 修改配置文件
[root@nfs ~]/usr/local/sersyncconfxml0.xml 
<?xml version="1.0" encoding="ISO-8859-1"?>
<head version="2.5">
    <host hostip="localhost" port="8008"></host>      #本机ip地址和端口
    <debug start="false"/>							#是否打开调试模式
    <fileSystem xfs="false"/>						#是否支持xfs文件系统
    <filter start="false">		 #是否过滤，是否排除名称中含有制定字符串的文件的同步
        <exclude expression="(.*)\.svn"></exclude>
        <exclude expression="(.*)\.gz"></exclude>
        <exclude expression="^info/*"></exclude>
        <exclude expression="^static/*"></exclude>
    </filter>
    <inotify>
	<delete start="true"/>    				#删除动作
        <createFolder start="true"/> 		 #创建文件夹动作
        <createFile start="true"/>			#创建文件动作
        <closeWrite start="true"/>			#写入完成动作
        <moveFrom start="true"/>			#移动来自动作
        <moveTo start="true"/>				#移动到动作
        <attrib start="true"/>				#属性被更改
        <modify start="true"/>				#修改动作
    </inotify>

    <sersync>
	<localpath watch="/data/web">				#监控的目录
	    <remote ip="172.16.1.21" name="web"/>	#远端rsync服务器的地址和模块
	    <!--<remote ip="192.168.8.39" name="tongbu"/>-->
	    <!--<remote ip="192.168.8.40" name="tongbu"/>-->
	</localpath>
	<rsync>
	    <commonParams params="-az"/> 			#rsync的参数
	    <auth start="true" users="rsync_backup" passwordfile="/etc/rsync.passwd"/>
	     #开启认证               #虚拟用户                   #指定虚拟用户的密码文件
	    <userDefinedPort start="false" port="874"/><!-- port=874 -->
	    <timeout start="false" time="100"/><!-- timeout=100 -->
	    <ssh start="false"/>
	</rsync>
	<failLog path="/tmp/rsync_fail_log.sh" timeToExecute="60"/><!--default every 60mins execute once-->
	<crontab start="false" schedule="600"><!--600mins-->
	    <crontabfilter start="false">
		<exclude expression="*.php"></exclude>
		<exclude expression="info/*"></exclude>
	    </crontabfilter>
	</crontab>
	<plugin start="false" name="command"/>
    </sersync>
</head>

f 创建虚拟用户密码文件

[root@nfs ~]# echo '123456' > /etc/rsync.passwd
[root@nfs ~]# chmod 600 /etc/rsync.passwd

g 启动服务

[root@nfs ~]# /usr/local/sersync/sersync2 -h
set the system param
execute：echo 50000000 > /proc/sys/fs/inotify/max_user_watches
execute：echo 327679 > /proc/sys/fs/inotify/max_queued_events
parse the command param
_______________________________________________________
参数-d:启用守护进程模式
参数-r:在监控前，将监控目录与远程主机用rsync命令推送一遍
参数-n: 指定开启守护线程的数量，默认为10个
参数-o:指定配置文件，默认使用confxml.xml文件
参数-m:单独启用其他模块，使用 -m refreshCDN 开启刷新CDN模块
参数-m:单独启用其他模块，使用 -m socket 开启socket模块
参数-m:单独启用其他模块，使用 -m http 开启http模块
不加-m参数，则默认执行同步程序
 
[root@nfs sersync]# /usr/local/sersync//sersync2 -dro /usr/local/sersyncconfxml0.xml
set the system param
execute：echo 50000000 > /proc/sys/fs/inotify/max_user_watches
execute：echo 327679 > /proc/sys/fs/inotify/max_queued_events
parse the command param
option: -d 	run as a daemon
option: -r 	rsync all the local files to the remote servers before the sersync work
option: -o 	config xml name：  confxml0.xml
daemon thread num: 10
parse xml config file
host ip : localhost	host port: 8008
will ignore the inotify createFile event 
daemon start，sersync run behind the console 
use rsync password-file :
user is	rsync_backup
passwordfile is 	/etc/rsync.passwd
config xml parse success
please set /etc/rsyncd.conf max connections=0 Manually
sersync working thread 12  = 1(primary thread) + 1(fail retry thread) + 10(daemon sub threads) 
Max threads numbers is: 22 = 12(Thread pool nums) + 10(Sub threads)
please according your cpu ，use -n param to adjust the cpu rate
------------------------------------------
rsync the directory recursivly to the remote servers once
working please wait...
execute command: cd /data && rsync -az -R --delete ./ rsync_backup@172.16.1.21::web --password-file=/etc/rsync.passwd >/dev/null 2>&1 
run the sersync: 
watch path is: /data

h 测试

NFS端：
[root@nfs ~]# ps -ef |grep rsync
root       4032      1  0 22:58 ?        00:00:00 ./sersync2 -d -r -o confxml0.xml
root       4061   2590  0 23:00 pts/1    00:00:00 grep --color=auto rsync

[root@nfs web]# touch 77.txt
[root@nfs web]# ll
total 516
-rw-r--r--. 1 www  www   25597 Aug  5 15:52 1_bg.jpg
-rw-r--r--. 1 www  www   52104 Aug  5 16:28 2_bg.jpg
-rw-r--r--. 1 www  www   71291 Aug  5 20:52 3_bg.jpg
-rw-r--r--. 1 www  www  153586 Aug  5 21:30 4_bg.jpg
-rw-r--r--. 1 www  www   76645 Aug  5 21:37 5_bg.jpg
-rw-r--r--. 1 www  www  138880 Aug  5 21:46 6_bg.jpg
-rw-r--r--. 1 root root      0 Aug  5 23:01 77.txt

RSYNC端：
[root@rsync web]# ll
total 516
-rw-r--r-- 1 www www  25597 Aug  5 15:52 1_bg.jpg
-rw-r--r-- 1 www www  52104 Aug  5 16:28 2_bg.jpg
-rw-r--r-- 1 www www  71291 Aug  5 20:52 3_bg.jpg
-rw-r--r-- 1 www www 153586 Aug  5 21:30 4_bg.jpg
-rw-r--r-- 1 www www  76645 Aug  5 21:37 5_bg.jpg
-rw-r--r-- 1 www www 138880 Aug  5 21:46 6_bg.jpg
-rw-r--r-- 1 www www      0 Aug  5 23:01 77.txt

这篇关于Linux 架构篇知识心得06的文章就介绍到这儿，希望我们推荐的文章对大家有所帮助，也希望大家多多支持为之网！

Linux 架构篇 知识心得06

NFS 服务案例

一、NFS配置详解

二、NFS案例

1)环境准备

2)web端安装http和php

3)上传代码

4)解压代码

5)启动httpd并检查是否开启成功

6)访问页面测试

a) 访问

b) 测试上传作业

c) 上传文件失败

d) 测试（没有挂载的情况下）

7)挂载

a) web端挂载目录

b) 再次访问测试（挂载后）

三、用户统一

1）服务器创建统一用户

2) 需要修改用户的服务

3）修改httpd的用户

4) 修改nfs服务的用户

5) 修改rsync用户

6) 测试架构

四、NFS小结

五、故障切换

六、sersync 服务

1）什么是实时同步

2)为什么要使用实时同步

3) 实时同步原理

4) 实时同步工具的选择

5）安装sersync

a 安装依赖环境

b 上传或下载sersync包

c 解压安装

d 移动目录并改名

e 配置sersync

f 创建虚拟用户密码文件

g 启动服务

h 测试

前端开发

后端开发

移动端开发

数据库

服务器运维

人工智能

区块链

游戏开发

网站运营

大数据/云计算

软件工程

软件/开发工具使用

资讯

Linux 架构篇知识心得06