Linux进阶命令-rsync

作者介绍:简历上没有一个精通的运维工程师。希望大家多多关注作者,下面的思维导图也是预计更新的内容和当前进度(不定时更新)。

经过上一章Linux日志的讲解,我们对Linux系统自带的日志服务已经有了一些了解。我们接下来将讲解一些进阶命令,主要从以下几个方面来讲解:一些系统操作,系统查看处理,Linux文本处理,逻辑判断,重定向,网络传输,服务启动,文件句柄等内容。通过这些操作,让你对Linux的操作更加得心应手,具体分成以下章节进行讲解:

Linux进阶命令-echo&date&alias

Linux进阶命令-top

Linux进阶命令-ps&kill

Linux进阶命令-sort&wc

Linux进阶命令-sed&split

Linux进阶命令-awk&uniq

Linux进阶命令-逻辑或&逻辑与

Linux进阶命令-重定向

Linux进阶命令-scp

Linux进阶命令-rsync(本章节)

Linux进阶命令-rsync-daemon

Linux进阶命令-nohup&screen

Linux进阶命令-lsof

Linux进阶命令-小结

在上一节我们讲scp的时候,不能续传,不能增量,那么有什么命令可以实现以上2个功能,它就是rsync。

如果使用iso自己安装最小版本的系统,默认是没有没有这个命令的。如果是购买的公有云/私有云,一般都会有,如果没有可以直接安装:yum -y install rsync

rsync

命令介绍

RSYNC(Remote Sync)是一个用于远程文件同步和备份的开源工具。它通过差异化传输算法,仅传输文件的变化部分,从而实现高效的文件同步和备份。以下是一些关键特点和用法介绍:

  1. 增量传输:RSYNC使用一种增量传输算法,仅传输源文件和目标文件之间的差异部分,而不是传输整个文件。这极大地减少了传输的数据量,提高了传输速度。

  2. 多种同步模式:RSYNC支持多种同步模式,包括本地同步、远程同步以及本地与远程之间的同步。它可以在本地文件系统内同步文件,也可以通过SSH等协议进行远程同步。

  3. 增量备份:RSYNC可以用作增量备份工具,它可以按需备份源文件的变化部分,而不需要每次都备份整个文件。这使得备份过程更加高效,并节省了存储空间。

  4. 安全传输:RSYNC可以通过SSH进行传输,确保数据在传输过程中的安全性和保密性。

  5. 保留文件属性:RSYNC默认情况下会保留文件的属性和权限,包括时间戳、所有者和组等信息,确保在目标端文件与源文件保持一致。

  6. 过滤功能:RSYNC支持通过过滤规则来选择性地同步或排除某些文件或目录。这使得用户可以根据自己的需求进行文件过滤和同步。

命令参数

当使用RSYNC命令时,可以根据不同的需求使用不同的参数来控制其行为。以下是一些常用的RSYNC参数的解释:

  • -a(归档模式):该参数用于保持文件的所有属性,包括时间戳、权限、所有者等。它是一个常用的参数,用于在源和目标之间保持完全一致。

  • -v(详细模式):该参数用于显示详细的输出信息,包括传输的文件列表、文件大小和传输速度等。

  • -r(递归模式):该参数用于递归地同步目录和子目录,确保源和目标目录之间的所有文件都被同步。

  • -z(压缩模式):该参数用于对传输的数据进行压缩,以减少传输的数据量。这在网络传输较慢的情况下可以提高传输速度。

  • -P(进度模式):该参数用于显示传输的进度信息,包括已传输的文件数量和总体进度等。

  • -u(更新模式):该参数用于仅同步源文件中新增或更新的文件,而不处理目标文件中已存在且没有变化的文件。

  • --delete(删除模式):该参数用于在目标目录中删除与源目录中不同的文件。这对于保持目标目录与源目录完全一致很有用。

  • --exclude(排除模式):该参数用于指定要排除的文件或目录,以避免将其同步到目标目录中。

  • --bwlimit=速度(带宽限制):该参数用于限制传输速度,以防止RSYNC占用过多的带宽。

常见用法

在使用rsync命令时,可以通过不同的路径来指定源文件/目录和目标文件/目录。以下是一些常见的rsync方法路径的示例:

本地文件同步:

rsync /path/to/source /path/to/destinationx

在本地文件系统内进行同步,其中/path/to/source是源文件/目录的路径,/path/to/destination是目标文件/目录的路径。

远程文件同步(使用SSH):

rsync -e ssh user@remote:/path/to/source /path/to/destination

通过SSH协议远程同步文件,其中user是远程服务器的用户名,remote是远程服务器的地址,/path/to/source是远程源文件/目录的路径,/path/to/destination是本地目标文件/目录的路径。

本地与远程之间的文件同步(使用SSH):

rsync -e ssh /path/to/local/source user@remote:/path/to/destination

在本地与远程服务器之间同步文件,其中/path/to/local/source是本地源文件/目录的路径,user是远程服务器的用户名,remote是远程服务器的地址,/path/to/destination是远程目标文件/目录的路径。

同步文件夹:

rsync -av /path/to/source/ /path/to/destination/

在同步文件夹时,需要在源和目标路径末尾加上斜杠/,以确保将整个源文件夹同步到目标文件夹。

其实从前面方式来看,我们可以看出来,谁在前面,谁就是源;谁在后面谁就是目标。

#这个是作者最常用的命令
rsync -avz -e 'ssh -p xxx' user@1.1.1.1:/data/test/  /data/test/
#如果端口和用户也是一致的话,是可以省略的
rsync -avz 1.1.1.1:/data/test/  /data/test/

重点解释(总结)

1.权限控制

-a 走天下

#特别注意,如果复制的时候是用的root命令,而源文件是apache用户,目标服务器必须要有对应的用户,否则会复制过去的文件所有者会异常。
-a 
在rsync中,-a参数和-p、-o、-t、-g参数有一些区别。
-a参数是归档模式,它等价于-rlptgoD参数的组合。归档模式会保持文件的所有属性,包括权限、所有者、所属组、时间戳等,并且会递归地复制子目录和链接。
-p参数仅保持文件的权限。它会确保目标文件和源文件具有相同的权限,但不会保持其他属性,例如所有者、所属组和时间戳。
-o参数仅保持文件的所有者。它会确保目标文件和源文件具有相同的所有者,但不会保持其他属性。
-t参数仅保持文件的时间戳。它会确保目标文件和源文件具有相同的修改时间和访问时间,但不会保持其他属性。
-g参数仅保持文件的所属组。它会确保目标文件和源文件具有相同的所属组,但不会保持其他属性。

2.ssh端口不一致

-e 'ssh -p xxx'
#在远程复制的过程中,如果本地和远程机器端口一致的情况下,可不使用这个参数,如果不一致才需要加上这个参数。
#同理如果本地和远程账号不一样,账号也是可以省略的。

3.软链保持

-L
#默认情况下,rsync在复制软连的时候会把软连关系复制过去,而不会复制内容本身,如果加上-L参数,则会把真实文件复制过去,但是这个会破坏软连,也就是不原来软连的文件或目录会变成真实的文件和目录。

4."/" 问题

rsync -a /etc/httpd 192.168.0.17:/root/httpddd
#会把httpd目录本身及下面的内容复制到/root/httpddd/目录下,形成httpd目录rsync -a /etc/httpd/ 192.168.0.17:/root/httpddd
#会把httpd目录下的内容复制到/root/httpddd/目录下rsync -a /etc/httpd 192.168.0.17:/root/httpddd/
#会把httpd目录本身及下面的内容复制到/root/httpddd/目录下,形成httpd目录rsync -a /etc/httpd/ 192.168.0.17:/root/httpddd/
#会把httpd目录下的内容复制到/root/httpddd/目录下

总结下来就是,如果源不带"/", 则会复制目录本身及内容,源带了"/",则是复制目录下的内容到目标目录下。如果目标目录不存在,则会创建对应的目录。

5.绝对一致的问题

--delete
#默认不加的情况下,比如源目录里面有 a,b,c 3个目录,如果目标复制里面有 1,2,3 3个目录,如果默认参数,复制源目录以后,目标目标会存在 a,b,c,1,2,3 共6个目录。
#如果加了该参数,则会删除目标目录里面已经存在的 1,2,3 3个目录只保留源目录里面的a,b,c 3个目录,从而保证目标源绝对一致。

总结下就是不加,我只负责把我要传的内容传过去就行,加了就会保持绝对一致。

6.增量问题

#rsync默认就是增量同步,但是如果出现第一次同步源目录是 a,b,c 3个目录,同步到目标目录以后
#第二次同步的内容是 a,b,d 3个目录,新创建了一个目录d,删除了一个目录c,为了保证两边目录的绝对一致,但是我希望删除的目录c可以保留在备份服务器上一个特定的地方。
rsync -avz --delete  --backup --backup-dir=/root/ab/  /root/xyz/ 192.168.0.17:/root/abcd
 

坑点:如果在/root/xyz/ 删除 a,b,c 都是空目录,他是不会在目标服务器文件移动到/root/ab目录的。

图片

运维小路

一个不会开发的运维!一个要学开发的运维!一个学不会开发的运维!欢迎大家骚扰的运维!

关注微信公众号《运维小路》获取更多内容。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.xdnf.cn/news/145951.html

如若内容造成侵权/违法违规/事实不符,请联系一条长河网进行投诉反馈,一经查实,立即删除!

相关文章

erlang学习:Linux常用命令2

目录操作命令 对目录进行基本操作 相关cd切换目录之类的就直接省去了,以下操作中都会用到 查看当前目录下的所有目录和文件 ls 列表查看当前目录下的所有目录和文件(列表查看,显示更多信息) ls -l 或 ll 在当前目录下创建一个…

高性能并发计数器的比较

参考文档:https://baijiahao.baidu.com/s?id1742540809477784106&wfrspider&forpc 一、常用的并发计数方法 1、synchronized synchronized早期是一个重量级锁,因为线程竞争锁会引起操作系统用户态和内核态切换,浪费资源&#xff…

Element Plus中button按钮相关大全

一、基本用法 使用 type、plain、round 和 circle 来定义按钮的样式。 样式代码如下&#xff1a; <template><div class"mb-4"><el-button>Default</el-button><el-button type"primary">Primary</el-button><el…

C语言常见字符串函数模拟实现一

strlen模拟实现 重点&#xff1a;1.字符串已经\0作为结束标志&#xff0c;strlen返回的是字符串\0前面出现的字符个数&#xff08;不包含\0&#xff09; 2.参数指向的字符串必须要以\0结束。 3.注意函数的返回值是size_t&#xff0c;是无符号的&#xff0c;加减是无法对比的。…

卡西欧相机SD卡格式化后数据恢复指南

在数字摄影时代&#xff0c;卡西欧相机以其卓越的性能和便携性成为了众多摄影爱好者的首选。然而&#xff0c;随着拍摄量的增加&#xff0c;SD卡中的数据管理变得尤为重要。不幸的是&#xff0c;有时我们可能会因为操作失误或系统故障而将SD卡格式化&#xff0c;导致珍贵的照片…

数据类型转换中存在的问题分析

隐式类型转换&#xff08;implicit type conversion&#xff09; 隐式类型转换&#xff08;implicit type conversion&#xff09;包括整型提升&#xff08;integer promotion&#xff09;和标准算数转换&#xff08;usual arithmetic conversions&#xff09; 遵循较大范围优…

堡垒机(Bastion Host)概述

Bastion Host 堡垒机 一、什么是堡垒机&#xff1f; A bastion host is a computer specially designed to mitigate cyberattacks and manage access rights to an internal network. 堡垒机Bastion Host是一种专门设计用于缓解网络攻击并管理内部网络访问权限的计算机。 在…

肖扬新书《微权力下的项目管理》读书笔记2

一个核心思想&#xff1a;“借力” 合格的项目经理是不热衷于培养人的。项目经理的工作场景和职能经理的工作场景往往有很 大不同。职能经理的工作方式通常适用于常态化工作&#xff0c;要有足够的时间去培养人&#xff0c;先把人培 养起来&#xff0c;然后再干事&#xff0c;可…

加油卡APP定制搭建,让加油更便捷!

在汽车时代中&#xff0c;汽车的数量不断增加&#xff0c;加油已经成为了大众生活中不可缺少的一部分。同时&#xff0c;加油卡的出现也为大众的汽车加油提供了更多的优惠方式&#xff0c;为大众节省经济开支&#xff0c;为车主带来便利&#xff1b;同时加油卡的发展也提高了加…

2024年华为杯研赛(E题)数学建模竞赛解题思路|完整代码论文集合

我是Tina表姐&#xff0c;毕业于中国人民大学&#xff0c;对数学建模的热爱让我在这一领域深耕多年。我的建模思路已经帮助了百余位学习者和参赛者在数学建模的道路上取得了显著的进步和成就。现在&#xff0c;我将这份宝贵的经验和知识凝练成一份全面的解题思路与代码论文集合…

如何远程访问局域网内的电脑?局域网内远程桌面怎么实现?揭秘4种干货技巧

想象一下&#xff0c;你正在办公室A&#xff0c;而你想访问办公室B里的某台电脑&#xff0c;却不想起身到另一楼层甚至是另一个房间。 如何不动身就能控制局域网内的另一台电脑呢&#xff1f; 这并不是科幻&#xff0c;而是完全可以通过远程桌面技术来实现。 今天&#xff0…

学习Java(一)类和对象

package demo.ceshi;public class Puppy {private int age;private String name;//构造器public Puppy( String name){this.name name;System.out.println("公主的名字叫&#xff1a;"name);}//设置age的值public void setAge(int age){this.age age;System.out.pr…

智慧仓储-AI销量预测

1、预测系统技术选型 基础层&#xff1a; Hbase、ClickHouse、Hdfs 用来做数据存储 框架层&#xff1a; 以 Spark RDD、Spark SQL、Hive 为主&#xff0c; MapReduce 程序占一小部分&#xff0c;是原先遗留下来的&#xff0c;目前正逐步替换成 Spark RDD。 选择 Spark 除了对…

rsyslogd 内存占用很高解决方案

在Kubernetes&#xff08;K8S&#xff09;集群中&#xff0c;监控日志是非常重要的&#xff0c;而rsyslogd是Linux系统中用于处理系统和应用程序日志的守护进程。有时候rsyslogd可能会占用较高的内存&#xff0c;这时候我们就需要对其进行优化和调整。 阿里云虚拟服务器&…

创客中国AIGC专题赛冠军天鹜科技:AI蛋白质设计引领者

“落霞与孤鹜齐飞,秋水共长天一色——这句出自《滕王阁序》的诗句,是我作为江西人熟记于心的佳句。它描绘的天地壮丽景色常浮现于我的脑海,正是这种豁达与壮观,启发我们将公司命名为‘天鹜科技’,我们希望将源自自然的蛋白质与现代科技的创新精神相结合,打造蛋白质设计与应用的…

16_Python的迭代器

在Python中&#xff0c;迭代是一个非常重要的概念。迭代通常指的是按照某种顺序逐个访问容器中的元素的行为。如使用for循环遍历取值的过程。 可迭代对象&#xff08;Iterable&#xff09; 可迭代对象是任何可以返回一个迭代器的对象。简单来说&#xff0c;它是可以逐一返回其…

机器学习模型中特征贡献度分析:预测贡献与错误贡献

在机器学习领域&#xff0c;特征重要性分析是一种广泛应用的模型解释工具。但是特征重要性并不等同于特征质量。本文将探讨特征重要性与特征有效性之间的关系&#xff0c;并引入两个关键概念&#xff1a;预测贡献度和错误贡献度。 核心概念 预测贡献度&#xff1a;衡量特征在…

【C++】—— stack queue deque

【C】—— stack & queue & deque 1 stack 与 queue 的函数接口2 适配器2.1 发现问题2.2 什么是适配器 3 stack 与 queue的模拟实现3.1 栈的基础框架3.2 栈的模拟实现3.3 队列的模拟实现 4 模板的按需实例化5 deque 的简单介绍5.1 vector 与list对比5.1.1 vector5.1.2 …

C++函数重载完成日期类相关计算

本文内容如下&#xff1a; 1.创建类以及函数的声明2.日期加减天数1.月份天数2.函数实现 3.日期比较大小4.日期减日期1.日期的前置和后置加加2.日期减日期的实现 5.内置类型的cout和cin本文代码如下&#xff1a; 要完成日期类的相关计算要创建自定义的类型&#xff0c;然后用函数…

获取IPV6地址的参考网站|nginx解析IPV6|linux服务器获取IPV6的方法

获取IPV6地址的参考网站 网址1 https://v6.ident.me/ 网址2 https://ifconfig.co/ 网址3 https://ifconfig.me/ IPV6检测站点推荐 网址1 http://ipv6-test.ch/ linux服务器获取IPV6的方法 以centos7为例 curl -6 ifconfig.mecurl -6 https://v6.ident.mecurl -6 https:…