• 周五. 9月 30th, 2022

5G编程聚合网

5G时代下一个聚合的编程学习网

热门标签

使用SCP或Rsync实现Linux主机之间文件、目录的复制

admin

11月 28, 2021

我们知道Linux本机的文件拷贝可以使用cp命令,它不能在Linux主机之间拷贝数据。本文介绍SCP和Rsync这两种实现Linux主机间的数据拷贝工具。

@

SCP 和 Rsync区别

SCP(secure copy) 是基于ssh协议的安全拷贝,用于将文件/目录安全地从本地主机传输到远程主机。

Rsync (remote synchronize)也可以实现同步本地主机和远程主机的文件/目录,和SCP不同之处在于,首次复制时,Rsync会复制整个目录,在后面的复制中,不会复制相同的内容,只对差异文件做更新,scp是把所有文件都复制过去。Rsync广泛用于备份和镜像。

下面介绍它们的简单使用方法。

SCP

一般情况下Linux服务器都有scp命令,如果没有,可通过如下方式安装:

yum -y install openssh-clients # centos
apt-get install openssh-client # Ubuntu

复制文件/目录到远程主机

scp source_file_name [email protected]_host:destination_folder # 复制文件
scp -r source_directory [email protected]_host:destination_folder # 复制目录

案例1:复制文件到远程主机

[[email protected] ~]# scp text.txt [email protected]:/root
The authenticity of host '192.168.20.40 (192.168.20.40)' can't be established.
ECDSA key fingerprint is SHA256:tS6tueeKp9vBLDvxgsxIgCCaGMQWs9+5E167qz2ZB9c.
ECDSA key fingerprint is MD5:82:04:10:14:57:52:0a:05:d9:9b:ae:6e:3f:3f:68:98.
Are you sure you want to continue connecting (yes/no)? yes
Warning: Permanently added '192.168.20.40' (ECDSA) to the list of known hosts.
[email protected]'s password: 
test.txt                                                                                                                     100%   12     6.0KB/s   00:00    
[[email protected] ~]# 

从远程主机复制文件/目录

scp [email protected]_host:source_file_name local_destination_folder # 复制文件
scp -r [email protected]_host:source_file_name local_destination_folder # 复制目录

案例2:从远程主机复制文件

[[email protected] ~]# scp [email protected]:/root/test40.txt /root
[email protected]'s password: 
test40.txt                                                                                                                   100%   12     4.2KB/s   00:00    
[[email protected] ~]# ll | grep test40.txt
-rw-r--r--   1 root    root          12 7月   6 09:41 test40.txt
[[email protected] ~]# 

-r参数用于递归的复制整个目录,SCP更多的参数使用方法可参考:https://manned.org/scp.1

本地文件/目录复制

如果不指定远程主机地址,可以实现和cp目录一样的功能:

scp source_file destination_folder # 复制文件
scp -r source_directory destination_folder # 复制目录

案例3:本地文件复制

[[email protected] ~]# mkdir test
[[email protected] ~]# scp test40.txt /root/test
[[email protected] ~]# ll /root/test/
总用量 4
-rw-r--r-- 1 root root 12 7月   6 09:49 test40.txt
[[email protected] ~]# 

Rsync

安装方法:

yum install rsync      # centos
apt-get install rsync  # Ubuntu

选项参数

Rsync可用的选项参数很多,下面介绍几个常用参数,更多参数使用方法可参考https://manned.org/rsync.1 ,或者使用rsync -hman rsync命令查看文档说明。

选项 功能
-t 将源文件的修改时间(modify time)同步到目标机器
-I –ignore-times
-r 递归,用于目录复制
-a 递归同步,还可以同步元信息(比如修改时间、权限等)
-v 打印复制过程
-l 拷贝符号连接
–delete 删除目标目录中多余的文件,也就是保持两个目录相同,使得目标目录成为源目录的镜像副本

复制文件/目录到远程主机

如果复制的目标目录不存在,会自动创建,语法格式和SCP一样:

rsync source_file_name/ [email protected]ination_host:destination_folder # 复制文件
rsync -r source_file_name/ [email protected]_host:destination_folder # 复制目录

案例1:复制文件、目录到远程主机

[[email protected] ~]# rsync test.txt [email protected]:/root
[email protected]'s password: 
[[email protected] ~]# 
[[email protected] ~]# rsync -rvl test/ [email protected]:/root/test222
[email protected]'s password: 
sending incremental file list
created directory /root/test222
./
test2.txt
test40.txt

sent 187 bytes  received 93 bytes  62.22 bytes/sec
total size is 12  speedup is 0.04

从远程主机复制文件/目录

rsync [email protected]_host:source_file_name local_destination_folder # 复制文件
rsync -r [email protected]_host:source_file_name local_destination_folder # 复制目录

案例1:复制远程主机文件到本机

[[email protected] ~]# rsync [email protected]:/root/test40.txt /root
[email protected]'s password: 
[[email protected] ~]# ll test40.txt
-rw-r--r-- 1 root root 12 7月   8 11:11 test40.txt
[[email protected] ~]# 

其它用法

复制指定类型的文件

仅复制py文件:

rsync *.py [email protected]_host:destination_folder

复制多个文件

[[email protected] ~]# rsync test1.txt test2.txt test{5,6,7}.txt [email protected]:/root
[email protected]'s password: 
[[email protected] ~]# 

远程主机上查看是否复制成功

[[email protected] ~]# ls | grep -E "test[0-9]{1}.txt"
test1.txt
test2.txt
test5.txt
test6.txt
test7.txt
[[email protected] ~]# 

从远程主机复制多个文件(先删除本地文件):

[[email protected] ~]# rsync [email protected]:/root/test1.txt :test2.txt [email protected]:test{5,6,7}.txt /root
[email protected]'s password: 
[[email protected] ~]# ls | grep -E "test[0-9]{1}.txt"
test1.txt
test2.txt
test5.txt
test6.txt
test7.txt

本地文件/目录复制

和scp命令一样,rsync也可以用于在本机进行文件复制。

rsync source_file destination_folder # 复制文件
rsync -r source_directory destination_folder # 复制目录

总结

rsync工具只对差异文件做更新的特性,在多个服务器之间同步文件非常有用,通常跳过写一个自动化脚本来实现批量同步,但是,你也许已经发现了,在执行同步命令时,需要输入目标主机的密码,在主机很多的情况下就不方便了。

一种解决方案是可以使用expect实现自动化交互,另一种方法是配置服务器之间ssh免密登录,因为scp和rsync默认使用ssh协议。ssh免密登录配置方法可参考配置多台服务器之间ssh免密登录

–THE END–

欢迎关注公众号:「测试开发小记」及时接收最新技术文章!

发表回复

您的电子邮箱地址不会被公开。