python 通过ssh增量同步文件夹

要通过 SSH 使用 Python 进行文件夹的增量同步,你可以使用 paramiko 库来创建 SSH 连接并执行文件传输操作。paramiko 是一个 Python 实现的 SSHv2 协议库,可以用于进行 SSH 连接、文件传输等任务。

以下是一个简单的示例,展示如何使用 paramiko 进行增量同步:

 
import os
import paramiko
import hashlibdef calculate_md5(file_path):
"""计算文件的 MD5 哈希值"""
hash_md5 = hashlib.md5()
with open(file_path, "rb") as f:
for chunk in iter(lambda: f.read(4096), b""):
hash_md5.update(chunk)
return hash_md5.hexdigest()def sync_folder(local_folder, remote_folder, ssh_host, ssh_port, ssh_username, ssh_password):
"""通过 SSH 增量同步文件夹"""
client = paramiko.SSHClient()
client.set_missing_host_key_policy(paramiko.AutoAddPolicy())
client.connect(ssh_host, port=ssh_port, username=ssh_username, password=ssh_password)sftp = client.open_sftp()# 获取本地文件夹中的所有文件
local_files = {os.path.join(local_folder, f): calculate_md5(os.path.join(local_folder, f))
for f in os.listdir(local_folder) if os.path.isfile(os.path.join(local_folder, f))}# 获取远程文件夹中的所有文件及其哈希值
remote_files = {}
try:
remote_files_list = sftp.listdir_attr(remote_folder)
for entry in remote_files_list:
if entry.filename != '.' and entry.filename != '..' and entry.st_mode.type == paramiko.SFTP_TYPE_REGULAR:
remote_file_path = os.path.join(remote_folder, entry.filename)
remote_files[remote_file_path] = entry.st_md5
except IOError:
# 远程文件夹不存在时忽略
pass# 同步文件
for local_file, local_md5 in local_files.items():
remote_md5 = remote_files.get(local_file, None)
if remote_md5 is None or local_md5 != remote_md5:
# 文件在远程不存在或哈希值不匹配,进行同步
print(f"Uploading {local_file} to {remote_folder}")
sftp.put(local_file, local_file.replace(local_folder, remote_folder))sftp.close()
client.close()# 使用示例
local_folder = "/path/to/local/folder"
remote_folder = "/path/to/remote/folder"
ssh_host = "remote_host_ip"
ssh_port = 22
ssh_username = "username"
ssh_password = "password"sync_folder(local_folder, remote_folder, ssh_host, ssh_port, ssh_username, ssh_password)

在这个示例中,sync_folder 函数通过 SSH 连接到远程服务器,并使用 paramiko 的 SFTP 功能来同步文件夹。它首先计算本地文件夹中所有文件的 MD5 哈希值,然后连接到远程服务器并获取远程文件夹中所有文件的哈希值。之后,它比较本地和远程文件的哈希值,如果文件在远程不存在或其哈希值不匹配,则通过 SFTP 上传文件。

请注意,这个示例使用了 MD5 哈希算法来检测文件变化,这对于大多数用途来说已经足够好了。但是,如果你需要更高的安全性或准确性,可以考虑使用更强大的哈希算法,如 SHA-256。

此外,这个示例没有处理文件夹的递归同步和删除远程存在但本地不存在的文件的情况。如果需要这些功能,你可能需要扩展此脚本以处理文件夹的递归遍历,并添加删除文件的逻辑。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/681990.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

ES实战-高级聚合

多桶型聚合 1.词条聚合–terms 2.范围聚合–range 3,直方图聚合–histogram 4.嵌套聚合 5.地理距离聚合 include(包含)exclude(不包含) GET /get-together/_search?pretty {"size": 0,"aggs": {"tags": {"terms": {"field"…

【教3妹学编程-算法题】捕获黑皇后需要的最少移动次数

3妹:2哥,新年好鸭~ 2哥 : 新年好,3妹这么早啊 3妹:是啊,新年第一天要起早,这样就可以起早一整年 2哥 :得,我还不了解你,每天晒到日上三竿 3妹:嘿嘿嘿嘿,一年是…

LeetCode、901. 股票价格跨度【中等,单调栈】

文章目录 前言LeetCode、901. 股票价格跨度【中等,单调栈】题目链接及分类思路思路1:暴力思路2:单调栈写法优化:单调栈简化写法(数组替代栈集合) 资料获取 前言 博主介绍:✌目前全网粉丝2W,csdn博客专家、…

别人卖了 2W 的一套 ChatGPT 自动身份提示词!

别人卖了 2W 的一套 ChatGPT 自动身份提示词! 英文版 You are an Expert level ChatGPT Prompt Engineer with expertise in various subject matters. Throughout our interaction, you will refer to me as (your name). Lets collaborate to create the best possible Cha…

深度学习-吴恩达L1W2作业

作业1:吴恩达《深度学习》L1W2作业1 - Heywhale.com 作业2:吴恩达《深度学习》L1W2作业2 - Heywhale.com 作业1 你需要记住的内容: -np.exp(x)适用于任何np.array x并将指数函数应用于每个坐标 -sigmoid函数及其梯度…

springboot180基于spring boot的医院挂号就诊系统

医院挂号就诊系统设计与实现 摘 要 传统办法管理信息首先需要花费的时间比较多,其次数据出错率比较高,而且对错误的数据进行更改也比较困难,最后,检索数据费事费力。因此,在计算机上安装医院挂号就诊系统软件来发挥其…

Excel练习:折线图突出最大最小值

Excel练习:折线图突出最大最小值 ​​ 要点:NA值在折现图中不会被绘制,看似一条线,实际是三条线。换成0值和""都不行。 ‍ 查看所有已分享Excel文件-阿里云 ‍ 学习的这个视频:Excel折线图&#xff0c…

使用文件读取的open 函数,让你的csv pandas 尾部插入快如闪电

文章目录 简介1. pandas loc 尾部插入方法loc 尾部插入的速度 2. open 方法open方法 处理csv的速度open方法 处理csv代码 简介 笔者在处理稍大型(几十万条)的csv文件时,发现在csv文件中,使用panda的loc方法进行拼接,速度太过于缓慢。 笔者提…

盐值1111

盐值处理简介 1.1 定义与概述 "盐值"是一个术语,通常在密码哈希中使用。当存储或传输密码时,系统不会(或不应)直接存储或传输用户的明文密码。相反,会通过哈希函数将密码转换成哈希值。问题在于&#xff0…

【面试】国家公务员考试复试,面试内容准备方向(非技术面试考察点)

【面试】国家公务员考试复试,面试内容准备方向(非技术面试考察点) 说明: csdn无法发部分考试相关例题(提示涉z),所以本文主要还是针对评分标准和仪表等相关因素。 文章目录 1、面试试卷与评分1.…

前端架构: 实现脚手架处理简单的命令注册和参数解析

实现简单的命令注册和参数解析 1 )概述 这里不会使用任何第三方工具,而是给大家讲解一下参数解析的一个实现原理实现两个目标 第一目标是注册一个命令 $ xyzcli init 这个命令就可以完成一个自己的操作第二个是实现参数解析 希望能够实现 --version 的一…

春节专题|产业7问:区块链厂商的现在和未来——基础设施厂商

2023转瞬即逝,不同于加密领域沉寂一整年后在年末集中爆发,对于我国的区块链厂商而言,稳中求胜才是关键词,在平稳发展的基调下,产业洗牌也悄无声息的到来。 从产业总体而言,在经过了接近3年的快速发展后&…

C语言系列1——详解C语言:变量、常量与数据类型

目录 写在开始1. 变量与常量的概念1.1. 变量1.2. 常量1.3. 变量与常量的比较1.4. 选择变量还是常量 2. C语言中的基本数据类型2.1. 整型(Integer Types)2.2. 浮点型(Floating-Point Types)2.3. 字符型(Character Type&…

android studio下开发flutter

文章目录 1. 配置环境 https://flutter.cn/docs/get-started/install2. android studio下开发flutter 1. 配置环境 https://flutter.cn/docs/get-started/install 2. android studio下开发flutter 打开Android Studio -> File -> Settings -> Plugins 搜索Dart插件 …

Linux和Windows文件共享实现方式

安装 samba 服务 sudo apt-get install samba samba-common新增用户 groupadd sfp -g 6000 useradd sfp -u 6000 -g 6000 -s /sbin/nologin -d /dev/null设置密码 sudo smbpasswd -a sfp修改配置文件 sudo vi /etc/samba/smb.conf追加参数 [file]comment sfpfile #说明…

C++ 动态规划 计数类DP 整数划分

一个正整数 n 可以表示成若干个正整数之和,形如:nn1n2…nk ,其中 n1≥n2≥…≥nk,k≥1 。 我们将这样的一种表示称为正整数 n 的一种划分。 现在给定一个正整数 n ,请你求出 n 共有多少种不同的划分方法。 输入格式 共一行&…

【vue3学习笔记】shallowReactive与shallowRef;readOnly与shallowReadOnly;toRaw与markRaw

尚硅谷Vue2.0Vue3.0全套教程丨vuejs从入门到精通 课程 P158节 《shallowReactive与shallowRef》笔记: reactive()与shallowReactive():reactive()处理后的数据是响应式的,对象内嵌套的深层结构全部是响应式的。shallowReactive()处理后的数据…

Javaweb之SpringBootWeb案例之propagation属性案例演示的详细解析

案例 接下来我们就通过一个案例来演示下事务传播行为propagation属性的使用。 需求:解散部门时需要记录操作日志 由于解散部门是一个非常重要而且非常危险的操作,所以在业务当中要求每一次执行解散部门的操作都需要留下痕迹,就是要记录操作…

蓝桥杯每日一题----唯一分解定理

唯一分解定理 1.内容 任何一个大于1的整数n都可以分解成若干个质数的连乘积,如果不计各个质数的顺序,那么这种分解是惟一的,即若n>1,则有 n ∏ p i j n\prod{p^j_i} n∏pij​ 这里的 p i p_i pi​是质数。可以进行简单证明…

C语言字符串处理

在 C 语言中&#xff0c;字符串是以字符数组的形式表示的&#xff0c;以空字符 \0 结尾。C 语言提供了一系列的字符串处理函数&#xff0c;可以用于字符串的操作、查找、比较等。以下是一些常用的 C 语言字符串处理函数&#xff1a; 1. 字符串定义与初始化 #include <stdi…