设为首页收藏本站

LinuxTone | 运维专家网论坛 - 最棒的Linux运维与开源架构技术交流社区!

 找回密码
 注册

QQ登录

只需一步,快速开始

#公告#抱歉,网站将关闭,不再开放。由于PC时代已远逝 。在这个后移动互联网时代,我们继续携手前行,保持对技术的热情。共同构建linuxtone知识星球欢迎加入,一起讨论技术、招聘人才、分享资源。请新老linuxtone人 扫码移步到 知识星球:linuxtone

学习是一种信仰!分享是一种快乐!能力= 心态 * 沟通 * 知识 (你的每一天需要正能量!)

 网站的发展需要你贡献一份力量!希望你能每天坚持看贴1小时,并回答网友的问题!祝你在浏览论坛的过程中取得进步!谢谢!linuxtone加油!大家加油! 友情提示: 你今天学习了吗?你今天进步了吗?少一点抱怨!多一点进步!Life is short ! Why not linuxtone ?  

网站的发展、感谢每位坛友的努力!

查看: 4532|回复: 16

[others] 求助文件完整性比对的方法   [复制链接]

Rank: 8Rank: 8

签到
184
注册时间
2009-3-28
最后登录
2017-5-11
在线时间
80 小时
阅读权限
90
积分
18387
帖子
120
主题
15
精华
0
UID
2181
发表于 2014-9-24 11:35:03 |显示全部楼层
应用场景:

tar打包备份文件,然后用ftp备份文件,文件上传到ftp节点上去以后,怎么判断这个上传上去的文件是完整的啊·?

本地用md5sum a.tar.gz > a.tar.gz.md5file 生成了一个同名的文件,但是怎么和ftp服务器上的文件做比对呢·~?

ftp服务器我只有上传下载删除的几个基本权限;

求支招·

Rank: 8Rank: 8

注册时间
2012-1-15
最后登录
2016-7-25
在线时间
260 小时
阅读权限
90
积分
54383
帖子
101
主题
17
精华
0
UID
17344
发表于 2014-9-24 14:20:23 |显示全部楼层
ftp应该是可以查看文件的大小的,可以对比ftp的文件大小和本地的文件大小如果大小一致应该就没问题吧。     仅供参考。

使用道具 举报

Rank: 8Rank: 8

注册时间
2009-3-28
最后登录
2017-5-11
在线时间
80 小时
阅读权限
90
积分
18387
帖子
120
主题
15
精华
0
UID
2181
发表于 2014-9-24 14:34:40 |显示全部楼层
☆豆芽☆ 发表于 2014-9-24 14:20
ftp应该是可以查看文件的大小的,可以对比ftp的文件大小和本地的文件大小如果大小一致应该就没问题吧。     ...

嗯,用ll命令可以在ftp命令行上看出文件的大小,然后本地服务器也用ll看下,看大小相同不;

但是怎么用脚本实现自动比对呢·?总不能每次上传完了都要手工ll看吧~~

使用道具 举报

Rank: 8Rank: 8

注册时间
2013-2-26
最后登录
2014-12-24
在线时间
47 小时
阅读权限
90
积分
13105
帖子
13
主题
2
精华
0
UID
37257
发表于 2014-9-24 15:38:28 |显示全部楼层
tar打包文件的时候,同时生成一个*.md5的文件,文件里面存放该tar包的MD5值,等到后面ftp上去后,在ftp那台服务器上计算出tar包的MD5值,再与*.md5文件里面的值对比。

使用道具 举报

Rank: 8Rank: 8

注册时间
2009-3-28
最后登录
2017-5-11
在线时间
80 小时
阅读权限
90
积分
18387
帖子
120
主题
15
精华
0
UID
2181
发表于 2014-9-24 15:44:14 |显示全部楼层
blue_fairy 发表于 2014-9-24 15:38
tar打包文件的时候,同时生成一个*.md5的文件,文件里面存放该tar包的MD5值,等到后面ftp上去后,在ftp那台 ...

在ftp节点服务器上只有ftp帐号权限(就是说只能ll dir ls 上传、下载删除新建文件和文件夹的权限)
没有其他权限····

使用道具 举报

Rank: 8Rank: 8

注册时间
2013-2-26
最后登录
2014-12-24
在线时间
47 小时
阅读权限
90
积分
13105
帖子
13
主题
2
精华
0
UID
37257
发表于 2014-9-24 15:44:28 |显示全部楼层
你问题没看清楚。。你ftp服务器上权限不足。。。
那可以尝试上传完后,把ftp上文件下载下来对比。。(用脚本自动化实现)

使用道具 举报

Rank: 8Rank: 8

注册时间
2009-3-28
最后登录
2017-5-11
在线时间
80 小时
阅读权限
90
积分
18387
帖子
120
主题
15
精华
0
UID
2181
发表于 2014-9-24 15:56:15 |显示全部楼层
blue_fairy 发表于 2014-9-24 15:44
你问题没看清楚。。你ftp服务器上权限不足。。。
那可以尝试上传完后,把ftp上文件下载下来对比。。(用 ...

备份的文件要几十G每天都在增加,越来会越大,甚至上几百GB;

这样传上去,在下载回来做比较,我感觉这个方法不太科学,太耗费服务器资源了,容易把机器搞挂

使用道具 举报

Rank: 8Rank: 8

注册时间
2013-2-26
最后登录
2014-12-24
在线时间
47 小时
阅读权限
90
积分
13105
帖子
13
主题
2
精华
0
UID
37257
发表于 2014-9-24 16:16:11 |显示全部楼层
ices 发表于 2014-9-24 15:56
备份的文件要几十G每天都在增加,越来会越大,甚至上几百GB;

这样传上去,在下载回来做比较,我感觉这 ...


刚想了种方法,你可以试试。我这边测试了下OK。
echo "exit" |lftp IP -e ”ls 目录(注意是相对路径)“ -p 端口 -u 用户名,密码 |grep 你需要查看的文件|awk '{print $NF,$5}'

这样可以查看到ftp上指定文件的大小。路径那里写具体文件路径也行。。 这样就不需要后面的grep了。

使用道具 举报

Rank: 8Rank: 8

注册时间
2010-10-15
最后登录
2016-4-3
在线时间
1023 小时
阅读权限
90
积分
175563
帖子
696
主题
14
精华
0
UID
10623
发表于 2014-9-24 22:58:11 |显示全部楼层
  1. curl -s "ftp://path/"|grep -Po '[\d]+(?=[ ]+([^ ]+[ ]+){3}filename)'
复制代码

使用道具 举报

Rank: 8Rank: 8

注册时间
2011-9-16
最后登录
2020-2-21
在线时间
948 小时
阅读权限
90
积分
266217
帖子
2158
主题
2
精华
0
UID
15647
发表于 2014-9-25 08:48:12 |显示全部楼层
路过了解一下

使用道具 举报

Rank: 8Rank: 8

注册时间
2010-9-7
最后登录
2017-7-20
在线时间
111 小时
阅读权限
90
积分
23864
帖子
17
主题
0
精华
0
UID
10323
发表于 2014-9-25 09:19:04 |显示全部楼层
对比文件的md5值能最准确有效的查看文件完整性

使用道具 举报

Rank: 8Rank: 8

注册时间
2009-3-28
最后登录
2017-5-11
在线时间
80 小时
阅读权限
90
积分
18387
帖子
120
主题
15
精华
0
UID
2181
发表于 2014-9-25 09:59:22 |显示全部楼层
jiaozwtj 发表于 2014-9-25 09:19
对比文件的md5值能最准确有效的查看文件完整性

只有ftp帐号的权限,只能运行ftp命令行的那几个命令

使用道具 举报

Rank: 8Rank: 8

注册时间
2009-3-28
最后登录
2017-5-11
在线时间
80 小时
阅读权限
90
积分
18387
帖子
120
主题
15
精华
0
UID
2181
发表于 2014-9-25 10:02:31 |显示全部楼层
dn833 发表于 2014-9-24 22:58

无任何返回··

使用道具 举报

Rank: 8Rank: 8

注册时间
2009-4-15
最后登录
2017-12-4
在线时间
906 小时
阅读权限
90
积分
85989
帖子
149
主题
1
精华
0
UID
2479
发表于 2014-9-25 15:20:16 |显示全部楼层
目测只能通过简单粗暴的比对文件大小进行初步的验证

使用道具 举报

Rank: 8Rank: 8

注册时间
2010-10-15
最后登录
2016-4-3
在线时间
1023 小时
阅读权限
90
积分
175563
帖子
696
主题
14
精华
0
UID
10623
发表于 2014-9-25 20:55:42 |显示全部楼层
ices 发表于 2014-9-25 10:02
无任何返回··

恩,因为你是不合格的CP工程师所以没有任何返回

使用道具 举报

您需要登录后才可以回帖 登录 | 注册

IT运维专家网感谢您的支持

合作联系: QQ:67888954/MSN:cnseek@msn.com/mail:netseek@linuxtone.org

Archiver|手机版|感谢所有关心和支持过LinuxTone的朋友们 转载本站内容请注明原作者名及出处 ( 京ICP备08103151 )   |

GMT+8, 2020-2-21 23:38 , Processed in 0.028278 second(s), 14 queries , Apc On.

Powered by Discuz! X2 Licensed

© 2001-2011 Comsenz Inc.

回顶部