怎样最快的方式检测两台服务器之间的某个图片完全一样？

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

• 请不要在回答技术问题时复制粘贴 AI 生成的内容

这是一个创建于 1831 天前的主题，其中的信息可能已经有所发展或是发生改变。

主服务器 A 有一张图片，备份服务器 B 要时刻抓取服务器 A 上的图片到 B，B 服务器抓取之前需要判断 A 服务器上的图片在 B 服务器上是否有一模一样的图片，那么，怎样以最快的方式判断 A 服务器山的该图片和 B 服务器上的该图片完全一样？

服务器

图片

抓取

判断

23 条回复 • 2019-12-24 19:40:26 +08:00

Dex7er

2019-12-24 13:56:24 +08:00

比较好奇为什么会不一样？

whileFalse

2019-12-24 14:02:22 +08:00

如果每张图片都有单独的名字，只是有可能内容会变，可以尝试使用 If-Modified-Since 之类的方式。
不过我还是觉得你应该更详细地描述需求。

doveyoung

2019-12-24 14:05:00 +08:00

不是太明白你的意思，是要对比两个服务器上的文件一样吗？
md5 计算一下再对比

also24

2019-12-24 14:10:11 +08:00 via Android

首先，你这个 “抓取”，是走什么协议的？

http ? nfs ? ftp ? rsync ? 或者自己实现的私有协议？

terrywater

2019-12-24 14:10:25 +08:00

md5 计算文件，看看值是否相同

terrywater

2019-12-24 14:10:54 +08:00

云盘的秒传，

Songxwn

2019-12-24 14:11:58 +08:00

哈希值呗。

zappos

2019-12-24 14:13:56 +08:00 via Android

图片不要用单独的名字，就用它的 hash。单独的名字存数据库里。

vone

2019-12-24 14:14:30 +08:00

如果是通过 http 传输的话可以使用 HTTP 协议中的 etag 和 if-none-match。
例如：
请求头包含 if-none-match: "1d4577fa453bc8b"
响应头为 etag: "1d4577fa453bc8b"
此时服务器会返回 304,代表文件未变化。
etag 值为 HTTP 协议的规范,服务端程序会自动返回。同步程序需要做的就是储存此值，等待第二次下载时在请求头的 if-none-match 中写入此值。