<div dir="ltr"><div><br></div><div>I suspect you want a duplicate finder more than a file transfer tool.</div><div><br></div><div>EG: <a href="https://stromberg.dnsalias.org/~strombrg/equivalence-classes.html">https://stromberg.dnsalias.org/~strombrg/equivalence-classes.html</a></div><div><br></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Tue, Jun 7, 2022 at 5:36 PM hput via rsync <<a href="mailto:rsync@lists.samba.org" target="_blank">rsync@lists.samba.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">I want to merge 3 slightly different directories of mostly images.<br>
<br>
Not just mostly but the vast majority are images files.<br>
<br>
Each directory has about 285 GB of files.<br>
<br>
At first I thought I would just run a straightish rsync from each directory<br>
inturn starting with the biggest which is not much bigger ... maybe<br>
a few MB.<br>
<br>
Like:<br>
<br>
rsync -vvrptgoD --stats /biggest/ /emptydir/<br>
<br>
rsync -vvrptgoD --stats /next-biggest/ /same-dir/<br>
<br>
rsync -vvrptgoD --stats /smallest/     /same-dir<br>
<br>
But after some thought I'm guessing that might be wrong headed way to go.<br>
<br>
All three dir have mostly the same stuff in them and in the same<br>
places but a close inspection, given the 285 GB would be pretty much a<br>
non-starter.<br>
<br>
There will be thousands that have matching names maybe newer or older<br>
bigger etc.  And maybe some of the same stuff but in slightly  different places.<br>
<br>
How can I make rsync do the work for me?  So I don't end up loosing files.<br>
<br>
<br>
<br>
-- <br>
Please use reply-all for most replies to avoid omitting the mailing list.<br>
To unsubscribe or change options: <a href="https://lists.samba.org/mailman/listinfo/rsync" rel="noreferrer" target="_blank">https://lists.samba.org/mailman/listinfo/rsync</a><br>
Before posting, read: <a href="http://www.catb.org/~esr/faqs/smart-questions.html" rel="noreferrer" target="_blank">http://www.catb.org/~esr/faqs/smart-questions.html</a><br>
</blockquote></div>